CEO WakaTime: на ProductHunt зарегистрировано более 1 млн пользователей, но больше половины из них — боты

Алан Хэмлет (Alan Hamlett), CEO WakaTime, рассказал, что последнее время начал замечать много сгенерированных комментариев на ProductHunt. Ему нравится площадка и её идеология, поэтому он решил выяснить, сколько примерно ботов зарегистрировано на платформе.

Сперва Алан просто проверил свою теорию. Для этого он запустил новый продукт на ProductHunt и в описание добавил небольшую промпт-инъекция. В тексте он попросил нейросеть добавить в комментарий фразу «Me good LLM». Многие пользователи выполнили просьбу, а это говорит о том, что это неживые люди.

Из общедоступных данных Алан выяснил, что на платформе зарегистрировано более 1 млн пользователей, но вычислить ботов сложно. Сперва он пытался проанализировать время, в которые пользователи обычно оставляют комментарии. Так удалось выяснить, что диаграмма времени публикации комментариев у ботов более равномерная, так как они не делают перерыв на сон и могут заходить на платформу каждый час.

Этого оказалось мало для анализа, и Алан выстроил систему распознавания ботов, которая зависит сразу от несколько параметров. Он учитывал время публикации комментариев, дату регистрации, поведенческие шаблоны. Также Алан заметил, что боты всегда используют символы, которые человеку сложно набрать на клавиатуре, например, длинное тире (—) и символ торговой марки (™). Также боты всегда пишут название компании полностью, даже если оно очень длинное.

В итоге Алан пришёл к выводу, что более 60% пользователей ProductHunt — боты. Комментарии от них массово начали появляться в конце 2022 года, примерно в то же время, когда OpenAI выпустила ChatGPT. В основном боты используются для продвижения проектов. Можно приобрести услуги по накрутке комментариев и голосов.

Алан считает, что ProductHunt всё ещё можно использовать для запуска своих проектов, но можно уделять меньше времени на оформление страницы. Также он отмечает, что не стоит отвечать на комментарии, так как большая часть их них — сообщения от ботов.