Добавлено: Суббота 02 Июня 2007 1:27 Заголовок сообщения:
Да, гостям лучше на форуме не разрешить писать. Если человек любит Москву и занимется фотографией - пожалуйста, пусть регистрируется, а что скрываться, здесь все свои. А что я не раз сталкивался с тем, что не проверив, зашёл ли я на форум под своим ником или нет, начинал что-то писать и в итоге выходил аноним - это не есть хорошо. Так бы я хоть при попытке отправить пост понял, что не зашёл.
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Суббота 02 Июня 2007 20:48 Заголовок сообщения: СПАМ в нашем форуме!
Друзья, без паники!...
Извините за несколько дней тишины и отсутствия действий... сейчас все поясню...
Да, наш форум заваливается СПАМом... Причем, это делается каждый день, в день по-многу раз, и мы постоянно следим за ним и чистим все подобные сообщения. Просто сейчас на несколько дней форум остался без присмотра - вот и всего-то... Уже вчера все посты со спамом были подчищены.
Почему наш форум заваливается СПАМом?
Сайт весьма популярен (годовая аудитория - миллион посетителей) и продолжает развиваться, соответственно возрастает интерес к нему не только со стороны хороших пользователей, но и со стороны нечестных SPAMеров и SEOшников, желающих за счет mosday.ru "на халяву" продвинуть свои ресурсы...
Плюс сайт имеет хорошую тематику с весьма уникальным контентом (в индексах каждой из поисковых систем находится около ста тысяч страниц нашего сайта, а по многим ключевым запросам сайт выдается в первых позициях), что особо ценно для спаммеров...
Как так получилось?
Форум новенький. До недавнего времени на форуме, кроме меня, был всего один модератор. Сейчас затишье, лето, а модераторы - тоже люди и нужны были две недели отдыха. Поэтому последнее время модерил только я один... А на этой неделе и мне пришлось на несколько дней отлучиться от форума. За фотографиями наблюдение не прекращалось, а вот форум остался на эти дни без внимания...
А как насчет фильтров и проверочных кодов?
На форуме уже имеется несколько рубежей защиты...
Продумана безопасность, реализована защита от простых хакерских атак, закрыт постинг из внешних источников и т.п.
Включена защита от флуда (нельзя запостить сразу много сообщений, нельзя подать много регистраций с одного IP).
При регистрации требуется ввод защитного кода, а затем еще и подтверждение E-mail.
Может сделать доступ только для зарегистрированных участников?
Форум только начинает развиваться и пока очень не хочется вводить ограничения на постинг только для зарегистрированных.
Иногда посетитель читает ветку и под конец у него возникает желание добавить свое мнение - а тут такая преграда в виде обязательной регистрации, которая вполне способна оттолкнуть именно нормального пользователя, но уж никак не спамщика.
Уже многократно наблюдал, когда полезную информацию размещали именно незарегистрированные гости.
Почему бы не удалить юзера-бота-нарушителя и поставить его IP-адрес в черный список?
Как правило, в наш форум спамят не боты (роботы), а именно живые люди вручную, причем, предварительно проходят регистрацию, вводят защитный код и подтверждают E-mail. Иногда регистрируются в один день, а спамить начинают только на следующий. Ходят через прокси-сервера, используя каждый раз разные IP-адреса. Кстати, боты уже давно умеют даже распознавать многие защитные коды.
Поэтому ведение черных списков имен пользователей, и запрещенных IP-адресов только съедает время администрации и серверные ресурсы, но, увы, практически не имеет эффекта!
Что делается, чтобы ситуация не повторялась?
Сейчас среди наших форумчан организуется команда хотя бы из пяти модераторов. Это позволит своевременно замечать и удалять некорректные посты и даст больше гарантий на 24-часовой контроль...
Со временем появятся и автоматические фильтры на слова.
У меня большой обыт в борьбе со спамом и несанкционированной рекламой. И практика показала, что самый эффективный способ - именно ручная проверка с премодерацией!!! Конечно, не стоит игнорировать различные технические методы, но всецело полагаться на них нельзя. Премодерация хороша, например, на отзывах об объектах (там у нас все отзывы публикуются только после проверки, итог - спама посетители вообще не наблюдают), но на форуме все очень динамично, иногда посты идут один за другим с малым интервалом времени и тут совершенно нежелательны задержки (пока модератор проверит пост)!
Увы, СПАМ (несанкционированная реклама в интернете) причиняет очень много головной боли владельцам сайтов, потраченного трафика посетителям и накладных ресурсов серверам.
А учитывая нищету и малообразованность многих россиян, они готовы за копейки сидеть часами перед мониторами и долбиться на все сайты, засорять все форумы в надежде, что хоть каждое десятое сообщение не будет удалено и даст для их работодателей положительный результат.
Вот. Постарался дать очень подробный и исчерпывающий ответ!
Приятно слышать, что многих волнует судьба и чистота проекта, но печально наблюдать панику по такой банальной проблеме. Мы - тоже люди...
Поверьте - делается все возможное в этом направлении!
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Суббота 02 Июня 2007 20:58 Заголовок сообщения:
Ilja Pelymskij писал(а):
Предлагается добавить фильтр против спам-роботов. Честно говоря, они ДОСТАЛИ.
В принципе есть отдельная тема, посвященная этой проблеме, но раз уж есть этот раздел, решил и в него написать...
Гость писал(а):
Ребята, ну потерпите немного всё будет, форум только развивается
smarat писал(а):
Из уст гостя звучит как то неубедительно...
Подобные фильтры неэффективны. Те сообщения со спамом удалены. Гость был прав - форум только развивается, причин для паники нет.
Обратите внимание, что обсуждение данной проблемы (спам в нашем форуме) ведется в отдельной ветке!
Ilja Pelymskij автор фотографий
Сообщения: 651 12.05.2007 Москва, Академический
Добавлено: Пятница 13 Июля 2007 12:28 Заголовок сообщения:
Добавлено: Суббота 14 Июля 2007 13:42 Заголовок сообщения:
Согласен с предыдущим оратором, надо все таки усилить борьбу со спамерами!
emk модератор
Сообщения: 1046 12.05.2007 Москва
Добавлено: Суббота 14 Июля 2007 22:39 Заголовок сообщения:
Мда, точно... Но они уже несут заслуженное наказание с отбываением в офлайне пожизненно.
Ну что ж, мы по-прежнему рады всем гостям, странникам и путешествующим по инету. Так что, welcome!
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Четверг 26 Июля 2007 13:45 Заголовок сообщения:
Alexey Slizkov писал(а):
Обратите внимание, что обсуждение данной проблемы (спам в нашем форуме) ведется в отдельной ветке!
Часть сообщений из других тем, касающихся СПАМа в форуме, перенесены сюда (в эту тему)!
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Воскресенье 07 Октября 2007 0:44 Заголовок сообщения:
Сегодня в нашем форуме установлена еще одна многоуровневая защита от СПАМа!
Также модернизирован и введен для гостей код подтверждения и запрещен всем новым участникам постинг ссылок (как правило именно спамеры-боты это и делают), а уличенные в спаме новые пользователи будут удаляться автоматически. Цель - максимально сократить человеческое участие в борьбе со спамом.
Надеюсь, теперь это сведет к минимуму работу наших модераторов по бесконечной чистке форума от несанкционированной рекламы и публикации всяких непристойностей...
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Воскресенье 21 Октября 2007 22:40 Заголовок сообщения:
Alexey Slizkov писал(а):
Сегодня в нашем форуме установлена еще одна многоуровневая защита от СПАМа!
...
Надеюсь, теперь это сведет к минимуму работу наших модераторов по бесконечной чистке форума от несанкционированной рекламы и публикации всяких непристойностей...
Работа была не напрасна! За первые две недели работы форума с новыми защитными кодами и написанными спам-фильтрами, из более 200 попыток спаммеров, просочилось всего одно сообщение рекламного характера!
Alexey Slizkov администратор
Сообщения: 3603 01.01.2001 Москва
Добавлено: Воскресенье 17 Февраля 2008 16:35 Заголовок сообщения: Автоматически удалено свыше 1000 сообщений СПАМа!
За первые 4 месяца работы нашей, установленной тогда, многоуровневой защиты от СПАМа было автоматически зафиксировано и удалено уже свыше 1000 сообщений рекламного характера!!! И это цифры только по тем случаям, когда пользователь-спаммер зарегистрировался, напостил спама, система это распознала и сама удалила и сообщение, и самого (его учетную запись) противного пользователя с нашего чистого форума.
Еще на порядок (во много раз) больше идет сообщений от авторассылающих роботов под видом гостя, но они даже не проходят первый рубеж (простой защитный код, но не стандартный, а нашей собственной разработки, а, соответственно, их стандартные программы распознания здесь оказываются бессильными).
Все это радует, очень радует, особенно меня, как разработчика этого сайта, потому что теперь ценное время я могу тратить не на тупое удаление СПАМа, а на дальнейшее развитие проекта - чем, собственно, и занимаюсь!
Стоит отметить, что ничто не идеально и подобные нововведения тогда добавили немножко лишних действий гостям форума (ввод защитного кода), да и сама наша система автоопределения СПАМа не всегда со 100%-й чёткостью может справиться с задачей, в итоге из этих тысячи сообщений несколько все же просочились (правда, все равно в некликабельном виде) и, увы, 4 раза система нормальное сообщение просто с внешней ссылкой на сторонний ресурс от нормального пользователя восприняла, как СПАМ, и удалила! Приносим извенения! Но все логи ведутся, и эти хорошие сообщения были восстановлены или переписаны в другой вид, но ничего не потерялось даже тут.
Иван гость
Добавлено: Воскресенье 17 Февраля 2008 17:00 Заголовок сообщения:
Да... слава программерам - сколько модераторского времени спасли!!!
MosDay.ru
Сообщения: 2742 01.01.2001 Москва
Добавлено: Пятница 20 Марта 2009 11:30 Заголовок сообщения:
К примеру, лишь за один обычный вчерашний день система защиты спасла форум от 266 СПАМовых сообщений. И примерно так каждый день...
Для контроля просмотрели их все вручную. Ни одного нормального. Сплошная пошленькая рекламка - в основном порнокартинок, секс-услуг, виагры и т.п.
Иногда, правда очень редко, под горячую руку системы попадаются адекватные сообщения от гостей, содержащие всякие внешние ссылки. Но это крайне редко.
Мы обычно не просматриваем эти кучи автоматически удаленных роботом сильно подозрительных сообщений с форума, лишь изредка для контроля правильности работы фильтров, поэтому если вдруг Ваше сообщение автоматически удалилось (об этом выдается информационное уведомление), то напишите нам об этом и мы его восстановим вручную.