Вы здесь

Моллом заблокировал 100 000 000 попыток добавить спам

В Молломе, нашем стартапе по фильтрации спама, мы только что прошли две важные вехи: блокировали 100 000 000 попытку добавить спам-сообщение и теперь мы обслуживаем более 10 000 сайтов.

Моллом заблокировал 100 000 000 попыток добавить спам

Только 3 месяца назад мы отпраздновали 50 000 000 блокировку спам-сообщения, а за два месяца до этого мы достигли отметки в 25 000 000 блокировок спам-сообщений. Эти вехи проходятся очень быстро. Удвоим мы это число в ближайшие 3 месяца? Покажет только время.

На самом деле, эти данные только с наших публичных серверов и не включают сообщения, которые обрабатываются на частных серверах, с которыми мы работаем в интересах крупных клиентов. Например, Моллом фильтрует ещё около 4 000 000 сообщений для Netlog.

Всего мы обрабатываем около 150 000 000 сообщений в месяц! Так как может быть использовано несколько HTTP-запросов для обработки одного сообщения, то мы обрабатываем более 200 000 000 HTTP-запросов каждый месяц. Каждый из этих запросов динамический и довольно дорогой; они получают данные и вызывают парсер, статистический классификатор, модели репутации и так далее. Как вы можете себе представить, это не тривиальный объём работы. Скажем, это в 5 раз больше, чем сайт подобный drupal.org, который обслуживает менее 20 000 000 запросов динамических страниц в месяц.

В настоящее время мы работаем над некоторыми важными архитектурными изменениями, которые позволят Моллому быстрее учиться и сделают его более удобным для отладки, анализа и контроля за действиями. Мы также заняты обновлением нашей инфраструктуры, чтобы справиться с нашим ростом. Эта работа в процессе, но как только она будет закончена, мы сможем сосредоточиться на повышении эффективности наших классификаторов и добавлении новых возможностей.

Одно можно сказать наверняка — мы собираемся продолжать делать то, что делаем и если вы являетесь пользователем Моллома, мы рады что вы вместе с нами.