Разборы

Что надо знать о блэклистах, если вы делаете email-рассылки

Блэклист или чёрный список в email-маркетинге — это перечень IP-адресов или доменов, подозреваемых в рассылке спама. Чтобы попасть туда, необязательно на самом деле рассылать спам — достаточно лишь вызвать подозрения у пользователей, сервисов или спам-фильтров. 

В этой статье подробно расскажу о том, какие бывают блэклисты, за что туда можно попасть и как оттуда выбраться, если это всё-таки произошло.

Что такое блэклисты и какие они бывают

Существуют частные и публичные блэклисты: первые составляют сами пользователи, вторые формируются на основании множества данных, в том числе о репутации домена и IP-адреса, с которого делается рассылка.

Частные блэклисты

Вы добавили какой-то адрес или домен в черный список в своей почтовой программе или на почтовом сервере. Письма от этого отправителя больше не попадут к вам в ящик. Этот список отправителей — и есть ваш частный блэклист.

Многие крупные компании имеют свои черные и белые листы для отправителей email-рассылок. Максимум, чем грозит частный черный список, — блокировка писем у получателей с почтой на определённом домене. Если вы видите, что ваши письма не доставляются на почты конкретного сервиса и считаете, что это произошло по ошибке — такие вопросы легко решить в переписке с администратором почтового сервера.

Публичные блэклисты

Публичные, открытые блэклисты — это выложенные в открытый доступ списки «плохих» отправителей. Они гораздо опаснее, потому что их используют многие провайдеры почты и спам-фильтры.

Если домен или IP-адрес попадет в такой список, письма могут заблокировать на большом подмножестве адресов. Например, если попасть в блэклист международной организации SpamHaus, отклонятся все письма на доменах hotmail, live, outlook, msn и, по нашим наблюдениям, 20 % писем на gmail.

Дальше мы будем говорить именно про публичные блэклисты, так как они несут большую угрозу отправителям массовых рассылок и имеют более существенное влияние на их деятельность, чем частные черные списки.

Популярные блэклисты

Блэклистов очень много. Самые распространенные: SpamHaus, SpamCop, SORBS. Это те черные списки, с которыми мы чаще всего сталкиваемся в работе антиспам-отдела Unisender.

Хорошую инфографику о блэклистах сделали Return Path. Буду ссылаться на нее в этой статье.

Доступ к публичным блэклистам может быть платным или бесплатным — его может получить администратор любого почтового сервера, а также почтовые провайдеры. У провайдеров, впрочем, есть собственные чёрные списки, формирующиеся на совокупных данных из публичных блэклистов и собственных наблюдениях за поведением отправителей. Но они закрыты от внешнего использования. 

В упрощенном виде схема работы блэклистов выглядит так:

Популярные блэклисты email
Популярные блэклисты, источник: Return Path
Как работают блоклисты в почте
Если отправитель будет замечен в блэклистах, письмо не будет доставлено

Обратиться к блэклистам и проверить наличие своего IP или домена в них может также и любой отправитель, воспользовавшись специальными сервисами.

Как проверить IP-адреса сервера и домена в спам-базах

Причины попадания в блэклисты

В нашем отделе мы ежедневно мы сталкиваемся с попаданием IP-адресов и доменов в различные черные списки. Почему так происходит?

Почему рассылка попадает в спам Gmail blocklistl
Какие блэклисты использует Gmail, источник: Return Path

Попадание в черный список происходит из-за снижения репутации отправителя (IP-адреса или домена). Расскажу одну из самых часто встречающихся ситуаций — конечно, при условии, что мы говорим не о реальных спамерах, а о добропорядочных отправителях с правильно собранной базой.

Спам-рассылки. Почему это не вариант

Ситуация

Компания делает рассылки по своему списку адресов, которые собирала в течение нескольких лет. Естественно, среди адресатов есть люди, которые активно читают письма, покупают товары.

Но есть и те, кто попал в список благодаря покупке какого-то товара год назад, и больше они не заинтересованы в товарах. Эти адресаты не открывают письма, не отписываются от них, а просто удаляют (или даже не удаляют).

Проходит некоторое время, и отправитель попадает в блэклист. Почему?

Часто неактивные адреса, которыми перестал пользоваться владелец, становятся спам-ловушками почтового провайдера или какой-то антиспам-службы. Этот адрес может и дальше получать ваши письма, но он никак не реагирует на них, не читает и не отписывается. Спустя некоторое время (полгода-год) после того, как реальный владелец ящика перестал в него заходить, такой ящик становится ловушкой.

Когда следующее письмо компании приходит на этот ящик, спам-служба уже считает, что это письмо было отправлено на спам-ловушку. И добавляет отправителя в свой черный список. Он моментально распространяется по всем серверам, которые используют этот черный список при приеме почты.

Есть еще две распространенные ситуации, которые могут повлечь за собой попадание в черный список.

Первая ситуация, когда вы взяли адрес на сайте вашего будущего клиента либо записали его в бумажную анкету, и потом делаете рассылку на этот адрес — провайдер будет считать, что email включен в базу без согласия владельца.

Вторая ситуация, когда адрес подписался через форму на вашем сайте, но у вас нет подтверждения подписки через Double Opt-In.

Ситуации похожи. В ваш список попадают адреса, про которые вы ничего не знаете. Правильно ли написан адрес на бумаге? Корректный ли адрес на сайте? Сам ли владелец подписал свой ящик через форму на вашем сайте? Часто на сайтах специально размещаются адреса-ловушки, чтобы препятствовать рассылкам тех, кто пользуется автосбором адресов.

Сегодня это очень острая проблема, затрагивающая многих отправителей. Некоторые почтовые провайдеры специально запускают своих роботов, чтобы те подписывались на любые формы, которые найдут в интернете. Потом они следят за тем, какие рассылки им придут.

По правилам email-рассылок вы должны первым же письмом попросить подтвердить подписку. Если вы просто начнете делать рассылки, велика вероятность, что попадете в черный список. У сервиса, который занес вас в черный список, будут все основания не удалять вас оттуда.

У нашей антиспам-службы дважды были проблемы, когда Mail.Ru сами писали нам и указывали, что такой-то клиент шлет по спискам, где нет согласия на рассылку. Обычно это тематики микрофинансирования, кредитов.

Как выбраться из блэклиста

Предположим, вы попали в черный список.

Как узнать, что ваш адрес попал в блэклист. Если вы — владелец сервиса, на почту придет письмо. Либо это можно понять по логу в ответе сервера. Например, Hotmail при попадании адреса в блоклист SpamHaus может ответить вот так:

554 5.7.1 Service unavailable; Client host [IP_ADDRESS] blocked using zen.dnsbl;

Что теперь делать. Для начала сделайте все необходимые изменения в рассылках, чтобы предотвратить повторное попадание в черный список. Проверьте, чтобы были выполнены все требования из нашего чек-листа «Как не попасть в чёрный список».. Если все хорошо, то приступим к удалению из блэклиста.

Почему надо, чтобы все требования выполнялись?

Очень часто первое удаление из блэклиста сделать просто. Компании с пониманием относятся к таким проблемам и удаляют отправителя из черного листа. Но если отправитель попадает в блэклист вновь и вновь, это чревато тем, что антиспам-служба откажется удалять ваш адрес из своего черного списка. Тогда доставляемость очень пострадает.

Разберемся, как удалить адрес из блэклиста SpamHaus. Это один из самых серьезных блэклистов, который влияет на доставку на множество доменов.

Заходим в SpamHaus Blocklist Removal Center и вводим в поле свой IP-адрес или домен. Узнать, что именно было заблокировано, можно, просмотрев логи доставки. Также, если вы являетесь владельцем домена или IP адреса, вам придет уведомление о блокировке.

блоклист айпи-адресов
Уведомление о блокировке IP-адреса

Здесь мы видим, что произошла блокировка по IP-адресу. SpamHaus сообщает, что была несанкционированная массовая рассылка по непроверенным email-адресам.

Ниже SpamHaus дает рекомендации, что нужно сделать отправителю, чтобы не попадать в блэклист:

  1. Использовать капчу, чтобы предотвратить подписки роботов.
  2. Использовать double opt-in регистрацию, чтобы предотвратить нежелательные подписки.
  3. Ознакомиться с правилами массовых рассылок, которые SpamHaus дает. Мы их систематизировали в нашем чек-листе.

Чуть ниже мы видим, что нужно сделать для удаления из блэклиста. SpamHaus предлагает отправить письмо их команде и объяснить, что именно произошло, какие действия были предприняты для того, чтобы решить проблему.

После отправки письма, в течение 24 часов команда SpamHaus отвечает и сообщает либо о том, что адрес был удален из черного списка, либо что нужна дополнительная информация.

Как выбраться из блэклиста спамхаус
SpamHaus рассказывают, куда писать

Все, вы больше не в черном списке.

Чеклист «Как не попасть в черный список»

Первое. Обязательно используйте Double Opt-In.

Так вы избежите ненужных подписок и регистраций роботов на вашем сайте.

Мы в своей практике сталкивались с такими случаями, когда клиент попадал в черный список, потому что на его рассылку подписался робот антиспам-службы, а у клиента не было настроено письмо подтверждения рассылки.

Например, за последние 3 дня мы трижды столкнулись с жалобами SpamHaus на этот счет.

Второе. Не отправляйте письма тем, кто их не читает.

Мы знаем, какую боль причиняет удаление адресов из списка. Ведь каждый адрес — ваш потенциальный клиент.

Если адресат не прочитал одно ваше письмо — не страшно. Если он не читает письма месяц — может быть, ушел в отпуск. Но если за 3 месяца или полгода не было прочитано ни одного письма, то удаляйте такой адрес из вашей базы. Он не принесет вам денег. Но из-за него можно попасть в черный список.

Как я уже рассказал, неактивные адреса могут становиться спам-ловушками. Если такие есть в вашем списке, это может нанести серьезный урон репутации.

Удалять неактивных подписчиков очень полезно, и не только для доставляемости.

Третье. Подтверждайте подписку на рассылку в первом же письме. Если вы только начинаете делать рассылки, а адреса собирались уже продолжительное время, попросите адресатов первым же письмом подтвердить, что они хотят получать вашу рассылку. В противном случае, возможно, что вы будете делать рассылки роботам.

Четвертое. Капча. Желательно добавить капчу в вашу форму подписки, чтобы избежать лишних подписок роботов.