Как удалить ip из черного списка spamhaus

Последние статьи раздела SEO и реклама

09.04.2020

Seo продвижение корпоративных сайтов: ориентир на решение задач и потребности бизнеса

…

05.08.2019

Отраслевые решения CRM для бизнеса

Customer Relationship Management (CRM) — особая система, облегчающая работу специалистов в процессе общения с клиентами, обеспечивающая достижение……

30.12.2018

Что такое блог и зачем он нужен?

Блог – это особый сайт, на котором можно ознакомиться с полезной тематической информацией…

01.01.2018

Сетка сайтов сателлитов: эффективное продвижение сайта

Создание тематических сателлитов обеспечивает высокие показатели…

API возвращает JSON строку, например:

Copy all

{"data":{"127.0.0.1":{"domains_count":0,"domains_list":null,"spam_rate":0,"submitted":"2021-08-10 04:32:53","updated":"2021-10-14 10:58:10","frequency":9,"in_antispam":0,"in_security":0,"appears":0,"network_type":"good_bots","country":null,"sha256":"12ca17b49af2289436f303e0166030a21e525d266e209267433801a8fd4071a0"},"stop_email@example.com":{"frequency":3,"submitted":"2021-01-01 02:25:06","updated":"2021-01-15 03:01:02","spam_rate":1,"appears":1,"disposable_email":1,"exists":null,"sha256":"6d42ca0235d72b01a2b086ad53b5cfac24b5a444847fad70250e042d7ca8bf59"}}}

Copy all

{"data":{"email_08c2495014d7f072fbe0bc10a909fa9dca83c17f2452b93afbfef6fe7c663631":{"frequency":4,"submitted":"2018-10-16 01:53:49","updated":"2021-04-15 08:49:53","spam_rate":1,"exists":1,"appears":0,"disposable_email":1}}}

Для хэша адреса IP v4:

Copy all

{"data":{"ip4_f46604ded89bbd0e8e478172a9a650f4825a763053ad2e3582c8286864ec4074":{"domains_count":0,"domains_list":null,"spam_rate":1,"submitted":"2018-07-29 07:09:45","updated":"2019-09-25 15:33:00","frequency":13627,"in_antispam":0,"in_security":0,"appears":0,"network_type":"hosting","country":"GB"}}}

Расшифровка ответа:

data — обычно массив проверенных записей представлен в следующем формате: «record»: {массив проверенных результатов}. Иногда ответ «data» возвращает строку «In progress», это означает, что параллельный PHP-процесс работает с точно такими же параметрами — auth_key, method_name и records.

Важно! Ответ «In progress» является значимым его следует учитывать, так как если вызов API содержит большое количество элементов, то они могут быть проверены частично и выдастся ответ «In progress». Только при повторном вызове будут проверены все оставшиеся элементы

Массив с проверенными записями содержит следующие поля:

• appears — флаг присутствия в черных списках (показывает блокировку на настоящий момент),

• sha256 — хэш sha256 адреса,
• network_type — принадлежность к определенному типу сети (возможно в дальнейшем добавятся новые типы):

• spam_rate — спам-рейтинг от 0 до 100%. 100 означает точно спам (отношение спам запросов к общему количеству запросов). Параметр «spam_rate» может иметь значение от 0 до 1:  «spam_rate»: «1» — 100% запросов было спамом, «spam_rate»: «0,75» — 75% запросов было заблокировано как спам,
• submitted — дата и время первой спам-активности,
• updated — дата и время последнего обновления статуса,
• country — буквенный код страны, которой принадлежит IP адрес, в формате ISO 3166-1 alpha-2,
• exists — существует ли данный email (0 — не существует, 1 — существует, null — пустой статус, адрес не находится в списках в данный момент),
• disposable_email — является ли данный email временным (0 — обычный, 1 — временный, null — пустой статус, адрес не находится в списках в данный момент),
• frequency — количество сайтов отметивших запись как спам. Может быть от 0 до 9999 (показывает всю активность с самого начала обнаружения адреса)
• in_antispam — IP адрес найден в чёрном списке анти-спам,
• in_security — IP адрес найден в чёрном списке безопасности (brute-force),
• domains_count — число доменов, найденных на IP адресе.

В случае указания параметра «date» данные ответа приводятся только на указанную дату. Посредством POST запроса можно за один раз отправить на проверку до 1000 записей.

Если не было активности с адреса в течение 14 дней, то запись удаляется из черных списков, но вся история остаётся.

Проверка на спам IP-адреса

Настройки большинства почтовых серверов поддерживают опцию проверки IP-адреса по публичным спам-базам: спискам DNSBL. Подобная методика позволяет быстро обрабатывать поток почтового трафика с минимальной задержкой, так как обработка одного запроса занимает миллисекунды. Если хост-отправитель найден в черных списках, почтовый сервер запоминает его IP-адрес и в дальнейшем не обрабатывает входящие запросы.

К недостаткам подобного метода относится высокая вероятность ложных срабатываний из-за ошибок в используемых списках, а также компрометация всей подсети из-за одного нарушителя.

Достоверность проверки существенно возрастает при использовании сразу нескольких DNSBL – агрегированный результат позволяет принять решение о необходимости фильтрации. К сожалению, и этот метод не дает 100% гарантию отсеивания нежелательной электронной корреспонденции: высокая активность спамеров превышает скорость занесения их хостов в соответствующие черные списки.

Повышаем репутацию домена, чтобы не попасть в спам лист

Перед рассылкой рекомендуется подготавливать домен, чтобы фильтры сразу не занесли его в черные списки. Для этого собирается и обрабатывается база для исключения ловушек, мертвых адресов, настраиваются технические параметры и регулярно отслеживается статистика для планирования дальнейших действий. Поговорим подробнее о каждом из пунктов.

Сбор базы подписчиков

1. Не собирайте базу ссылок с чужих источников, используйте формы на сайте, анкеты на мероприятиях. Так вы меньше рискуете потерять репутацию и нарваться на спам-фильтры.
2. Используйте на сайтах для сбора двойную проверку (Double Opt-In): сначала пользователь вводит свой адрес, а потом заходит на почту и переходит по ссылки для подтверждения согласия. Во-первых, вы сразу удалите несуществующие e-mail, потому что на них письмо просто не дойдет. Во-вторых, вы отправляете только тем подписчикам, которые действительно хотят получить ваши сообщения. Mail.RU пишет в общих положениях об обязательном использовании именно Double Opt-In, двойной проверке, то есть когда человек однозначно выразил согласие на получение. Некоторые сервисы считают рассылку без Double Opt-In спамной.
3. Single Opt-In — пользователи один раз вводят свой адрес и не подтверждают согласие никакими ссылками в письмах. Такой способ наиболее удобен и в разы увеличивает базу. Однако не факт, что она будет заинтересована в контенте, и вы рискуете оказаться в папке спам, а потом и в глобальных блэклистах. Этим способом могут воспользоваться ваши конкуренты. Им ничего не будет стоить добавить в вашу базу несуществующие адреса, роботов и прочего мусора. Рассылка по таким пользователям сразу выведет вас из строя, а очищение базы займет много сил и времени. Если в ней есть подписчики, адреса которых ввели без их согласия, они будут жаловаться. В итоге, Single Opt-In — это быстрый набор базы, а также хороший способ показать конкурентам слабое место в системе. С Double Opt-In часть этих проблем уходит.
4. Используйте капчу. Она предоставращает подписку роботов, которых могут отправить конкуренты.

Фильтрация базы

1. Фильтруйте базу, чтобы не рассылать контент на несуществующие адреса или давно оставленные пользователями. Отсеивайте дубликаты. Вспомогательные инструменты не очистят мусор полностью, но уберут ошибочных адресатов и ловушки. Статистика с преимущественно живой аудиторией более правдива и эффективна для будущих маркетинговых стратегий.

Начало рассылки

1. Если вы долго ничего не писали подписчикам, то они могли уже забыть о своей подписки. Начинайте рассылку с тех, кто отправил заявку в числе последних. Обязательно указывайте в первом сообщении кто вы и о чем пишите, максимально информируйте людей, чтобы развеять ложные ожидания. Отправляйте контент только тем людям, которые сами попросили об этом.
2. Собранные адреса разделите на группы: mail.ru (list.ru, inbox.ru, bk.ru), gmail.com и yandex.ru.
3. Рассылку начинайте медленно, но верно. Для Яндекса массовой рассылкой считается отправка от 100 писем, Gmail — 50. Отправляйте сначала по минимуму, увеличивая каждый день количество писем на 30%.

Статистика

1. Регулярно проверяйте аналитику по рассылкам. Будьте готовы уменьшать количество, например, если растет число жалоб. Иначе почтовый сервис будет доставлять письма в папке спама или не показывать их вообще.
2. Если в статистике есть графа «Репутация», следите за ее повышением.
3. Аналитика Яндекса на postoffice.yandex.ru подробна и дает понять, что нужно поменять. По ней можно узнать, сколько людей установило личный фильтр или пожаловались до открытия сообщения. Отдельно показывается сколько писем удалено до и после прочтения. Чем меньше непрочитанных — тем интереснее аудитории. Чем больше прочитанных остались в ящике — тем лучше.
4. У Google аналитика есть разделы по рейтингу спама, IP и домен репутации. В первом случае, вы получите отчет, как много людей отметили вашу рассылку спамом. Обычно это сигнал, что письма приходят без согласия пользователя или вы их утомили, а найти кнопку «Отписаться» — сложно.
5. В IP Reputation отслеживается репутация адреса. Нужно, чтобы все колонки были зелеными. Если они становятся желтыми, а все условия выполняются, необходимо обратится к провайдеру с просьбой поменять IP. Domain Reputation показывает репутацию домена.

Как проверить, не угодил ли почтовый сервер в черные списки

У каждого блэклиста есть свой сайт с поиском по базе. Некоторые сервисы продают доступ. Но популярные черные списки — бесплатные. Проверьте свой IP-адрес или домен в Spamhaus и URIBL. Для начала этого будет достаточно. Введите свой адрес — блэклист сразу выдаст результаты проверки. Зеленый цвет означает отсутствие в блэклисте, а красный покажет, в каком списке находится ваш адрес и что нужно сделать для его удаления.

Если есть права администратора на домене, загляните в логи отправки. Это ответ сервера, который принял письмо. Если адрес в блэклисте, вы увидите это в логах. Там будет ссылка на черный список.

Если не хотите возиться с проверкой по каждому блэклисту, запускайте сервисы проверок — MxToolBox или Mail-tester. Они проверят ваш адрес по 100 чёрным спискам.

Как IP получает плохую репутацию?

Это происходит тогда, как за вашим сервером фиксируется чрезмерная рассылка спама. В большинстве случаев, чтобы попасть в черные списки, нужно рассылать ОЧЕНЬ МНОГО спама. Если вы обнаружили свой IP-адрес в черных списках, то стоит изучить логи почтового ящика сервера. Возможно, что один из ваших аккаунтов был взломан, и теперь используется для рассылки спама. Если это так, то в первую очередь нужно обезопасить взломанный профиль.

Поиск черных списков, в которых находится IP-адрес

Черные списки IP-адресов легче всего анализировать при помощи инструмента Blacklist Checker от MXToolbox. Введите свой IP в поле поиска и запустите сканирование

Обращайте внимание на элементы, помеченные статусом ОК. Стоит отметить, что в MXToolbox представлены не все данные

Здесь можно найти лишь списки Microsoft Outlook/Live/Hotmail. Ниже мы поговорим подробнее о проверке IP в спам базах.

Запрос на удаление из черного списка

Большинство специализированных сервисов предлагает опцию, которая позволяет сделать запрос на удаление из списка. Но сначала нужно исправить проблемы, которые привели к внесению в черный список. Запрос может быть отклонен, если сервер продолжает рассылать большие объемы спама.

Основные черные списки и ссылки на форму запроса на удаление из них:

• Barracuda Central: http://www.barracudacentral.org/rbl/removal-request;
• Spamhaus: http://www.spamhaus.org/lookup/;
• LashBack: http://blacklist.lashback.com/;
• Invaluement: http://www.invaluement.com/removal/;
• DNSBL: http://www.dnsbl.manitu.net/.

Скорее всего, вам придется объяснить, почему вы создали запрос на удаление, и какие шаги предприняли, чтобы обезопасить свой сервер. Будьте честными и попытайтесь доказать, что это больше не повторится.

Разбираемся со «злобным» список Microsoft

У Microsoft имеется свой черный список для пользователей Outlook/Live/Hotmail. Самое сложное – это выйти из него.

Сначала нужно проверить IP на наличие в спам базах. Чтобы сделать это, зарегистрируйтесь в Smart Network Data Services. Сервис позволяет добавлять IP-адреса и отслеживать их состояние. Это позволит не только отследить попадание IP в черный список, но и воспользоваться специальными инструментами.

В завершение, зарегистрируйтесь на Sender Score. Sender Score – это индикатор доверия к IP-адресу отправителя письма. Он используется почтовыми сервисами и фильтрами для дополнительной защиты электронных ящиков.

После этого смело отправляйте Microsoft запрос на удаление из списка. На момент написания этой статьи, все известные URL-адреса формы подачи заявления на удаление были недоступны. Поэтому я рекомендую вам послать письмо на delist@messaging.microsoft.com. Если предварительно не зарегистрироваться во всех перечисленных сервисах, то ваш запрос могут проигнорировать.

Другие предостережения

После того, как проверите IP адрес на спам, не забудьте воспользоваться DomainKeys Identified Mail, который берет на себя ответственность за электронные письма, проходящие транзитом. Сервис проверяет их независимо от того, является ли он его отправителем или только посредником в цепочке перенаправлений. Технически, DKIM предлагает метод валидации доменного имени отправителя электронного письма.

Пожалуйста, опубликуйте ваши комментарии по текущей теме материала. Мы крайне благодарны вам за ваши комментарии, отклики, подписки, дизлайки, лайки!

Валентин Сейидовавтор-переводчик статьи «How To Resolve IP Reputation Issues»

Проверяем на АГС

Что такое АГС? Это фильтр Яндекса, который предназначен для обнаружения и блокировки сайтов с бесполезным для пользователей контентом. Обычно это происходит с сайтами, разработанными для продажи ссылок. Вместо исключения подобных страниц из поиска – аннулируется тИЦ. Итак, причины:

• торговля ссылками;
• на сайте множество всплывающих окон и баннеров для интенсивной монетизации;
• отсутствие ценности в контенте сайта и уникальности;
• очевидное создание сайта исключительно в целях монетизации.

Предлагаю несколько рабочих способов по определению наложенных санкций:

1. В поисковике Яндекса введите: site:nazvanie.ru (nazvanie.ru – адрес проверяемого сайта). Если отобразилось меньше 10 страниц (при условии, что на Вашем сайте их столько же или больше) – возможно, наложен фильтр.
2. Заходим в Яндекс.Каталог и вводим: https://yandex.by/yaca/cy/ch/nazvanie.ru. Если тИЦ отображается (он может быть «0» для нового «здорового» сайта) – всё в порядке. Если он «не определён» – это свидетельствует о наличии фильтра АГС.
3. Сделать это можно с помощью удобного сервиса . Введите адрес, проверьте «Основные параметры» и «Индексацию». тИЦ должен определяться. Перейдите к разделу «Санкции», чтобы проверить домен на АГС, там есть прямые данные о нём.
4. Возможна и массовая проверка сервисом Seo-inf по данной ссылке: http://seo-inf.ru/dtools/mass_url/

Решаем проблему

Если сайт попал под АГС-фильтр – ситуация решается обращением в службу технической поддержки Яндекса. Опишите проблему и получите рекомендации, следуя которым можно его снять.

Notice

Чтобы прояснить ситуацию и быть более уверенными, делайте проверку всеми возможными способами, не ограничиваясь каким-то одним.

Рекомендации по очистке сайта от спама

От АГС-бана в Яндексе не застрахован никто, притом посчитать сайт спамным поисковик может в самый неподходящий момент. К счастью, такого рода возникшая проблема катастрофой отнюдь не является, – её можно даже расценить в качестве своеобразного шанса для улучшения веб-ресурса.

Которое при этом не требует никаких титанических усилий. Апгрейд для вывода страниц из-под спам-фильтра подразумевает:

1) Приведение в порядок контента на всех страницах.

Поисковые роботы включают в категорию спама не только плотность вхождения ключевиков в тексты. Сюда же могут быть отнесены неестественные по смыслу, искусственные словосочетания и смысловые конструкции. Исправить положение помогает редактирование, с учётом нескольких простых требований – тексты должны быть информативными, лёгкими к восприятию, понятными читателю.

2) Частотность ключевых слов

Сеошники старой закалки до сих пор уверены в том, что большое количество ключевиков положительно влияет на позиции в поисковой выдаче. Это не так, – искусственное увеличение тематической релевантности ведёт к переспаму. И робот, зашедший на страницу с целью проверить сайт на спам, его и обнаружит.

3) Внутренние ссылки

Перелинковка на различные страницы сайта должна также выглядеть естественной. Рискованно перенаправлять посетителей ссылками со спамными анкорами (типа «купить ноутбуки Самсунг дешево в Москве») или проставлять в ссылке на главную страницу собственного же сайта ключевики. Перелинковки на главную лучше вообще избегать, так как поисковик может расценить её в качестве искусственного увеличения веса основной страницы.

4) Корректировка метатегов

Все описания и заголовки страниц должны выглядеть естественно, с прописанной в них полезной информацией. Не стоит спамить в метатегах ключевиками, – достаточно расставить три-пять релевантных теме страницы запросов.

5) Удаление спама в навигации

Наименования функциональных меню должны также смотреться органично. Не нужно прописывать в них уродливые по смыслу ключевики (вроде «сувениры из Санкт-Петербурга», «цветы оптом круглосуточно»), – это прямой путь под АГС-фильтр.

Virusdie – избавление от спама на сайте в несколько кликов

Проверить сайт на спам онлайн можно вручную, одним из способов, описанных выше. А можно доверить это дело специализированному сервису, который эффективно мониторит все проблемы в режиме реального времени.

Из наиболее продвинутых, рекомендуемых профессионалами к использованию антивирусных сканеров выделяется продукт от компании Virusdie.

Это полнофункциональный антивирусник, защищающий от вирусов, несанкционированных атак и вообще всех проблем, связанных с поражениями сайта вредоносным кодом.

Среди основных инструментов Virusdie обнаруживается и проверка на наличие того или иного веб-ресурса в чёрных списках поисковиков. После установки программного обеспечения, сервис в автоматическом режиме контролирует состояние дел. Уведомления о возможных конфликтах с поисковиками настраиваются в зависимости от устанавливаемого владельцем сайта интервала – через каждые 6, 12 или 24 часа ежедневно.

Проверка сайта на спам – это не прихоть, а осознанная необходимость, в особенности для тех, кто уже сталкивался с неприятными моментами санкций от поисковых машин. Даже один день простоя, недолгое выпадение сайта из рейтинговых топов ведёт к серьёзному падению трафика, а значит – и к снижению уровня продаж.

Virusdie всегда придёт на помощь. Антивирусный и антиспамный продукт не просто отслеживает проблемные страницы, но и предлагает ряд полезных рекомендаций, помогающих избавиться от спама на сайте раз и навсегда.

FindThatLead

Краткий обзор

Мы отметили следующие нюансы:

+ Достаточно высокое качество проверки адресов.

— Сложный процесс регистрации. Вы не можете создать аккаунт, используя бесплатный адрес. Мы также столкнулись с другой проблемой: нам не пришло письмо со ссылкой для подтверждения регистрации, а техподдержка не отвечала около двух недель.

— Невозможно купить менее 5000 кредитов.

— Импорт файлов доступен только в CSV-формате, причем сервис потерял по одному адресу из каждого списка при их загрузке.

— Массовая проверка емейл длится довольно долго.

— Кредиты взимаются за проверку всех контактов.

— Вы не можете узнать результаты валидации на странице сервиса. Их можно только скачать списком. То есть, если вам нужны только валидные ящики, сперва надо отсортировать загруженный список по статусу, и это неудобно. Хотелось бы, чтобы список с адресами каждого статуса можно было скачивать отдельно.

Результаты теста

Список валидных адресов:

• Сервис распознал валидные как валидные ― 496
• Сомнительные — 101
• Ошибочно распознал валидные электронные адреса как невалидные ― 4
• 1 email-адрес был утерян при импорте списка

Список невалидных адресов:

• Сервис распознал невалидные как невалидные — 493
• Сомнительные — 103
• Ошибочно распознал невалидные как валидные — 3
• 1 email-адрес был утерян при импорте списка

Скачанный файл с проверенными контактами выглядит так:

Наша оценка

Результаты проверки неплохие, но множество мелких неудобств портят впечатление. Решающим фактором для нас стал список электронных адресов, который не был отсортирован. Кроме того, этот верифайер не позволяет управлять пользовательским проспект-листом, несмотря на то, что тут есть инструмент для массовых рассылок.

Да, FindThatLead показал достойные результаты тестирования, но мы, все же, рекомендуем подумать дважды, стоит ли этот сервис вашего времени или лучше выбрать аналогичную платформу, с которой проще работать.

Наша оценка ― 3,9 балла.

Смотрим ip домена и смежных сайтов

Для анализа доменного имени и смежных реурсов, которые лежат на одном ip использовать следующие сервисы

• whois сервис: https://2ip.ru/whois/
• CY-PR сервис: https://www.cy-pr.com/tools/oneip/

Обратить внимание на

• лежат ли на одном ip другие ресурсы клиента
• лежат ли на одном ip веб сервисы запрещенной тематики

Что можно найти из негатива

• одинаковые ресурсы клиента на одном айпи — аффилиаты
• смежные ресурсы запрещенной тематики принадлежащие данному ip

Пример

Определение ip доменного имени https://2ip.ru/whois/

Определение смежных сайтов данного ip https://www.cy-pr.com/tools/oneip/

Кроме всего вышеперечисленного, будет полезно сделать следующее:

Проверить домен сайта перед покупкой на фильтры и санкции

Это важно, если вы покупаете действующий домен (сайт, который уже работает). Важно оценить, что ресурс не находится под одним из фильтров Яндекс или Гугл

В том случае, если домен попал под фильтр Панда или Пингвин, вы должны понимать, что с покупкой его вам придется еще несколько месяцев затратить на работу с контентом и ссылочным профилем для нормального продвижения сайта в будущем. Проверить индексацию. Это самый простой способ выявить, не выпали ли страницы из индекса и какие на то есть причины.
Проверить домен на наличие в спам базах и черных списках. Это можно сделать на MxToolbox в разделе Blacklist. Также с этим могут помочь другие ресурсы, например, AntiSpamSniper, UltraTools, BLACKLISTALERT.

Вывод

На первый взгляд количество действий, описанных в данной статье, кажутся нескончаемым объемом работы. В статье «Как выбрать доменное имя сайта?» вы можете ознакомится, исходя из каких критериев стоит подбирать имя для будущего сайта. Все-таки домен — это лыжи, на которых поедет ваш будущий сайт. От этого зависит его дальнейшее продвижение, репутация и успех вашего бизнеса.

Что такое спам и спам листы

Спам — это контент любого характера, рассылаемый пользователям без их согласия. Метод используется мошенниками для заражения устройств и получения конфиденциальной информации, начиная от фотографий и заканчивая банковскими счетами. Спамные рассылки применяют и компании для увеличения охвата аудитории. Но такая затея рискованная и может привести к негативным последствиям: теряется доверие пользователя, домен теряет репутацию, и фильтры его блокируют.

Спам листы (спам-базы или еще блэклисты от английского black list — черный список) — это списки IP-адресов и доменов, с которых приходят нежелательные материалы. Они находятся в открытом доступе и могут быть как бесплатными, так и платными. Базы создаются с целью собрать все проблемные IP и обезопасить пользователей. Почтовые ресурсы проверяют эти листы и принимают решение об отправке сообщений.

Как узнать, что сайт в чёрном списке?

Нужно проверить домен на спам-листы и узнать, не попал ли он в чёрный список DNS. Перечислим основные причины:

• подозрение на спам;
• размещение запрещённого контента;
• размещение ссылок на другие сайты с запрещённым контентом.

Любой, даже незначительный, прокол в работе может привести к данной проблеме. Алгоритмы проверки постоянно меняются, даже «чистый» сайт с легальным контентом иногда может попасть под санкции.

Рассмотрим основные варианты. Можно воспользоваться сервисом ХостТрекер. Здесь доступна бесплатная функция проверки наличия домена в DNSBL (DNS Blacklist – списки хостов, которые хранятся с применением архитектуры DNS). Также есть сервис Mxtoolbox, где предлагается подобное. На этом список сервисов не ограничивается, можете выбрать любой удобный. Я же разберу этот вопрос на примере ХостТрекер:

1. зайдите на сайт http://www.host-tracker.com
2. справа в окне выберите «проверить свой сайт»
3. ставим галочку на «DNSBL»;
4. введите адрес сайта;
5. нажмите на «проверить сейчас».

После этого Ваш адрес проверят по нескольким десяткам списков и появится результат, вот пример:

Если домен присутствует в блэклистах

Когда обнаруживаются проблемы, причина в обязательном порядке указывается. Есть несколько способов удаления из черного списка:

• Проверка на спам-рассылку. Необходимо убедиться, что сервер почты не используется злоумышленниками. Также выполните настройку обратного запроса DNS (доменная зона для определения имени сетевого узла по IP) почтового сервера. Настройте SPF (инфраструктура политики отправителя, специальное расширение для протокола отправки почты).
• Выяснить обстоятельства. Перейдите по ссылкам, докажите, что не являетесь роботом. Вводите адрес сайта и нажимайте на «разблокировать». В отдельных ситуациях придётся писать письмо с просьбой о разблокировке, преждевременно устранив причину попадания в ЧС.

Notice

После того, как удастся проверить домен на АГС и спам-листы, необходимо сразу исправить ситуацию и чем быстрее, тем лучше, а потом можно заниматься продвижением своего сайта в прежнем режиме.

Ограничения

Если вы превысите максимальное количество вызовов, API вернет ошибку, например,

Copy all

{"error_message":"Calls limit exceeded.","error_no":10}

Сейчас максимальное количество вызовов установлено в 100 вызовов за 60 секунд.

Если вы превысите максимальное количество элементов данных в методе spam_check вызовов, API вернет ошибку, например,

Copy all

{"error_message":"Recevied 1001 records to check, maximum 1000 records check perl call.","error_no":8}

Сейчас максимальное количество элементов данных установлено в 1000.

Рекомендуемый таймаут — не более 180 секунд.

Ошибки при анализе и обработке данных возвращаются индивидуально для каждой записи, например,

Copy all

{"data":{"10.0.0.3":{"error":"Database error"}}}

Copy all

{"data":{"10.0.0.266":{"error":"Can't check this record: Wrong format"}}}

Примечание: Если в запросе передается дата, то время выполнения этого запроса будет немного увеличено.

Как ваш IP-адрес мог оказаться в чёрном списке?

Может случиться так, что в какой-то момент ваш IP-адрес окажется в чёрном списке одного или нескольких интернет-сервисов. Как такое могло произойти? Скорее всего, раньше с этого адреса осуществлялась массовая рассылка. Но это не единственная причина попадания в Blacklist.

Ваш адрес могут внести в чёрный список, если:

• На вашем компьютере наблюдается вирусная активность. Проверить ПК на наличие вирусов можно с помощью бесплатных антивирусных программ Avast antivirus, Avira Antivirus или любого другого инструмента.
• Ваш провайдер ограничил активность динамически выдаваемых IP-адресов своих клиентов. В этом случае нужно связаться с провайдером и сделать запрос на использование SMTP сервера.
• Компьютер с этим адресом не имеет защиты от атак, то есть стало известно об уязвимости вашего ПК, позволяющей преступникам контролировать его и использовать в своих целях.

Видимость в поисковике и ранжируемые ключевые запросы

Проверяем операторами в поисковой выдаче

• site:site.com
• “site”

Аализируем ранжируемые ключевые запросы по serpstat обращаем внимание на:

• наличие сторонних страниц
• наличие других источников с таким же доменным именем, но с другой доменной зоной
• наличие бренда по доменному имени

Будет негативом, если имя домена:

• является другим брендом или конкурента
• попадало под атаку вирусов
• имеет много негативных упоминаний, отзывов
• при поиске выдает в индексе много сторонних страниц, не являющиеся целевыми
• ранжируется по сторонним нецелевым запросам

Пример

В поисковой выдаче (1 и 2 скрин)

Из анализа serpstat

Как почтовые сервисы определяют репутацию отправителя

У каждого почтового провайдера свои критерии для оценки, но можно выделить четыре параметра, которые влияют на репутацию:

• Качество базы подписчиков — активные адреса без ботов, спам-ловушек, недействительных аккаунтов и пользователей, которые не соглашались на рассылку. Покупка или парсинг базы исключены.
• Содержание письма — тексты, изображения, верстка, дизайн.
• Процент отписок и жалоб.
• Настройки аутентификации IP или домена.

Последний параметр — технический. Для подтверждения репутации нужно указать служебные записи DMARC, SPF, DKIM. Они отвечают за идентификацию отправителя и служат в качестве цифрового паспорта. Сервис «Почта для домена» от Mail.ru для бизнеса помогает с настройками рассылки. В момент подключения домена пользователю расскажут, какие параметры нужно указать. Сервис проверит работу домена и предупредит об ошибках.

Какие бывают спам базы

Черные списки разделяются на два типа: частные и публичные.

• Частные создаются отдельным пользователем или конкретной компанией для блокировки некоторых доменов, чтобы не получать от них никаких писем. Пример, знакомый всем: допустим, к вам на почту приходят постоянно сообщения на тему заработка в казино. Вы добавляете отправителя в личный блэклист и больше не видите сообщений от него. Отправителю обойти этот список проще, чем публичный: нужно связаться с владельцем ящика или администратором компании и обсудить вопрос, возможно, блокировка писем произошла случайно. Но это не всегда приводит к положительному исходу.
• Публичные базы создаются специально для всех пользователей, и ими пользуются уже спам-фильтры и провайдеры почты. Если отправитель попадает в крупные и известные листы, большая часть его писем будет с пометкой спам и не дойдет до адресатов.

Почему отправитель попадает в спам лист

Почтовые провайдеры ориентируются на репутацию домена и на уловки, созданные для поимки спамеров.

• Ловушки. У каждого почтового клиента есть список адресов, владельцы которых давно уже забыли про них. Обычно они ждут полгода-год, как пользователь не заходит в свой ящик, а потом используют его. Алгоритм прост: считается, что сообщение, приходящее на такой ящик, является спамом, а отправитель, соответственно, спамером. И его заносят в черные списки доменов или IP, репутация падает, остальные письма до других адресатов не доходят. Поэтому нужно фильтровать базу клиентов, удалять известные ловушки и недействующие адреса.
• Отсутствие Double Opt-In, только Single Opt-In. Более подробно про них мы поговорим в следующем разделе. Single Opt-In дает возможность конкурентам черными способами испортить собранную базу, добавив туда ловушки, роботов и много еще «приятного».
• Жалобы пользователей. Они могут поступать по разным причинам: спамная тема, рассылка без их уведомления, вирусные файлы и многое другое.

Для решения некоторых задач помогут инструменты. Например, для поиска ловушек бесполезно фильтровать лист вручную, потому на глаз нельзя определить, как давно владелец проверял письма. Один из способов: проверить с помощью Bounceless или Mailvalidator. Периодически отправляйте сообщения с просьбой подтвердить рассылку, но не всем, а именно тем пользователям, которые не просматривают ее в течение нескольких месяцев.

Если домен присутствует в блэклистах

Когда обнаруживаются проблемы, причина в обязательном порядке указывается. Есть несколько способов удаления из черного списка:

Проверка на спам-рассылку.

Необходимо убедиться, что сервер почты не используется злоумышленниками. Также выполните настройку обратного запроса DNS (доменная зона для определения имени сетевого узла по IP) почтового сервера.

Настройте SPF (инфраструктура политики отправителя, специальное расширение для протокола отправки почты).

Выяснить обстоятельства.

Перейдите по ссылкам, докажите, что не являетесь роботом. Вводите адрес сайта и нажимайте на «разблокировать». В отдельных ситуациях придётся писать письмо с просьбой о разблокировке, преждевременно устранив причину попадания в ЧС.

ТОП популярных блэклистов

Предлагаем вашему вниманию ТОП-5 черных списков, которые являются самыми востребованными и авторитетными. Именно они больше всего влияют на доставляемость ваших писем из рассылок:

1. Spamcop. Это масштабный сервис, в котором пользователи могут не только получить информацию, но и оставить жалобу на рассылку. 

1. ProofPoint. Этим списком пользуется корпорация Apple. Если ваш IP попадет в него, письма не будут приходить на адреса пользователей @me.com и @icloud.com. 

1. Spamhaus – один из самых достоверных листов, которые не делает осечек. При попадании в него домена или IP адреса письма перестаюь доставляться на все основные почтовые сервера (Mail.ru, Яндекс, Google, Microsoft, Yahoo). Огромный плюс этого проекта в хорошей технической поддержке. Она оперативно реагирует на каждое обращение. Если вы исправите выявленную проблему, то вас исключат из блэклиста.

1. Черный список для доменных имен URIBL! Если вы окажетесь тут несколько раз, то почти нет шансов выбраться. 

1. SORBS. Интересно, что на этот сервис почти не обращают внимания крупные почтовики. Главный его контингент – это организации. SORBS тщательно отслеживает внедрение адресов-ловушек и радует отличной техподдержкой. При быстром и адекватном реагировании можно выбраться из блэклиста с минимальными потерями. 

«И ты попал в блэк лист» — как работают черные списки?

Для начала обозначим особенности работы черных списков. В эту базу данных попадают доменные имена и IP-адреса, занимающиеся рассылкой спама. Их перечень находится в постоянном доступе на серверах, к которым обращаются почтовые провайдеры. Представим, что какой-то абстрактный отправитель есть в одном из черных списков. Это гарантирует минус к карме его репутации, а, значит, есть большая вероятность, что отправления с этого адреса или даже его упоминания в контенте письма будут приводить к попаданию в спам или вовсе к блокировке отправки. 

Существует очень много таких black lists! Какие-то являются общепризнанными и крупными, поэтому на них ориентируются даже самые авторитетные и крупные провайдеры. Есть и локальные списки для маленьких организаций, платные и бесплатные. Наш сервис мониторит все доступные базы данных, чтобы исключить любые несостыковки. 

Подводим итоги

Мы понимаем, что сервисов слишком много, и вам хочется сориентироваться, для каких целей использовать тот или иной пункт из статьи. Давайте коротко резюмируем все вышесказанное:

• Если вы хотите отслеживать динамику репутации отправителя, доставляемость, то для этого отлично подойдут постмастеры – быстро, и платить ничего не нужно. 

• Если вы сомневаетесь в дизайне и верстке, убрать все печали можно, задействовав Mail-tester.

• Проверяйте в пару кликов доставляемость в разные почтовые системы посредством GlockApps.

• Оценивайте качество собранной базы подписчиков (чтобы в случае чего оперативно почистить ее) через MailValidator.

• Узнайте, не занесли ли вас в блэклисты. Для этого пригодятся уже знакомые нам сервисы Mail-tester и GlockApps.