Как удалить ip из черного списка spamhaus

Как узнать, что сайт в чёрном списке?

Нужно проверить домен на спам-листы и узнать, не попал ли он в чёрный список DNS. Перечислим основные причины:

• подозрение на спам;
• размещение запрещённого контента;
• размещение ссылок на другие сайты с запрещённым контентом.

Любой, даже незначительный, прокол в работе может привести к данной проблеме. Алгоритмы проверки постоянно меняются, даже «чистый» сайт с легальным контентом иногда может попасть под санкции.

Рассмотрим основные варианты. Можно воспользоваться сервисом ХостТрекер. Здесь доступна бесплатная функция проверки наличия домена в DNSBL (DNS Blacklist – списки хостов, которые хранятся с применением архитектуры DNS). Также есть сервис Mxtoolbox, где предлагается подобное. На этом список сервисов не ограничивается, можете выбрать любой удобный. Я же разберу этот вопрос на примере ХостТрекер:

1. зайдите на сайт http://www.host-tracker.com
2. справа в окне выберите «проверить свой сайт»
3. ставим галочку на «DNSBL»;
4. введите адрес сайта;
5. нажмите на «проверить сейчас».

После этого Ваш адрес проверят по нескольким десяткам списков и появится результат, вот пример:

Если домен присутствует в блэклистах

Когда обнаруживаются проблемы, причина в обязательном порядке указывается. Есть несколько способов удаления из черного списка:

• Проверка на спам-рассылку. Необходимо убедиться, что сервер почты не используется злоумышленниками. Также выполните настройку обратного запроса DNS (доменная зона для определения имени сетевого узла по IP) почтового сервера. Настройте SPF (инфраструктура политики отправителя, специальное расширение для протокола отправки почты).
• Выяснить обстоятельства. Перейдите по ссылкам, докажите, что не являетесь роботом. Вводите адрес сайта и нажимайте на «разблокировать». В отдельных ситуациях придётся писать письмо с просьбой о разблокировке, преждевременно устранив причину попадания в ЧС.

Notice

После того, как удастся проверить домен на АГС и спам-листы, необходимо сразу исправить ситуацию и чем быстрее, тем лучше, а потом можно заниматься продвижением своего сайта в прежнем режиме.

Как IP получает плохую репутацию?

Это происходит тогда, как за вашим сервером фиксируется чрезмерная рассылка спама. В большинстве случаев, чтобы попасть в черные списки, нужно рассылать ОЧЕНЬ МНОГО спама. Если вы обнаружили свой IP-адрес в черных списках, то стоит изучить логи почтового ящика сервера. Возможно, что один из ваших аккаунтов был взломан, и теперь используется для рассылки спама. Если это так, то в первую очередь нужно обезопасить взломанный профиль.

Поиск черных списков, в которых находится IP-адрес

Черные списки IP-адресов легче всего анализировать при помощи инструмента Blacklist Checker от MXToolbox. Введите свой IP в поле поиска и запустите сканирование

Обращайте внимание на элементы, помеченные статусом ОК. Стоит отметить, что в MXToolbox представлены не все данные

Здесь можно найти лишь списки Microsoft Outlook/Live/Hotmail. Ниже мы поговорим подробнее о проверке IP в спам базах.

Запрос на удаление из черного списка

Большинство специализированных сервисов предлагает опцию, которая позволяет сделать запрос на удаление из списка. Но сначала нужно исправить проблемы, которые привели к внесению в черный список. Запрос может быть отклонен, если сервер продолжает рассылать большие объемы спама.

Основные черные списки и ссылки на форму запроса на удаление из них:

• Barracuda Central: http://www.barracudacentral.org/rbl/removal-request;
• Spamhaus: http://www.spamhaus.org/lookup/;
• LashBack: http://blacklist.lashback.com/;
• Invaluement: http://www.invaluement.com/removal/;
• DNSBL: http://www.dnsbl.manitu.net/.

Скорее всего, вам придется объяснить, почему вы создали запрос на удаление, и какие шаги предприняли, чтобы обезопасить свой сервер. Будьте честными и попытайтесь доказать, что это больше не повторится.

Разбираемся со «злобным» список Microsoft

У Microsoft имеется свой черный список для пользователей Outlook/Live/Hotmail. Самое сложное – это выйти из него.

Сначала нужно проверить IP на наличие в спам базах. Чтобы сделать это, зарегистрируйтесь в Smart Network Data Services. Сервис позволяет добавлять IP-адреса и отслеживать их состояние. Это позволит не только отследить попадание IP в черный список, но и воспользоваться специальными инструментами.

В завершение, зарегистрируйтесь на Sender Score. Sender Score – это индикатор доверия к IP-адресу отправителя письма. Он используется почтовыми сервисами и фильтрами для дополнительной защиты электронных ящиков.

После этого смело отправляйте Microsoft запрос на удаление из списка. На момент написания этой статьи, все известные URL-адреса формы подачи заявления на удаление были недоступны. Поэтому я рекомендую вам послать письмо на delist@messaging.microsoft.com. Если предварительно не зарегистрироваться во всех перечисленных сервисах, то ваш запрос могут проигнорировать.

Другие предостережения

После того, как проверите IP адрес на спам, не забудьте воспользоваться DomainKeys Identified Mail, который берет на себя ответственность за электронные письма, проходящие транзитом. Сервис проверяет их независимо от того, является ли он его отправителем или только посредником в цепочке перенаправлений. Технически, DKIM предлагает метод валидации доменного имени отправителя электронного письма.

Пожалуйста, опубликуйте ваши комментарии по текущей теме материала. Мы крайне благодарны вам за ваши комментарии, отклики, подписки, дизлайки, лайки!

Проверяем на АГС

Что такое АГС? Это фильтр Яндекса, который предназначен для обнаружения и блокировки сайтов с бесполезным для пользователей контентом. Обычно это происходит с сайтами, разработанными для продажи ссылок. Вместо исключения подобных страниц из поиска – аннулируется тИЦ. Итак, причины:

• торговля ссылками;
• на сайте множество всплывающих окон и баннеров для интенсивной монетизации;
• отсутствие ценности в контенте сайта и уникальности;
• очевидное создание сайта исключительно в целях монетизации.

Предлагаю несколько рабочих способов по определению наложенных санкций:

1. В поисковике Яндекса введите: site:nazvanie.ru (nazvanie.ru – адрес проверяемого сайта). Если отобразилось меньше 10 страниц (при условии, что на Вашем сайте их столько же или больше) – возможно, наложен фильтр.
2. Заходим в Яндекс.Каталог и вводим: https://yandex.by/yaca/cy/ch/nazvanie.ru. Если тИЦ отображается (он может быть «0» для нового «здорового» сайта) – всё в порядке. Если он «не определён» – это свидетельствует о наличии фильтра АГС.
3. Сделать это можно с помощью удобного сервиса . Введите адрес, проверьте «Основные параметры» и «Индексацию». тИЦ должен определяться. Перейдите к разделу «Санкции», чтобы проверить домен на АГС, там есть прямые данные о нём.
4. Возможна и массовая проверка сервисом Seo-inf по данной ссылке: http://seo-inf.ru/dtools/mass_url/

Решаем проблему

Если сайт попал под АГС-фильтр – ситуация решается обращением в службу технической поддержки Яндекса. Опишите проблему и получите рекомендации, следуя которым можно его снять.

Notice

Чтобы прояснить ситуацию и быть более уверенными, делайте проверку всеми возможными способами, не ограничиваясь каким-то одним.

Как проверить наличие IP в черных списках

Прежде всего, чтобы понять, попал ли ваш IP в спам лист, вам необходимо зайти на один из известных чекеров IP, к примеру на Главную страницу Whoer.net. Если в параметре «Blacklist» стоит отметка ДА/YES, это значит, ваш IP-адрес находится в каком-то блек листе.

Используемый нами адрес, как видите, чист. Если у вас иначе – нужно поискать, в какую базу он попал.

Какие спам базы существуют

Наиболее известные открытые блэклисты:

1. SpamCop
2. The Spamhaus Project
3. URIBL.
4. SURBL.

Проверить, попали ли вы в черный список, можно и по айпи и по домену.

В некоторых блэклистах IP просто остается некоторое время (обычно пару недель, но с каждым попаданием это время все дольше), в другие он попадает “навечно” и только ваши активные действия помогут вызволить адрес из спам базы. Для начала желательно, конечно, разобраться с причиной попадания IP в блэклист и, по возможности, ее устранить.

Собираем и анализируем результаты тестов

Мы решили добавить к нашему обзору расценки на проверку почты, поскольку прайсинг ― один из ключевых факторов выбора инструмента.

На инфографиках ниже видно, насколько успешно сервисы справились с тестом. Первая из них наглядно показывает, сколько стоит проверить один емейл на каждой из платформ (при условии, что вам нужно проверить около 100 000 контактов):

• Snov.io — $ 0.00289. Кредиты не снимаются за проверку catch-all-адресов, и это ощутимая экономия.
• Bounceless — $ 0.00299 (или примерно 0,3 цента).
• Voila Norbert — $ 0.003 (0,3 цента).
• ZeroBounce — $ 0.0039 (примерно 0,4 цента).
• NeverBounce — $ 0.004 (0,4 цента).
• Kickbox — $ 0.008 (0,8 цента).
• BriteVerify — $ 0.01 (1 цент).
• FindThatLead — $ 0.0113 (около 1,1 цента).
• Hunter.io — $ 0.0396 (около 4 центов).

А теперь сравним результаты тестов. Первое место получает сервис, который либо не допускал ошибок, либо допускал их по-минимуму. На этой инфографике отчет о том, как инструменты проверяли валидный список адресов

А вот результаты проверки базы невалидных контактов:

Как видите, лидерами исследования стали платформы ZeroBounce и Snov.io. Удовлетворительные результаты показали NeverBounce и FindThatLead. Показатели остальных сервисов ниже средних.

Среди всех протестированных верифайеров, инструмент от Snov.io не просто отлично справился с тестом, но и предложил самый доступный прайс. И не забывайте, что сервис включает тул для триггерных рассылок, за использование которого не списываются кредиты.

Выбирайте качественные и доступные инструменты на свой вкус и получайте как можно меньше серверных отказов при рассылках!

Как выйти из спам- blacklist

В основном все сервисы blacklist автоматические и если Вы 1-2 недели не шлете писем с ящика, который оказался под прицелом, то он может выйти из списка автоматически.

Хотя это не факт и может случиться так, что будет очень сложно выбраться оттуда. Но нужно понимать, что если с Вами куча соседей, то за них Вы отвечать не можете и не знаете что они делают. Поэтому лучше сразу обзавестись отдельным IP-адресом для своего сайта и все будет отлично.

Совет: если Вы попали в спам и черный список, то не шлите писем с этого домена дней 10-14, смените IP-адрес на выделенный и после 10-14 проверьте еще раз на черные списки новый IP и сделайте рассылку снова. Затем проверьте еще раз, все ли в порядке. Если IP не в черных списках, то все отлично.

А теперь представьте, если эту информацию примут к сведению авторы рассылок, реанимируют свои базы и начнут получать более высокий доход. Но скорее всего это никому не нужно. Кто-то не знает, кто-то не хочет, а кому-то просто лень этим заниматься.

Также еще нужно использовать в своей работе почтовые офисы от Яндекса и Mail.ru, но это уже отдельная тема.

Могу сказать только ключевой момент, который поможет вам выйти из СПАМа благодаря этим сервисам Яндекса и Майла — это переписка с поддержкой и справка этих сервисов. Поверьте, Вы узнате много нового.

Вот такая получилась статья, надеюсь что она принесет Вам огромную пользу. Порой обладая информацией и выполняя простые действия, мы можем облегчить многое на своем пути.

Если что не понятно, задавайте вопросы. И конечно я жду Ваших комментариев к данной статье. Желаю Вам удачи!

Что не любят спам-фильтры

Вкратце еще раз озвучу список, вдруг кто не знает:

• Ограничить использование восклицательных знаков в письме• не использовать КапсЛок (клавиша CapsLock , заглавные прописные буквы)• умеренное использование жирных и разноцветных шрифтов• желательно больше текста, чем картинок, и уж никак не письмо, состоящее только из одной картинки.• Не использовать стоп-слова (различные призывы к действию, которыми насыщены спамерские рассылки — купи, скачай, бесплатно, подарок, жми, заработай и т.п.)• должны присутствовать ссылки для отписки и информация, откуда получен адрес получателя.• рассылку следует вести от имени своего домена, а не gmail.com или yandex.ru• письма должны содержать ссылку на отписку и информацию о том, как был получен данный электронный адрес• следует чистить базу от несуществующих адресов, т.к. рассылка по неактуальной базе занесет вас в черные-списки спам-листов• не стоит пользоваться базами е-мейл, скачанными или собранными с интернета, таким образом в вашу базу может попасть спам-ловушка — это несуществующий эл. адрес, созданный самими почтовыми службами для отлова недобросовестных веб-мастеров. Такой адрес самостоятельно никогда не сможет подтвердить свое согласие на подписку, следовательно это самая прямая дорога в черный спам-список, репутация домена будет вмиг испорчена, а выйти из черного списка задача часто непосильная.

… список можно слегка дополнить)

 Так вот, рекомандации вроде соблюдены, но тестовая отправка по своим же адресам почему-то отправляла письмо в спам. 

Поэтому в таких случаях возникает мысль поискать сторонние онлайн-сервисы проверки писем на заспамленность.

Видимость в поисковике и ранжируемые ключевые запросы

Проверяем операторами в поисковой выдаче

• site:site.com
• “site”

Аализируем ранжируемые ключевые запросы по serpstat обращаем внимание на:

• наличие сторонних страниц
• наличие других источников с таким же доменным именем, но с другой доменной зоной
• наличие бренда по доменному имени

Будет негативом, если имя домена:

• является другим брендом или конкурента
• попадало под атаку вирусов
• имеет много негативных упоминаний, отзывов
• при поиске выдает в индексе много сторонних страниц, не являющиеся целевыми
• ранжируется по сторонним нецелевым запросам

Пример

В поисковой выдаче (1 и 2 скрин)

Из анализа serpstat

Как почтовые сервисы определяют репутацию отправителя

У каждого почтового провайдера свои критерии для оценки, но можно выделить четыре параметра, которые влияют на репутацию:

• Качество базы подписчиков — активные адреса без ботов, спам-ловушек, недействительных аккаунтов и пользователей, которые не соглашались на рассылку. Покупка или парсинг базы исключены.
• Содержание письма — тексты, изображения, верстка, дизайн.
• Процент отписок и жалоб.
• Настройки аутентификации IP или домена.

Последний параметр — технический. Для подтверждения репутации нужно указать служебные записи DMARC, SPF, DKIM. Они отвечают за идентификацию отправителя и служат в качестве цифрового паспорта. Сервис «Почта для домена» от Mail.ru для бизнеса помогает с настройками рассылки. В момент подключения домена пользователю расскажут, какие параметры нужно указать. Сервис проверит работу домена и предупредит об ошибках.

Необязательные GET параметры:

• ip — ip адрес для проверки (IPv4 или IPv6 в стандартном текстовом виде виде)

• email — email адрес для проверки (Результат выдается за последние 6 месяцев)

• date — дата в формате YYYY-MM-DD, используется при необходимости указания конкретного дня, за который требуется подсчитать статистику (только для IP адресов.)
• email_<SHA256> — хэш SHA256 адреса email
• ip4_<SHA256>- хэш SHA256 адреса IPv4
• ip6_<SHA256>- хэш SHA256 адреса IPv6

Пример запроса c IP:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&email=stop_email@example.com&ip=127.0.0.1

Пример запроса c date:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&ip=127.0.0.1&date=2017-01-31

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=123456&email=email_08c2495014d7f072fbe0bc10a909fa9dca83c17f2452b93afbfef6fe7c663631

Пример с хэшем адреса IP v4:

Copy all

https://api.cleantalk.org/?method_name=spam_check&auth_key=12345&ip=ip4_f46604ded89bbd0e8e478172a9a650f4825a763053ad2e3582c8286864ec4074

Повышаем репутацию домена, чтобы не попасть в спам лист

Перед рассылкой рекомендуется подготавливать домен, чтобы фильтры сразу не занесли его в черные списки. Для этого собирается и обрабатывается база для исключения ловушек, мертвых адресов, настраиваются технические параметры и регулярно отслеживается статистика для планирования дальнейших действий. Поговорим подробнее о каждом из пунктов.

Сбор базы подписчиков

1. Не собирайте базу ссылок с чужих источников, используйте формы на сайте, анкеты на мероприятиях. Так вы меньше рискуете потерять репутацию и нарваться на спам-фильтры.
2. Используйте на сайтах для сбора двойную проверку (Double Opt-In): сначала пользователь вводит свой адрес, а потом заходит на почту и переходит по ссылки для подтверждения согласия. Во-первых, вы сразу удалите несуществующие e-mail, потому что на них письмо просто не дойдет. Во-вторых, вы отправляете только тем подписчикам, которые действительно хотят получить ваши сообщения. Mail.RU пишет в общих положениях об обязательном использовании именно Double Opt-In, двойной проверке, то есть когда человек однозначно выразил согласие на получение. Некоторые сервисы считают рассылку без Double Opt-In спамной.
3. Single Opt-In — пользователи один раз вводят свой адрес и не подтверждают согласие никакими ссылками в письмах. Такой способ наиболее удобен и в разы увеличивает базу. Однако не факт, что она будет заинтересована в контенте, и вы рискуете оказаться в папке спам, а потом и в глобальных блэклистах. Этим способом могут воспользоваться ваши конкуренты. Им ничего не будет стоить добавить в вашу базу несуществующие адреса, роботов и прочего мусора. Рассылка по таким пользователям сразу выведет вас из строя, а очищение базы займет много сил и времени. Если в ней есть подписчики, адреса которых ввели без их согласия, они будут жаловаться. В итоге, Single Opt-In — это быстрый набор базы, а также хороший способ показать конкурентам слабое место в системе. С Double Opt-In часть этих проблем уходит.
4. Используйте капчу. Она предоставращает подписку роботов, которых могут отправить конкуренты.

Фильтрация базы

1. Фильтруйте базу, чтобы не рассылать контент на несуществующие адреса или давно оставленные пользователями. Отсеивайте дубликаты. Вспомогательные инструменты не очистят мусор полностью, но уберут ошибочных адресатов и ловушки. Статистика с преимущественно живой аудиторией более правдива и эффективна для будущих маркетинговых стратегий.

Начало рассылки

1. Если вы долго ничего не писали подписчикам, то они могли уже забыть о своей подписки. Начинайте рассылку с тех, кто отправил заявку в числе последних. Обязательно указывайте в первом сообщении кто вы и о чем пишите, максимально информируйте людей, чтобы развеять ложные ожидания. Отправляйте контент только тем людям, которые сами попросили об этом.
2. Собранные адреса разделите на группы: mail.ru (list.ru, inbox.ru, bk.ru), gmail.com и yandex.ru.
3. Рассылку начинайте медленно, но верно. Для Яндекса массовой рассылкой считается отправка от 100 писем, Gmail — 50. Отправляйте сначала по минимуму, увеличивая каждый день количество писем на 30%.

Статистика

1. Регулярно проверяйте аналитику по рассылкам. Будьте готовы уменьшать количество, например, если растет число жалоб. Иначе почтовый сервис будет доставлять письма в папке спама или не показывать их вообще.
2. Если в статистике есть графа «Репутация», следите за ее повышением.
3. Аналитика Яндекса на postoffice.yandex.ru подробна и дает понять, что нужно поменять. По ней можно узнать, сколько людей установило личный фильтр или пожаловались до открытия сообщения. Отдельно показывается сколько писем удалено до и после прочтения. Чем меньше непрочитанных — тем интереснее аудитории. Чем больше прочитанных остались в ящике — тем лучше.
4. У Google аналитика есть разделы по рейтингу спама, IP и домен репутации. В первом случае, вы получите отчет, как много людей отметили вашу рассылку спамом. Обычно это сигнал, что письма приходят без согласия пользователя или вы их утомили, а найти кнопку «Отписаться» — сложно.
5. В IP Reputation отслеживается репутация адреса. Нужно, чтобы все колонки были зелеными. Если они становятся желтыми, а все условия выполняются, необходимо обратится к провайдеру с просьбой поменять IP. Domain Reputation показывает репутацию домена.

FindThatLead

Краткий обзор

Мы отметили следующие нюансы:

+ Достаточно высокое качество проверки адресов.

— Сложный процесс регистрации. Вы не можете создать аккаунт, используя бесплатный адрес. Мы также столкнулись с другой проблемой: нам не пришло письмо со ссылкой для подтверждения регистрации, а техподдержка не отвечала около двух недель.

— Невозможно купить менее 5000 кредитов.

— Импорт файлов доступен только в CSV-формате, причем сервис потерял по одному адресу из каждого списка при их загрузке.

— Массовая проверка емейл длится довольно долго.

— Кредиты взимаются за проверку всех контактов.

— Вы не можете узнать результаты валидации на странице сервиса. Их можно только скачать списком. То есть, если вам нужны только валидные ящики, сперва надо отсортировать загруженный список по статусу, и это неудобно. Хотелось бы, чтобы список с адресами каждого статуса можно было скачивать отдельно.

Результаты теста

Список валидных адресов:

• Сервис распознал валидные как валидные ― 496
• Сомнительные — 101
• Ошибочно распознал валидные электронные адреса как невалидные ― 4
• 1 email-адрес был утерян при импорте списка

Список невалидных адресов:

• Сервис распознал невалидные как невалидные — 493
• Сомнительные — 103
• Ошибочно распознал невалидные как валидные — 3
• 1 email-адрес был утерян при импорте списка

Скачанный файл с проверенными контактами выглядит так:

Наша оценка

Результаты проверки неплохие, но множество мелких неудобств портят впечатление. Решающим фактором для нас стал список электронных адресов, который не был отсортирован. Кроме того, этот верифайер не позволяет управлять пользовательским проспект-листом, несмотря на то, что тут есть инструмент для массовых рассылок.

Да, FindThatLead показал достойные результаты тестирования, но мы, все же, рекомендуем подумать дважды, стоит ли этот сервис вашего времени или лучше выбрать аналогичную платформу, с которой проще работать.

Наша оценка ― 3,9 балла.

Смотрим ip домена и смежных сайтов

Для анализа доменного имени и смежных реурсов, которые лежат на одном ip использовать следующие сервисы

• whois сервис: https://2ip.ru/whois/
• CY-PR сервис: https://www.cy-pr.com/tools/oneip/

Обратить внимание на

• лежат ли на одном ip другие ресурсы клиента
• лежат ли на одном ip веб сервисы запрещенной тематики

Что можно найти из негатива

• одинаковые ресурсы клиента на одном айпи — аффилиаты
• смежные ресурсы запрещенной тематики принадлежащие данному ip

Пример

Определение ip доменного имени https://2ip.ru/whois/

Определение смежных сайтов данного ip https://www.cy-pr.com/tools/oneip/

Кроме всего вышеперечисленного, будет полезно сделать следующее:

Проверить домен сайта перед покупкой на фильтры и санкции

Это важно, если вы покупаете действующий домен (сайт, который уже работает). Важно оценить, что ресурс не находится под одним из фильтров Яндекс или Гугл

В том случае, если домен попал под фильтр Панда или Пингвин, вы должны понимать, что с покупкой его вам придется еще несколько месяцев затратить на работу с контентом и ссылочным профилем для нормального продвижения сайта в будущем. Проверить индексацию. Это самый простой способ выявить, не выпали ли страницы из индекса и какие на то есть причины.
Проверить домен на наличие в спам базах и черных списках. Это можно сделать на MxToolbox в разделе Blacklist. Также с этим могут помочь другие ресурсы, например, AntiSpamSniper, UltraTools, BLACKLISTALERT.

Вывод

На первый взгляд количество действий, описанных в данной статье, кажутся нескончаемым объемом работы. В статье «Как выбрать доменное имя сайта?» вы можете ознакомится, исходя из каких критериев стоит подбирать имя для будущего сайта. Все-таки домен — это лыжи, на которых поедет ваш будущий сайт. От этого зависит его дальнейшее продвижение, репутация и успех вашего бизнеса.

Ручная проверка на спам

Каким же образом можно проверить – находится ли сайт под АГС-фильтром или нет?

Есть ряд действенных вариантов ручной проверки:

• Ввести в поисковую форму Яндекса команду site:imya_sayta.ru (вместо словосочетания imya_sayta.ru подставить, конечно же, URL-адрес своего сайта) и нажать enter. Если поисковик выдаст меньше 10 позиций искомого веб-ресурса (при условии того, что столько страниц вообще есть), то не исключено, что сайт находится под фильтром.
• Зайти на страницу Яндекс-Каталога и ввести в браузерную строку https://yandex.by/yaca/cy/ch/imya_sayta.ru, нажав затем enter. Это помогает определить тИЦ сайта (индекс цитирования), который для молодых, недавно начавших действовать веб-ресурсов может соответствовать «0». Появившееся же уведомление о неопределённом статусе свидетельствует о наложенном на сайт АГС-фильтре.

Для того, чтобы проверить сайт на вирусы, дорвеи и спам онлайн можно воспользоваться и некоторыми специализированными сервисами.

К примеру, бесплатный сервис по адресу https://a.pr-cy.ru/ выдаёт большое количество полезной аналитики, среди которой обнаруживается информация и об индексации. Раздел «Санкции» ко всему прочему прямо указывает на то, находится ли сайт под АГС или нет.

Проверка через онлайн-сервис, расположенный по адресу http://seo-inf.ru/dtools/mass_url/, проверяет сразу несколько доменов по параметрам тИЦ и АГС (этот сканер также выдаёт и полезную дополнительную информацию о нахождении сайтов в разделах популярных каталогов).

Как ваш IP-адрес мог оказаться в чёрном списке?

Может случиться так, что в какой-то момент ваш IP-адрес окажется в чёрном списке одного или нескольких интернет-сервисов. Как такое могло произойти? Скорее всего, раньше с этого адреса осуществлялась массовая рассылка. Но это не единственная причина попадания в Blacklist.

Ваш адрес могут внести в чёрный список, если:

• На вашем компьютере наблюдается вирусная активность. Проверить ПК на наличие вирусов можно с помощью бесплатных антивирусных программ Avast antivirus, Avira Antivirus или любого другого инструмента.
• Ваш провайдер ограничил активность динамически выдаваемых IP-адресов своих клиентов. В этом случае нужно связаться с провайдером и сделать запрос на использование SMTP сервера.
• Компьютер с этим адресом не имеет защиты от атак, то есть стало известно об уязвимости вашего ПК, позволяющей преступникам контролировать его и использовать в своих целях.

API возвращает JSON строку, например:

Copy all

{"data":{"127.0.0.1":{"network_type":"unknown","country":"","appears":0,"frequency":0,"sha256":"12ca17b49af2289436f303e0166030a21e525d266e209267433801a8fd4071a0"},"stop_email@example.com":{"frequency":1001,"updated":"2021-02-22 12:06:14","spam_rate":0,"exists":1,"frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":1,"disposable_email":1,"sha256":"6d42ca0235d72b01a2b086ad53b5cfac24b5a444847fad70250e042d7ca8bf59"}}}

Copy all

{"data":{"email_08c2495014d7f072fbe0bc10a909fa9dca83c17f2452b93afbfef6fe7c663631":{"frequency":4,"updated":"2018-10-31 00:07:21","spam_rate":1,"exists":1,"frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":0,"disposable_email":1}}}

Для хэша адреса IP v4:

Copy all

{"data":{"ip4_f46604ded89bbd0e8e478172a9a650f4825a763053ad2e3582c8286864ec4074":{"frequency":13626,"updated":"2019-05-15 05:01:23","spam_rate":1,"network_type":"hosting","country":"GB","frequency_time_10m":0,"frequency_time_1h":0,"frequency_time_24h":0,"appears":1}}}

Расшифровка ответа:

data — обычно массив проверенных записей представлен в следующем формате: «record»: {массив проверенных результатов}. Иногда ответ «data» возвращает строку «In progress», это означает, что параллельный PHP-процесс работает с точно такими же параметрами — auth_key, method_name и records.

Важно! Ответ «In progress» является значимым его следует учитывать, так как если вызов API содержит большое количество элементов, то они могут быть проверены частично и выдастся ответ «In progress». Только при повторном вызове будут проверены все оставшиеся элементы

Массив с проверенными записями содержит следующие поля:

• appears — флаг присутствия в черных списках (показывает блокировку на настоящий момент),

• sha256 — хэш sha256 адреса,
• network_type — принадлежность к определенному типу сети (возможно в дальнейшем добавятся новые типы):

• spam_rate — спам-рейтинг от 0 до 100%. 100 означает точно спам (отношение спам запросов к общему количеству запросов). Параметр «spam_rate» может иметь значение от 0 до 1:  «spam_rate»: «1» — 100% запросов было спамом, «spam_rate»: «0,75» — 75% запросов было заблокировано как спам,
• submitted — дата и время первой спам-активности,
• updated — дата и время последнего обновления статуса,
• country — буквенный код страны, которой принадлежит IP адрес, в формате ISO 3166-1 alpha-2,
• exists — существует ли данный email (0 — не существует, 1 — существует, null — пустой статус, адрес не находится в списках в данный момент),
• disposable_email — является ли данный email временным (0 — обычный, 1 — временный, null — пустой статус, адрес не находится в списках в данный момент),
• frequency — количество сайтов отметивших запись как спам. Может быть от 0 до 9999 (показывает всю активность с самого начала обнаружения адреса),
  • frequency_time_10m — активность за 10 минут (показывает сколько попыток спама было зафиксировано),
  • frequency_time_1h — активность за 1 час (показывает сколько попыток спама было зафиксировано),
  • frequency_time_24h — активность за 24 часа (показывает сколько попыток спама было зафиксировано),Эти 3 параметра будут исключены из выдачи API spam_check() 7 октября 2021г.
• in_antispam — IP адрес найден в чёрном списке анти-спам,
• in_security — IP адрес найден в чёрном списке безопасности (brute-force),
• domains_count — число доменов, найденных на IP адресе.

В случае указания параметра «date» данные ответа приводятся только на указанную дату. Посредством POST запроса можно за один раз отправить на проверку до 1000 записей.

Если не было активности с адреса в течение 14 дней, то запись удаляется из черных списков, но вся история остаётся.