Почему сайт попал в чёрные списки и как его оттуда удалить

Вы работаете над своим сайтом, добросовестно вкладываете деньги в его продвижение, вышли в ТОП-поиска и в один вовсе не прекрасный день обнаружили, что число посетителей вашего ресурса катастрофически упало. Если над поддержанием работоспособности web-страницы работает квалифицированная команда, то с вероятностью 99%, такого не произойдёт. Мы достигаем этого путём постоянного контроля за безопасностью сайта, причём не столько с помощью программного обеспечения, сколько в ручном режиме.

Зачастую, владельцы ресурсов прибегают к помощью профессионалов только на этапе разработки и запуска. В лучшем случае, они отдают свой бизнес-инструмент программисту-одиночке, который ведёт целый ряд проектов. Такой подход лучше, чем ничего, но назвать его полноценным с точки зрения обеспечения безопасности, а значит и конверсии — довольно сложно. Поэтому, иногда проблема может быть замечена слишком поздно.

Что делать, если вы заметили существенное и одномоментное снижение переходов на ваш сайт. В первую очередь — не паниковать. Для начала проанализируйте обстоятельства. Вполне разумно, что если вы продаёте кондиционеры, а на календаре 2 января, то ожидать потока желающих приобрести ваш товар не стоит. Но если у вас оплачен хостинг, на сайте не ведутся никакие работы, вы не проводили ребрендинг и не переносили его на новый адрес и вообще, ничего не предвещало беды, стоит проверить, а не попал ли ваш сайт в чёрный список.

Что такое «чёрный список» сайтов и кто его составляет

В чёрный список попадают сайты, которые подверглись атаке вредоносного ПО или с чрезмерной активностью, что зачастую является взаимосвязанным. В результате, при переходе, пользователь получает предупреждение, что данная страница не безопасна и может навредить компьютеру.

Не всегда это значит, что сайт уже находится в чёрном списке. Но с вероятностью 100% он туда попадёт, если вы ничего не сделаете, чтобы изменить ситуацию. Отправляют в чёрный список поисковые системы. Они же существенно понижают сайт в ранжировании и вы попадете в «подвал», куда ни один пользователь не добирается.

Помимо поисковых систем, которые могут определять сайт как безопасный, есть и другие ресурсы со своими чёрными списками. К таковым относятся:

Opera
Антивирусные программы (Касперский, ESTET, Avira и т.д.)

Антифишинговый сервис Phish Tank
Службы SiteAdvisor McAfee, Norton Safe Web и прочие

Если вас индекстирует, к примеру Гугл, но наблюдаются проблемы с другими ресурсами, то и решать их придётся непосредственно там. Для этого, необходимо проверить каждый из сервисов, а затем, изучить их инструкцию по удалению сайта из чёрного списка и в точности её выполнить.

За что можно попасть в чёрный список

Для того, чтобы угодить в ЧС, специально вам ничего делать не нужно, чаще всего. Хотя, иногда к этому приводят действия владельца или администратора сайта. Поисковая система отправит ваш ресурс туда самостоятельно. Итак, за что можно попасть в чёрный список сайтов:

Подозрительная активность
Подозрительный код, который внутренними алгоритмами был определён как вредоносный
Наличие систем фишинга, троянов, шеллов и прочих «прелестей»
Имитация e-mail адресов

Поскольку поисковики по умолчанию действуют в интересах пользователя, то наличие потенциальной угрозы, которая теоретически может исходить от вашего ресурса им не выгодно. И они идут самым лёгким для себя путём — отправляют вас в «бан». Довольно распространённая ситуация, когда владелец сам не знает, что его сайт взломан вовсе не дружественными хакерами. Насторожится стоит если упала посещаемость. А начинать бить тревогу, абсолютно точно, в том случае, когда вы заметили странное поведение своей страницы, на ней что-нибудь отключено или наоборот, появилось. А если предупреждение выдал браузер, то операция по спасению должна начаться незамедлительно.

О том, что иногда сами владельцы сайтов становятся первоисточников попадания их детища в чёрный список мы уже упомянули. Казалось бы, парадокс — вряд-ли они сами себе враги. Это происходит по незнанию. Поэтому, важно понимать, что нельзя делать, чтобы не оказаться в немилости у поисковых систем:

Делать копипаст или плохой рерайт чужого контента
Ставить ссылки на непонятные сайты. Ссылки должны быть только на проверенные и хорошо зарекомендовавшие себя ресурсы — это добавит вам бонусов
Маскировать ключевые слова

Особенно глупо, когда их делают такого же цвета, что и фон, чтобы их было вообще не заметно, а поисковые системы их распознавали. Всё бы ничего, но это прямой путь в бан.

Почему так происходит? Чаще всего, к подобным методам прибегают именно хакеры, которые преследуют свои интересы. Но поисковым системам абсолютно всё-равно кто и с какой целью это сделал, пускай даже самой благородной. Они просто заносят такой ресурс в чёрный список, а дальше — ваша задача, или вашего вебмастера, как его оттуда вытащить.

Как проверить не находится ли сайт в чёрном списке

Если вы внимательный владелец сайта или веб-разработчик, то факт попадания в чёрный список заметите практически мгновенно. Нет, если вы не будете на него заходить месяц и даже не интересоваться аналитикой, то конечно же это пройдёт мимо вас. Первое по чему вы поймёте, как мы уже неоднократно упоминали — резкое падение посещаемости. Чтобы проверить не попал ли ваш сайт в чёрный список, достаточно выполнить всего несколько манипуляций.

Наберите в поисковой строке site:имя_сайта.ru и выполните поиск. Если до того ваша страница индексировалась, то вы получите результат. Если же результата не будет, то скорее всего вы в ЧС.
Воспользуйтесь инструментами Google. Для этого достаточно зайти в Инструменты вебмастера. Тм будет информация о любых проблемах с сайтом, причём раньше, чем поисковые системы его забанят.

Используйте специальные сервисы или плагины.

Мы регулярно проводим мониторинг сайтов на предмет их попадания в чёрный список даже в том случае, когда полностью уверены, что всесторонне обеспечили их безопасность. Это делается сразу на нескольких уровнях, но 100% гарантию не может дать никто. Поэтому, лучше перебдеть, чем потом решать проблему. Тем более, что всё время пока сайт не доступен владелец не просто теряет деньги, но и пользователей. Они банально могут уйти к конкурентам, а возвращать утраченные позиции и репутацию — гораздо сложнее.

По каким признакам понять, что сайт в чёрном списке

Падение трафика очень показательный, но далеко не единственный признак, по которому можно понять, что ваш сайт находится в чёрном списке. Есть и другие показатели, которые можно обнаружить непосредственно на сайте. На первом этапе, они ещё не обязательно являются признаком бана, но ведут к нему.

Итак, как понять, что сайт вскоре может быть заблокирован поисковиками:

Вы заметили ключевые слова, которые не имеют никакого отношения к вашей деятельности и уж точно их оставили не вы
При переходе на ваш сайт идёт перенаправление на другие страницы, и это не результат вашей работы (к примеру, когда сайт переехал)
Появились непонятные администраторы и неизвестные вам пользователи

Охарактеризовать ситуацию как критичную можно тогда, когда поисковые системы выдают предупреждение о потенциальной угрозе вашего ресурса для пользователя или сайт заблокирован хостингом. После этого, вам нужно вытаскивать свою страницу из чёрных списков. Сделать это можно. К счастью.

Как удалить сайт из чёрных списков Google

Почему Google — спросите вы. Потому что среди всех поисковых систем, которыми пользуются юзеры в русскоязычном сегменте интернета, именно он является наиболее требовательным и «подозревающим». Поэтому, под его бан попасть довольно сложно.

ПРЕДУПРЕЖДЕНИЕ! Просмотр сайта подвергшегося хакерской атаке может быть небезопасно в том числе и для вас. Никто не знает с какой целью и кем был осуществлён взлом на самом деле. Поэтому, лучше чтобы этим занимались специалисты, которые знают как безопасно работать с небезопасными сайтами.

Впрочем, краткий алгоритм действий таков:

Проиндексируйте свой сайт на странице диагностики Google
Посмотрите как его видит поисковая система

Просканируйте все страницы сайта. Да — это долго, но без этого никак
Удалите обнаруженный вредоносный код. Делать это нужно так, чтобы не порушить структуру сайта, удалив лишнее

Сканирование страниц сайта стоит выполнять сразу несколькими инструментами, как автоматически, так и вручную. Вы не знаете в какой именно части сайт или сервера находятся небезопасные сегменты. Поэтому, нужно просканировать цепочку, а это просто невозможно качественно осуществить с помощью одной-единственной программы или плагина. Будьте предельно осторожны, так как иногда подобные автоматические сканеры могут определять как подозрительные, абсолютно безопасные коды и бездумно выполняя все их рекомендации вы просто «снесёте» половину сайта.

После того, как всё исправлено, вам необходимо пройти повторную проверку на безопасность. Это нужно для того, чтобы поисковая система, в данном конкретном случае Google, поняла, что вы всё починили. Отправить сайт в «чёрный список» для неё гораздо проще, нежели вернуть его обратно. Поисковик просто не знает приняли ли вы меры, а ждать пока он проиндексирует его ещё раз самостоятельно — может уйти не один месяц. Поэтому, лучше уведомить сразу.