Хорошего настроения всем читателям – Sozdaiblog.ru!
В этой статье я хочу представить Вашему вниманию диапазон IP-адресов поисковых роботов.
К моей великой радости за последние полторы недели на блог не было ни одной DDOS-атаки.
Всё это время я спокойно работал, а не отбивался от ежедневных набегов татаро-монгольских хакеров.
Если Вы помните, то в одном из своих постов я описывал простой способ защиты от DDOS-атак.
Так вот, друзья я так назащищался, что позаблокировал половину IP-адресов поисковых роботов, которые тихо и мирно сканируют каждый блог в Интернете на наличие нового уникального контента.
Из-за этих действий несколько раз страницы блога выпадали из индекса Яндекса и Google.
Поисковые роботы при попытки индексации «Sozdaiblog.ru» получали «403» ошибку и убирались восвояси.
Конечно, после обнаружения и исправления собственной ошибки все статьи стали по-прежнему доступны, как для людей, так и для ботов, но по определённым ключевым запросам они сильно просели.
Надеюсь, что в ближайшее время всё нормализуется и все запросы вновь вернуться в TOP поисковой выдачи.
Чтобы и Вам так же не накосячить предлагаю ознакомиться со списком диапазона IP-адресов поисковых роботов.
Список диапазона IP-адресов поисковых роботов.
| Название поисковика | Диапазон IP-адресов Поисковых роботов |
|---|---|
| Yandex | 77.88.22.0 – 77.88.23.255 (77.88.0.0/18) 87.250.224.0 – 87.250.255.255 (87.250.224.0/19) 93.158.128.0 – 93.158.191.255 (93.158.128.0/18) 95.108.128.0 – 95.108.255.255 (95.108.128.0/17) 213.180.214.128 – 213.180.214.255 (213.180.192.0/19) Наиболее активный робот: 87.250.255.243 |
| 64.68.80.0 – 64.68.87.255 (64.68.80.0/21) 64.233.160.0 – 64.233.175.255 (64.233.160.0/19) 66.102.0.0 – 66.102.15.255 (66.102.0.0/20) 66.249.64.0 – 66.249.95.255 (66.249.64.0/19) 72.14.192.0 – 72.14.255.255 (72.14.192.0/18) 209.85.128.0 – 209.85.255.255 (209.85.128.0/17) 216.239.32.0 – 216.239.63.255 (216.239.32.0/19) Наиболее активный робот: 66.249.65.141 |
|
| Yahoo | 67.195.0.0 – 67.195.255.255 (67.195.0.0/16) 69.147.64.0 – 69.147.127.255 (69.147.64.0/18) 72.30.64.0 – 72.30.255.255 (72.30.0.0/16) 74.6.0.0 – 74.6.255.255 (74.6.0.0/16) Наиболее активный робот: 74.6.68.152 |
| Ramlber | 81.19.64.0 – 81.19.66.255 (81.19.64.0/19) Наиболее активный робот: 81.19.66.8, 81.19.66.77 и 81.19.66.115 |
| Mail.ru | 94.100.176.0 – 94.100.183.255 (94.100.176.0/20) 94.100.181.128 – 94.100.181.255 (94.100.181.128/25) 195.239.211.0 (195.239.211.0/24) Наиболее активный робот: 94.100.176.20 и 94.100.181.91 |
| Microsoft Bing.com | 65.52.0.0 – 65.55.255.255 (65.52.0.0/14), 207.46.0.0 – 207.46.255.255 (207.46.0.0/16) Наиболее активный робот: 207.46.98.149 |
| Aport | 194.67.18.* Наиболее активный робот: 194.67.18.239 |
| Gigabot или Gigablast | 66.231.188. (66.231.188.0/24) |
| Liveinternet | 88.212.202.0 – 88.212.202.63 (88.212.202.0/26) Наиболее активный робот: 88.212.202.26 |
| Webalta | 77.91.224.0 – 77.91.224.255 (77.91.224.0/21) Наиболее активный робот: 77.91.224.12 и 77.91.224.23 |
На сегодня это всё. До новых статей…
С уважением, Денис Черников!
-
Как создать крутой сайт в 2023 году: советы по дизайну, разработке и безопасности
- Реализация мультиязычности на WordPress: преимущества, технические особенности и выбор метода
-
Как выбрать тему для блога и создать его на платформе
- Тимбилдинг для сотрудников что это такое простыми словами
- Работа с маркетплейсами что это простыми словами
- Кастомизация это простыми
- Как использовать инструмент переобхода страниц в Яндекс Вебмастере
-
Как применять маркетинговые стратегии для создания клиентоориентированной модели розничных продаж
-
Как сделать Снегопад на Сайте с помощью JQuery?
- Значение и создание личного бренда
Спасибо за статью Денис! Буду надеяться, что DDOS атаки обойдут меня стороной. Но как говорится «вооружен значит защищен», так что пригодится!
И видео интересное, как «шишки общества» относятся к поисковым системам.
Пожалуйста, Александр!
Как только твой блог перевалит за 500 хостов, думаю, что ты с ними познакомишься!
Денис, прости за дремучесть, хост это одно и тоже что и пост? Насколько я понимаю, к хостингу это не имеет отношение.
Нет, пост — это статья, а хост — это показатель, обычно используют для статистики счётчика!
Благодарю!!!
Пожалуйста!
Подскажите пож. как ими пользоваться…
Ими не нужно пользоваться, их нужно знать, чтобы случайно не заблокировать при DDOS-атаке.
Спасибо, а то прочитал и не понял, а что с ними делать? Буду иметь на будущее, до таких коленкоров еще нужно дорасти
Пожалуйста, Виктор! Лучше бы они не понадобились!
Понятно! Благодарю!
Не за что!
Спасибо за полезную статью. Хотела заказать статью, но не поняла какую форму заполнять. Хотела чтоб Вы рассказали, как избавиться от соплей в выдаче гугла.
Пожалуйста, Любовь! Что значит «Сопли»?
Денис здравствуй! Не обязательно 500 хостов, их может быть и 50… Атакуют чаще, чем можно себе представить!
Конечно, атака атаке — рознь. Но более — менее отбиваться можно при помощи фаервола…
Привет, Андрей!
Правильное замечание — «Атака атаке — рознь». При 50 хостах, это ещё игрушки, особо ни кто не будет Вас сильно ломать, но серьёзные ресурсы получают серьёзные атаки, которые делают профи, а не местные школьники.
Спасибо за полезные советы!
Пожалуйста, Алексей!
Денис! Спасибо за статью, конечно. Я и сам видел этот ошибку 403 при заходе на твой сайт, но только с одного компа. Это свидетельствовало о том, что IP был заблокирован по видимому тобой. А где можно почитать об IP адресах поисковых роботов. Меня очень интересует один IP кому принадлежит. Но пока блокировать не хочу.
Пожалуйста, Алексей!
А что Вы хотите о них почитать? Они все в этом списке. А кому принадлежит IP, можно легко узнать в интернете!
Вот это действительно очень полезная информация, спасибо!
Пожалуйста!
Да полезнейшая статья спасибо
Пожалуйста!
Денис, добрый день! У меня как раз сейчас возникла та же проблема, что и у вас. Я подумала, уже все — google забанил мой сайт. Буквально за 2 дня посещаемость снизилась на 4 тыс. человек! А оказалось, что плагин безопасности заблокировал доступ поискового робота к моему сайту…(( Интересно, а сколько вообще времени потребуется, чтобы все страницы снова попали в поиск google? может есть какие-то советы, как можно ускорить этот процесс.
Здравствуйте, Ольга! Этот процесс Вы не ускорите, гугл-бот очень ленивый и может понадобиться от нескольких дней до недель, чтобы все страницы вернулись в индекс.
Напишите пожалуйста как диапазон Ip вставлять:
Deny from 93.171.202.233…
Поясните пожалуйста точнее, что и куда Вы хотите вставить!
А кто такой Gigabot? У меня программер тоже «закрыл» его при DDOS атаке
Не сталкивался, сейчас всего много, за всем не уследишь!)
Вот и я назащищалась) Благодарю за список!
Желаю всем читателям Sozdaiblog.ru отличного настроения! В этой статье хотелось бы представить вам диапазон IP-адресов поисковых роботов. И радостно отметить, что за последние полторы недели на блог не было ни одной DDOS-атаки. Я мог спокойно работать, не отвлекаясь на ежедневные атаки хакеров. В одной из своих статей я рассказывал о простом способе защиты от DDOS-атак. Так вот, я таким образом защищался, что блокировал половину IP-адресов поисковых роботов, которые ищут новый уникальный контент на каждом блоге в Интернете. В результате, страницы моего блога несколько раз выпадали из индекса Яндекса и Google. Поисковые роботы при обращении к “Sozdaiblog.ru” получали ошибку “403” и уходили. Конечно же, после того, как я обнаружил и исправил свою ошибку, все статьи стали доступны как для людей, так и для ботов, но по определенным ключевым запросам позиции сильно упали. Надеюсь, что вскоре все вернется в норму, и запросы вернутся в топ поисковой выдачи. Желаю и вам избежать путаницы такого рода!
Уважаемый Sozdaiblog.ru, спасибо за вашу статью! Я рад, что ваш блог не подвергался DDOS-атакам в последнее время и вы смогли спокойно работать. Интересно узнать о диапазоне IP-адресов поисковых роботов, которые сканируют блоги в поисках нового контента. Я понимаю, что защищая ваш блог от атак, вы случайно заблокировали половину этих IP-адресов, что привело к выпадению страниц из индексов Яндекса и Google. Но я уверен, что после исправления ошибки все запросы вновь вернутся в топ поисковой выдачи. Желаю вам удачи и чтобы в дальнейшем таких проблем не возникало!
Как замечательно, что блог был защищен от DDOS-атак, за последние полторы недели не было ни одного инцидента! Но, пожалуй, стоит быть осторожным с блокировкой IP-адресов поисковых роботов. Хоть это и надежная защита, она может привести к снижению видимости статей блога в поисковых системах, как произошло с вашими статьями. Но самое главное, что все ошибки уже исправлены, и я уверен, что вскоре все запросы будут возвращены в ТОП поисковой выдачи. Желаю вам удачи и чтобы подобные ситуации больше не повторялись!