Диапазон IP- адресов Поисковых роботов!

Опубликовано: 02.02.2013

Время на чтение: 8 мин

2261

Хорошего настроения всем читателям – Sozdaiblog.ru!

В этой статье я хочу представить Вашему вниманию диапазон IP-адресов поисковых роботов.

К моей великой радости за последние полторы недели на блог не было ни одной DDOS-атаки.

Всё это время я спокойно работал, а не отбивался от ежедневных набегов татаро-монгольских хакеров.

Если Вы помните, то в одном из своих постов я описывал простой способ защиты от DDOS-атак.

Так вот, друзья я так назащищался, что позаблокировал половину IP-адресов поисковых роботов, которые тихо и мирно сканируют каждый блог в Интернете на наличие нового уникального контента.

Из-за этих действий несколько раз страницы блога выпадали из индекса Яндекса и Google.

Поисковые роботы при попытки индексации «Sozdaiblog.ru» получали «403» ошибку и убирались восвояси.

Конечно, после обнаружения и исправления собственной ошибки все статьи стали по-прежнему доступны, как для людей, так и для ботов, но по определённым ключевым запросам они сильно просели.

Надеюсь, что в ближайшее время всё нормализуется и все запросы вновь вернуться в TOP поисковой выдачи.

Чтобы и Вам так же не накосячить предлагаю ознакомиться со списком диапазона IP-адресов поисковых роботов.

Список диапазона IP-адресов поисковых роботов.

Название поисковика	Диапазон IP-адресов Поисковых роботов
Yandex	77.88.22.0 – 77.88.23.255 (77.88.0.0/18) 87.250.224.0 – 87.250.255.255 (87.250.224.0/19) 93.158.128.0 – 93.158.191.255 (93.158.128.0/18) 95.108.128.0 – 95.108.255.255 (95.108.128.0/17) 213.180.214.128 – 213.180.214.255 (213.180.192.0/19) Наиболее активный робот: 87.250.255.243
Google	64.68.80.0 – 64.68.87.255 (64.68.80.0/21) 64.233.160.0 – 64.233.175.255 (64.233.160.0/19) 66.102.0.0 – 66.102.15.255 (66.102.0.0/20) 66.249.64.0 – 66.249.95.255 (66.249.64.0/19) 72.14.192.0 – 72.14.255.255 (72.14.192.0/18) 209.85.128.0 – 209.85.255.255 (209.85.128.0/17) 216.239.32.0 – 216.239.63.255 (216.239.32.0/19) Наиболее активный робот: 66.249.65.141
Yahoo	67.195.0.0 – 67.195.255.255 (67.195.0.0/16) 69.147.64.0 – 69.147.127.255 (69.147.64.0/18) 72.30.64.0 – 72.30.255.255 (72.30.0.0/16) 74.6.0.0 – 74.6.255.255 (74.6.0.0/16) Наиболее активный робот: 74.6.68.152
Ramlber	81.19.64.0 – 81.19.66.255 (81.19.64.0/19) Наиболее активный робот: 81.19.66.8, 81.19.66.77 и 81.19.66.115
Mail.ru	94.100.176.0 – 94.100.183.255 (94.100.176.0/20) 94.100.181.128 – 94.100.181.255 (94.100.181.128/25) 195.239.211.0 (195.239.211.0/24) Наиболее активный робот: 94.100.176.20 и 94.100.181.91
Microsoft Bing.com	65.52.0.0 – 65.55.255.255 (65.52.0.0/14), 207.46.0.0 – 207.46.255.255 (207.46.0.0/16) Наиболее активный робот: 207.46.98.149
Aport	194.67.18.* Наиболее активный робот: 194.67.18.239
Gigabot или Gigablast	66.231.188. (66.231.188.0/24)
Liveinternet	88.212.202.0 – 88.212.202.63 (88.212.202.0/26) Наиболее активный робот: 88.212.202.26
Webalta	77.91.224.0 – 77.91.224.255 (77.91.224.0/21) Наиболее активный робот: 77.91.224.12 и 77.91.224.23

На сегодня это всё. До новых статей…

С уважением, Денис Черников!

Автор:

Sozdaiblog

Сайт

-2 0

Похожие записи

533

Тайм-менеджмент для блогера

304

О чем следует помнить, создавая свой бизнес?

280

Заработок на фото: микростоки для новичков

917

Каковы цели и задачи отдела маркетинга?

543

Как открыть Заблокированный сайт?

565

Как создать социальную сеть?

Комментарии:

Александр Красильный
Опубликовано: 02.02.2013 Ответить на сообщение

Спасибо за статью Денис! Буду надеяться, что DDOS атаки обойдут меня стороной. Но как говорится «вооружен значит защищен», так что пригодится!
И видео интересное, как «шишки общества» относятся к поисковым системам.
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Пожалуйста, Александр!
  Как только твой блог перевалит за 500 хостов, думаю, что ты с ними познакомишься!
  - Victor Chertkov
    Опубликовано: 04.02.2013 Ответить на сообщение
    
    Денис, прости за дремучесть, хост это одно и тоже что и пост? Насколько я понимаю, к хостингу это не имеет отношение.
    - Денис Черников
      Опубликовано: 04.02.2013 Ответить на сообщение
      
      Нет, пост — это статья, а хост — это показатель, обычно используют для статистики счётчика!
Елена
Опубликовано: 02.02.2013 Ответить на сообщение

Благодарю!!!
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Пожалуйста!
Елена
Опубликовано: 02.02.2013 Ответить на сообщение

Подскажите пож. как ими пользоваться...
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Ими не нужно пользоваться, их нужно знать, чтобы случайно не заблокировать при DDOS-атаке.
  - Victor Chertkov
    Опубликовано: 04.02.2013 Ответить на сообщение
    
    Спасибо, а то прочитал и не понял, а что с ними делать? Буду иметь на будущее, до таких коленкоров еще нужно дорасти
    - Денис Черников
      Опубликовано: 04.02.2013 Ответить на сообщение
      
      Пожалуйста, Виктор! Лучше бы они не понадобились!
Елена
Опубликовано: 02.02.2013 Ответить на сообщение

Понятно! Благодарю!
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Не за что!
Любовь
Опубликовано: 02.02.2013 Ответить на сообщение

Спасибо за полезную статью. Хотела заказать статью, но не поняла какую форму заполнять. Хотела чтоб Вы рассказали, как избавиться от соплей в выдаче гугла.
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Пожалуйста, Любовь! Что значит «Сопли»?
Андрей Бас
Опубликовано: 02.02.2013 Ответить на сообщение

Денис здравствуй! Не обязательно 500 хостов, их может быть и 50... Атакуют чаще, чем можно себе представить!
Конечно, атака атаке — рознь. Но более — менее отбиваться можно при помощи фаервола...
- Денис Черников
  Опубликовано: 02.02.2013 Ответить на сообщение
  
  Привет, Андрей!
  Правильное замечание — «Атака атаке — рознь». При 50 хостах, это ещё игрушки, особо ни кто не будет Вас сильно ломать, но серьёзные ресурсы получают серьёзные атаки, которые делают профи, а не местные школьники.
Алексей
Опубликовано: 03.02.2013 Ответить на сообщение

Спасибо за полезные советы!
- Денис Черников
  Опубликовано: 03.02.2013 Ответить на сообщение
  
  Пожалуйста, Алексей!
Алексей
Опубликовано: 03.02.2013 Ответить на сообщение

Денис! Спасибо за статью, конечно. Я и сам видел этот ошибку 403 при заходе на твой сайт, но только с одного компа. Это свидетельствовало о том, что IP был заблокирован по видимому тобой. А где можно почитать об IP адресах поисковых роботов. Меня очень интересует один IP кому принадлежит. Но пока блокировать не хочу.
- Денис Черников
  Опубликовано: 03.02.2013 Ответить на сообщение
  
  Пожалуйста, Алексей!
  А что Вы хотите о них почитать? Они все в этом списке. А кому принадлежит IP, можно легко узнать в интернете!
Николай
Опубликовано: 06.02.2013 Ответить на сообщение

Вот это действительно очень полезная информация, спасибо!
- Денис Черников
  Опубликовано: 06.02.2013 Ответить на сообщение
  
  Пожалуйста!
Александр
Опубликовано: 10.02.2013 Ответить на сообщение

Да полезнейшая статья спасибо
- Денис Черников
  Опубликовано: 10.02.2013 Ответить на сообщение
  
  Пожалуйста!
Ольга
Опубликовано: 21.05.2013 Ответить на сообщение

Денис, добрый день! У меня как раз сейчас возникла та же проблема, что и у вас. Я подумала, уже все — google забанил мой сайт. Буквально за 2 дня посещаемость снизилась на 4 тыс. человек! А оказалось, что плагин безопасности заблокировал доступ поискового робота к моему сайту...(( Интересно, а сколько вообще времени потребуется, чтобы все страницы снова попали в поиск google? может есть какие-то советы, как можно ускорить этот процесс.
- Денис Черников
  Опубликовано: 21.05.2013 Ответить на сообщение
  
  Здравствуйте, Ольга! Этот процесс Вы не ускорите, гугл-бот очень ленивый и может понадобиться от нескольких дней до недель, чтобы все страницы вернулись в индекс.
Костя
Опубликовано: 07.09.2013 Ответить на сообщение

Напишите пожалуйста как диапазон Ip вставлять:
Deny from 93.171.202.233...
- Денис Черников
  Опубликовано: 07.09.2013 Ответить на сообщение
  
  Поясните пожалуйста точнее, что и куда Вы хотите вставить!
Станислав
Опубликовано: 03.09.2014 Ответить на сообщение

А кто такой Gigabot? У меня программер тоже «закрыл» его при DDOS атаке
- Денис Черников
  Опубликовано: 03.09.2014 Ответить на сообщение
  
  Не сталкивался, сейчас всего много, за всем не уследишь!)
Эльвира
Опубликовано: 20.11.2016 Ответить на сообщение

Вот и я назащищалась) Благодарю за список!
Виктор
Опубликовано: 23.08.2023 Ответить на сообщение

Желаю всем читателям Sozdaiblog.ru отличного настроения! В этой статье хотелось бы представить вам диапазон IP-адресов поисковых роботов. И радостно отметить, что за последние полторы недели на блог не было ни одной DDOS-атаки. Я мог спокойно работать, не отвлекаясь на ежедневные атаки хакеров. В одной из своих статей я рассказывал о простом способе защиты от DDOS-атак. Так вот, я таким образом защищался, что блокировал половину IP-адресов поисковых роботов, которые ищут новый уникальный контент на каждом блоге в Интернете. В результате, страницы моего блога несколько раз выпадали из индекса Яндекса и Google. Поисковые роботы при обращении к "Sozdaiblog.ru" получали ошибку "403" и уходили. Конечно же, после того, как я обнаружил и исправил свою ошибку, все статьи стали доступны как для людей, так и для ботов, но по определенным ключевым запросам позиции сильно упали. Надеюсь, что вскоре все вернется в норму, и запросы вернутся в топ поисковой выдачи. Желаю и вам избежать путаницы такого рода!

Отмена