Всем привет!
Сегодня наш сайт вылетел из Яндекса. Такое случалось и до этого. Есть подозрения что сайт в бане. Но дело в другом.
Зашел на http://webmaster.yandex.ru для добавления сайта на индексацию. Добавис урл, на что Яндекс ответил что в данный момент не может соедениться с сервером так как тот не отвечает. После написал письмо в саппорт хостерам, где изложил проблему с серваком. Пришел ответ который мягко скзать удивил.
Вот что написали: "IP Яндекса заблокирован фаерволом, так как они постоянно их меняют, и не удосужатся хотя бы дать сетку, чтобы мы смогли поставить в белый список фаервола - почистим таблицы и проблемы не будет".
Первый раз сталкиваюсь с подобной ситуацией, чтобы поисковый робот хостером блокировался. С одной стороны фаервол это правильно, и траф он чистить должен. Но ведь с яндексом это уже перегиб.
Так вот, кто знает. Может ли Яндекс постоянно менять IP своих роботов? И вообще, была ли у кого нить подобная ситуация?
Вспоминается история про то, что поисковые боты сильно нагружали серверы провайдера и он их грозился заблэклистить.
А вы не хотите поинтересоваться у своего хостера почему они блокируют IP Яндекса?
Обязательно поинтересуюсь. Просто сначала хочется больше узнать об этой ситуации. До этого с подобным не сталкивался.
Кстати пришло письмо от хостера, что блеклисты почистили. Проверил через форму яндекса - Яндекс на индексирование сайт добавил. Похоже на правду.
И все таки, может ли Яндекс айпишники роботов менять? Или это просто умная отмазка хостера?
Добавлено: Вт Окт 10, 2006 8:04 am Заголовок сообщения:
Цитата:
в последнее время роботы яндекса бродят с самых неожиданных IP растёт-с фирма
В последнее время много появилось юмористов, которые меняют в браузере стандартный User-agent на User-agent яндексовского индексатора, например.
А у лог-анализаторов потом башку сносит...
Отлавливаются такие юмористы по логам довольно просто - основной индексатор, например, картинки с сайта не запрашивает. _________________ С уважением,
Владимир Чернышов
(не)?путевые заметки промоутера
Добавлено: Ср Окт 11, 2006 8:18 am Заголовок сообщения:
Cherny писал(а):
В последнее время много появилось юмористов, которые меняют в браузере стандартный User-agent на User-agent яндексовского индексатора, например.
А у лог-анализаторов потом башку сносит...
Отлавливаются такие юмористы по логам довольно просто - основной индексатор, например, картинки с сайта не запрашивает.
так способом могут выявлять у конкурентов клоакинг по юзер-агенту, если таковой выявиться, то абузят в Яндекс _________________ Белый каталог сайтов
Добавлено: Ср Окт 11, 2006 8:28 am Заголовок сообщения: Re: IP Яндекса заблокирован фаерволом!
alexkad писал(а):
Зашел на http://webmaster.yandex.ru для добавления сайта на индексацию. Добавис урл, на что Яндекс ответил что в данный момент не может соедениться с сервером так как тот не отвечает.
реальная история - после последней волны банов и выпадений тоже были опасения насчет бана одного сайта (не моего, так просто типа прояснить хотел), так вот после добавления урла был примерно такой же как и в вашем случае ответ - сайт не доступен, днс запись отсутствует, зашел на сайт все вроде в норме, потом добавил два урла которые точно знал что забанены и уже давно, ответы точно как и в первый раз, я уже подумал, что мол поменяли ответ "урл не может быть добавлен т.к. бан" на "сайт не доступен".
а вот ваш случай ... даж уже и не знаю.... _________________ Белый каталог сайтов
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете голосовать в опросах
FAQ
Поиск
Пользователи
Группы
Реклама
Регистрация
Профиль
Войти и проверить личные сообщения
Вход
