Добавлено: Ср Сен 15, 2004 2:08 am Заголовок сообщения: Оперативная индексация большого сайта
Есть сайт с числом страниц более тысячи, часть страниц не обновляется вообще, другая часть обновляется регулярно и еще одна категория страниц - новые.
Очень хочется чтобы новые и измененные страницы попадали в результаты поиска как можно быстрее. Думал сделать более мелкое дробление на домены третьего уровня, но опасаюсь что поисковики будут вычислять ИЦ для каждого поддомена в отдельности и тем самым я сделаю только хуже. Так ли это?
Если так - то похоже остается только один выход: использование "If-Modified-Since". Но.. Примерно треть страниц формируется как из старого так и нового контента (что-то типа результатов поиска по сайту) и определить дату последнего изменения контента невозможно.
Может кто-нибудь подскажет как выйти из этой ситуации?
Да, и еще.. Поделитесь, кто в курсе, какие поисковики используют If-Modified-Since в запросе и проверяют Last-Modified в ответах?
Добавлено: Ср Сен 15, 2004 10:49 am Заголовок сообщения:
1) Поддомены можешь не создавать, достаточно грамотно разложить сайт по подкаталогам
2) Сделай карту сайта и постарайся избавится от QUERY_STRING в запросах
3) На каждый из подкаталогов проставь хотя бы пару-тройку сильных ссылок
4) Обрабатывай If-Modified-Since - поисковик не будет тратить ресурсы на выкачку неизменившихся страниц. Сделай хотя бы для "старых" страниц - просто в течение месяца отдавай роботам 304.
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете голосовать в опросах
FAQ
Поиск
Пользователи
Группы
Реклама
Регистрация
Профиль
Войти и проверить личные сообщения
Вход
