| Предыдущая тема :: Следующая тема |
| Автор |
Сообщение |
Валерий Ермолаев Дайм
Зарегистрирован: 02.07.2006 Сообщения: 18 Откуда: Волжск
|
Добавлено: Вс Июл 02, 2006 7:55 pm Заголовок сообщения: Нужен ли файл ROBOTS.TXT или можно обойтись без него? |
|
|
Андрей, нужен файл ROBOTS.TXT или можно обойтись без него? Насколько его отсутствие существенно для поисковика? _________________ Устали быть "вечным начинающим" онлайновым предпринимателем и есть желание начать хоть что-нибудь делать и зарабатывать в онлайне? Хотите за 95 минут перейти из этой категории в категорию продвинутого бизнесмена?
http://www.copysecrets.teleseminar.ru/ |
|
| Вернуться к началу |
|
 |
Кира Lincoln
Зарегистрирован: 17.01.2005 Сообщения: 213
|
Добавлено: Пн Июл 03, 2006 6:59 am Заголовок сообщения: |
|
|
Хоть я не Андрей, но отвечу
Можно обойтись и без робот.тхт
Робот.тхт в основном нужен для запретов.
При отсутствии этого файла поисковик заглядывает во все файлы и папки. Если вас не смущают квоты поисковых систем на индексацию файлов, и сообщения об ошибках в логах, то можете не вспоминать про этот файл. |
|
| Вернуться к началу |
|
 |
andre Big Boss
Зарегистрирован: 27.06.2004 Сообщения: 2953 Откуда: Kazan
|
Добавлено: Пн Июл 03, 2006 9:59 am Заголовок сообщения: |
|
|
| Кира писал(а): | Хоть я не Андрей, но отвечу
Можно обойтись и без робот.тхт |
Спасибо, Надежда. А я добавлю ссылки.
Как правильно заполнять файл robots.txt _________________ С уважением,
Андрей Иванов. |
|
| Вернуться к началу |
|
 |
minaton Квоттер
Зарегистрирован: 03.09.2004 Сообщения: 708 Откуда: Москва
|
Добавлено: Пн Июл 03, 2006 11:28 am Заголовок сообщения: |
|
|
Можно и без этого файла обойтись, но если на сайте много страниц и много папок, то робот поисковика будет генерить кучу 404 ошибок и забьет весь лог-файл.
Это я к тому, что файл можно сделать хотя бы пустой и положить в корень сайта. _________________ Promotext.ru и Sape.ru - специально для оптимизаторов и вебмастеров |
|
| Вернуться к началу |
|
 |
Валерий Ермолаев Дайм
Зарегистрирован: 02.07.2006 Сообщения: 18 Откуда: Волжск
|
Добавлено: Пн Июл 03, 2006 7:05 pm Заголовок сообщения: |
|
|
| minaton писал(а): | Можно и без этого файла обойтись, но если на сайте много страниц и много папок, то робот поисковика будет генерить кучу 404 ошибок и забьет весь лог-файл.
Это я к тому, что файл можно сделать хотя бы пустой и положить в корень сайта. |
Файл должен быть совсем пустой или стандартная шапка какая-то должна быть? _________________ Устали быть "вечным начинающим" онлайновым предпринимателем и есть желание начать хоть что-нибудь делать и зарабатывать в онлайне? Хотите за 95 минут перейти из этой категории в категорию продвинутого бизнесмена?
http://www.copysecrets.teleseminar.ru/ |
|
| Вернуться к началу |
|
 |
minaton Квоттер
Зарегистрирован: 03.09.2004 Сообщения: 708 Откуда: Москва
|
Добавлено: Вт Июл 04, 2006 7:43 am Заголовок сообщения: |
|
|
| Валерий Ермолаев писал(а): |
Файл должен быть совсем пустой или стандартная шапка какая-то должна быть? |
Может быть совсем пустой _________________ Promotext.ru и Sape.ru - специально для оптимизаторов и вебмастеров |
|
| Вернуться к началу |
|
 |
|