Модератор форума: chocopie |
Форум » uCoz » Уроки по ucoz » Файл robots.txt на сайте ucoz |
Файл robots.txt на сайте ucoz |
off-line Добавлено: 2011-Июл-07 - 17:31 | Сообщение #1
Очень часто возникает вопрос о том, как правильно настроить этот файл. Открою Вам секрет - он уже настроен автоматически самой системой и его не нужно изменять. Вот так выглядит стандартный файл robots.txt на системе ucoz (в примере наш сайт):
User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Sitemap: http://www.uc-portaller.ru/sitemap.xml Sitemap: http://www.uc-portaller.ru/sitemap-forum.xml Sitemap: http://www.uc-portaller.ru/sitemap-shop.xml Отсюда мы можем видеть, что закрыты от индексации все системные регистры, профили, чат, результаты поиска, админка, информеры и другое. Также в этом файле указаны пути к карте самого сайта, форума и магазина. Этот вариант такого файла самый удачный, так как в индекс будет попадать только контент, а не куча ненужного мусора и профили пользователей. Поэтому, когда Вам говорят, что при оптимизации сайта Вам очень правильно настроят robots.txt, то не верьте, его не нужно настраивать, там изначально все отлично работает. Хочешь в команду сайта? Пиши! Контакты в профиле. |
off-line Добавлено: 2012-Апр-08 - 16:24 | Сообщение #3
Только для того, чтобы открылся доступ к индексации нужно сначала купить премиум аккаунт на ucoz. Не знаю как у других, но у меня было так:
Я создал robots.txt перед тем, как добавить для индексации в ПС. В первую очередь, добавил его Яндекс Вебмастер, сделал все что нужно, но на последней стадии мне он написал о том, что типа у меня запрет индексирования в файле robots.txt, хотя он у меня выглядел вот так: User-agent: * Disallow: / Sitemap: ссылка/sitemap.xml Sitemap: ссылка/sitemap-forum.xml Ну я подумал, что нужно подождать и он найдет, но я ждал где-то недели 3, никаих продвижений не было... Я решил удалить его с ЯндексВебмастер и заново туда все внести. Только сначала я купил премиум на месяц самый дешевый, там просто я тогда увидел, что открывается индексация, и оп ля!)У меня сразу же все добавилось))))) Ручной прогон по трастовым сайтам |
off-line Добавлено: 2012-Апр-08 - 18:35 | Сообщение #4
Quote (ale62055584) Только для того, чтобы открылся доступ к индексации нужно сначала купить премиум аккаунт на ucoz. Не знаю как у других, но у меня было так: Я создал robots.txt перед тем, как добавить для индексации в ПС. В первую очередь, добавил его Яндекс Вебмастер, сделал все что нужно, но на последней стадии мне он написал о том, что типа у меня запрет индексирования в файле robots.txt, хотя он у меня выглядел вот так: User-agent: * Disallow: / Sitemap: ссылка/sitemap.xml Sitemap: ссылка/sitemap-forum.xml Ну я подумал, что нужно подождать и он найдет, но я ждал где-то недели 3, никаих продвижений не было... Я решил удалить его с ЯндексВебмастер и заново туда все внести. Только сначала я купил премиум на месяц самый дешевый, там просто я тогда увидел, что открывается индексация, и оп ля!)У меня сразу же все добавилось))))) че-то как-то непонятно. Он же автоматически настроен, стразу же при создании. Сайт лишь на месяц блокирует его, купив премиум я так понимаю что ты его разблокировал, но нах самому создавать??? + в репу или помогать больше не буду |
off-line Добавлено: 2012-Апр-08 - 18:44 | Сообщение #5
В нынешнее время на сайте файл робота не появляется! уже как 3 месяца!
|
off-line Добавлено: 2012-Апр-08 - 20:32 | Сообщение #6
Admin, несоласен, не всегда должны быть
Quote (Admin) закрыты от индексации все системные регистры, профили, чат, результаты поиска, админка, информеры и другое. |
off-line Добавлено: 2012-Апр-08 - 21:58 | Сообщение #7
Quote (|Diox|) че-то как-то непонятно. Он же автоматически настроен, стразу же при создании. Сайт лишь на месяц блокирует его, купив премиум я так понимаю что ты его разблокировал, но нах самому создавать??? Я сам не понимал, такое было впервые))Когда начал создавать на заказ после этого я уже тупо клал на счет 99 руб на ucoz и покупал премиум, чтобы сразу разблокировать)) Ручной прогон по трастовым сайтам |
off-line Добавлено: 2012-Май-09 - 18:50 | Сообщение #8
А urllist считается за карту и можно ссылку на urllist.txt указать в robots.txt?
http://yourfilms.net - мы всегда рады вам! Сообщение отредактировал Help-me - Среда, 2012-Май-09, 18:52
|
off-line Добавлено: 2012-Май-09 - 21:32 | Сообщение #9
Help-me, насколько я знаю urllist.txt создается для яху.
Качественный аудит сайта http://uc-portaller.ru/forum/10-1791-1 |
off-line Добавлено: 2012-Май-10 - 11:55 | Сообщение #10
Quote (ale62055584) Только для того, чтобы открылся доступ к индексации нужно сначала купить премиум аккаунт на ucoz. или 30 дней подождать! Я - Леголас. Эльф лесного королевства. |
| |||