Главная » Статьи |
Robots.txt - указывает на страницы, которые роботы индексировать не должны. Сейчас смысла нет его создавать, так как система uCoz теперь сама его создает, но обычно это происходит после того как пройдет месяц после создания сайта. Если вы хотите сами создать Robots.txt, вот правильный robots.txt User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Host: ваш сайт.домен Sitemap:http://ваш сайт.домен/sitemap.xml Sitemap:http://ваш сайт.домен/sitemap-forum.xml User-agent: * – значит что любой робот может индексировать сайт, если бы мы взяли и написали Google, то только гугл имел право бы смотреть сайт. Disallow: – Это обозначает, что не нужно индексировать, например /index/3 – будет регистрация, а это не нужно. Сайтмапы – Карта сайта Форума – Карта форума То есть это карта сайта, на сайте uCoz одна делается сама, без какой-либо помощи. | |
Просмотров: 466 | Рейтинг: 0.0/0 |
Всего комментариев: 0 | |