Пользователей всего:
5 1 7 1 6 9
Пользователей сегодня:
3 3
Выплачено ($):
7`616`728,38
Выплат:
8`124`697
Писем прочитано:
1`025`016`583
Вопрос #36105
Внимание! В разделе вопрос-ответ запрещается:
Мат, оскорбления, флуд, реклама
Сообщения, не являющиеся вопросами/ответами
Нарушение законодательства РФ
Попрошайничество в любой форме
+1 [22.10.2011 23:00] robmast 0.00 +221 Что будет если я загружу этот роботс.тхт на свой сайт
User-agent: *
Disallow:
Host: site.ru
Sitemap:
http://site.ru/sitemap.xml.gz
И какую лучше кодировку выбрать?UTF-8 стоит у меня теперь
если у меня на сайте будет такой роботс то сайт будут индексировать все поисковики?
Что еще мне посоветуете добавить к моему роботсу?
Раздел: Программирование , последний комментарий: 23.10.2011 04:24 Вопрос закрыт автором
Проголосовали: #895188
Ответы
Ответов всего: 6
вопрос закрыт
+1 [22.10.2011 23:05] #939448
короче создаешь к примеру на рабочем столе блокнотовский файл с названием и расширением robots.txt в ним пишешь что тебе там нада у меня к примеру вот так выглядит:
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
User-agent: *
Disallow: /
потом заливаешь в корневую папку сайта и все.
Проголосовали: robmast , #884793 , #895188
+2 [22.10.2011 23:34] Orenpoker 0.00 +23
robmast пишет Ну а если, просто в корне создать?Это не одно и тоже самое?
Тоже самое.. Disallow это страницы, которые ты не хочешь индексировать. типа страница админки итд.
Добавляй страницы которые закрываешь к индексации и все в принципе
Забыл. И пути к сайтмэпам пропиши в конце вида
Sitemap:
http://site.ru/путь к сайтмэп
Проголосовали: #895188 , robmast
+2 [22.10.2011 23:47] #884793
#939448 пишет короче создаешь к примеру на рабочем столе блокнотовский файл с названием и расширением robots.txt в ним пишешь что тебе там нада у меня к примеру вот так выглядит:
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
User-agent: *
Disallow: /
потом заливаешь в корневую папку сайта и все.
Смотря какие папки у вас на хосте....
Проголосовали: robmast , DOBREC
+1 [23.10.2011 04:24] Santaz 1118.52 +252
Проголосовали: robmast