wmmail.ru – cервис почтовых рассылок на главную
написать письмо
карта сайта

С чего начать?РекламодательПравилаFAQСтатистикаБиржа статейTOP100ФоткиКонтакты
Логин:
Пароль: 
Регистрация   Забыли пароль?
WMLogin
Пользователей всего:

512989

Пользователей сегодня:

38

Пользователей online:

196

Выплачено ($): 7`606`145,22
Выплат: 8`115`414
Писем прочитано: 1`024`956`029

 
 
Online 0
Все ответы
 
 

Вопрос #64126

Внимание! В разделе вопрос-ответ запрещается:

  • Мат, оскорбления, флуд, реклама
  • Сообщения, не являющиеся вопросами/ответами
  • Нарушение законодательства РФ
  • Попрошайничество в любой форме

Выделите текст и нажмите для цитирования  #  
+1   [18.11.2014 17:45] werter124 Рейтинг 768.25     Стена пользователя werter124 +191

Закрытый вопрос от пользователя werter124 Каким должно быть содержимое файла robots.txt?

У меня такое-
User-agent: *
Disallow: /wp-admin
Host: www.сайт.ру

Говорят что кару свйта прописать, что еще добавить нужно?
Раздел: SEO, продвижение, раскрутка, последний комментарий: 20.11.2014 06:14
Вопрос закрыт пользователем Leningrad00
Проголосовали: Sergey163RUS

Ответы
Ответов всего: 5  вопрос закрыт 
Выделите текст и нажмите для цитирования  #  
0   [18.11.2014 17:49] Sergey163RUS Рейтинг 1553.00     Стена пользователя Sergey163RUS +433  Все ответы пользователя Sergey163RUS

Выделите текст и нажмите для цитирования  #  
0   [18.11.2014 18:03] #1445930   Все ответы пользователя

Sergey163RUS пишет http://joomla-create.ru/soderzhimoe-fajla-robots-txt

этот robots.txt для joomla, а человеку нужен для wordpress.
Выделите текст и нажмите для цитирования  #  
0   [18.11.2014 18:52] werter124 Рейтинг 768.25     Стена пользователя werter124 +191  Все ответы пользователя werter124

#1445930 пишет
Sergey163RUS пишет http://joomla-create.ru/soderzhimoe-fajla-robots-txt

этот robots.txt для joomla, а человеку нужен для wordpress.

именно так
Выделите текст и нажмите для цитирования  #  
+2   [18.11.2014 21:56] #2099953   Все ответы пользователя

User-agent: *
Disallow:
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /author/
Disallow: /exit/
Sitemap: http://*/sitemap.xml

User-agent: YandexBot
Disallow:
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /author/
Disallow: /exit/
Sitemap: http://*/sitemap.xml

User-agent: Googlebot
Disallow:
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /author/
Disallow: /exit/
Sitemap: http://*/sitemap.xml

Отдельные правила для ботов можно убрать, но может понадобится в будущем
Проголосовали: #1445930, #2011615
Выделите текст и нажмите для цитирования  #  
0   [20.11.2014 06:14] #2011615   Все ответы пользователя

werter124 пишет Host: www.сайт.ру

Заменить на http://site.ru
:smok:

Добавлено спустя 12 минут 47 секунд
Вот вариант, и хорошо индексируется.
User-agent: *
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: */trackback/
Disallow: /wp-config.php
Sitemap: http://сайт.ру/sitemap.xml

С учетом, что используется хеширование страниц,
для снижения нагрузки и стабильности.

Видеоурок

Вопрос-ответ

НОВОСТИ
03.04.2024Выплаты
подробнее>>
21.02.2024QIWI
подробнее>>

© 2004-2024 «WMMAIL» Пользовательское соглашение