Robots и sitemap

Oljenjonok
На сайте с 03.08.2010
Offline
26
437

Здравствуйте!

Подскажите мне, пожалуйста, какая строчка (строчки) в роботс.тхт не позволяет мне создать файл с картой сайта, предназначенной для поисковиков? Буду очень благодарна за помощь.

Содержимое моего роботс.тхт:

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: /feed

Disallow: /comments

Disallow: /category/*/*

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: /*?*

Disallow: /*?

Allow: /wp-content/uploads

# Google Image

User-agent: Googlebot-Image

Disallow:

Allow: /*

# Google AdSense

User-agent: Mediapartners-Google*

Disallow:

Allow: /*

# Internet Archiver Wayback Machine

User-agent: ia_archiver

Disallow: /

# digg mirror

User-agent: duggmirror

Disallow: /

Sitemap: http://oljuwka.ru/sitemap.xml

User-agent: Yandex

Crawl-delay: 5

Disallow: /tag/

Качественный, уникальный и недорогой копирайт и рерайт (/ru/forum/617252)
K
На сайте с 31.01.2001
Offline
737
#1

У вас слишком много ошибок.

Попробуйте почитать тут: http://help.yandex.ru/webmaster/?id=996567

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
e_4me
На сайте с 18.08.2010
Offline
49
#2

Oljenjonok, почему бы не воспользоваться готовым robots.txt для ВП, коих в сети навалом? И потом просто проверить его через инструменты вебмастера в Яндексе и Гугле?

Не думаю, что у Вас какие-то индивидуальные требования к содержимому этого файла ).

Сёрчу посвящается (/ru/forum/comment/7511412)
Oljenjonok
На сайте с 03.08.2010
Offline
26
#3
Kost:
У вас слишком много ошибок.
Попробуйте почитать тут: http://help.yandex.ru/webmaster/?id=996567

Спасибо :)

Oljenjonok добавил 10.03.2011 в 14:01

e_4me:
Oljenjonok, почему бы не воспользоваться готовым robots.txt для ВП, коих в сети навалом? И потом просто проверить его через инструменты вебмастера в Яндексе и Гугле?

Не думаю, что у Вас какие-то индивидуальные требования к содержимому этого файла ).

Простите, я просто не знала, что такие имеются ☝

e_4me
На сайте с 18.08.2010
Offline
49
#4

Имеются ).

Но проверить не забудьте. Во избежание неприятных сюрпризов )).

S
На сайте с 28.10.2005
Offline
310
#5

Что значит "непозволяет создать"?

Denisg
На сайте с 10.01.2008
Offline
136
#6

ээээээ... а вот вот это вы попробовали посмотреть: http://www.sitemaps.org/ru/

sitemap у вас правильный. остается лишь чтобы в индексе было много страниц.

Oljenjonok
На сайте с 03.08.2010
Offline
26
#7
semenov:
Что значит "непозволяет создать"?

прописывал, что в роботс.тхт запрещена индексация

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий