10 ноября 2010 в 15:01
Подскажите пожалуйста, почему в яндексе страниц в поиске всего 11 из 220 страниц ,загруженных роботом.И те, кроме главной, какие-то левые.
А в гугле URL в интернет-индексе 92 страницы (из 117 страниц в sitemap.xml ) .
Что я делаю не так и где взять инфу по этому поводу?
Комментарии
Как проверяли число страниц в индексе?
Когда создан сайт и когда добавлен в поисковики?
В robots ничего не добавлено?
По поводу Гугла - там никогда всех страниц не будет. У него хитрый индекс, состоящий из основного и дополнительного.
Проверял в webmaster.yandex.ru .Зарегистрирован там больше двух месяцев.
Сайт создан и добавлен около 3 мес назад.
В robots раньше не было ничего добавлено , неделю назад изменил,привел в такой вид:
Disallow: /database/
Disallow: /includes/
Disallow: /misc/
Disallow: /modules/
Disallow: /sites/
Disallow: /themes/
Disallow: /scripts/
Disallow: /updates/
Disallow: /profiles/
Disallow: /xmlrpc.php
Disallow: /cron.php
Disallow: /update.php
Disallow: /install.php
Disallow: /index.php
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /contact/
Disallow: /logout/
Disallow: /search/
Disallow: /user/register/
Disallow: /user/password/
Disallow: /user/login/
Disallow: /top-rated-
Disallow: /messages/
Disallow: /book/export/
Disallow: /taxonomy/
Disallow: /user2userpoints/
Disallow: /myuserpoints/
Disallow: /tagadelic/
Disallow: /referral/
Disallow: /aggregator/
Disallow: /user/login?
Disallow: /crss/
Disallow: /*destination=
Disallow: /*sort=
Disallow: /*order=
Disallow: /*title=
Disallow: /*/edit/
Disallow: /*/delete/
Disallow: /*/export/html/
Disallow: /*/edit$ ,
Disallow: /*/outline$
Disallow: /*/revisions$
Disallow: /*/contact$
Disallow: /node/*/track$
Может стоит убрать строку?
Disallow: /index.php
посмотрите пример _http://fantasy-portal.ru/robots.txt
Угу, это то, что надо, в этом примере нет строки которую я предложил убрать
Спасибо, попробую исправить.