Drupal 7 и индексация в гугле

Главные вкладки

Аватар пользователя Kzot Kzot 2 апреля 2019 в 23:05

Всем здравия!
Столкнулся с проблемой - гугл не выдает статьи с сайта у себя. С яндексом все хорошо. Знатоки, вы не могли бы глянуть мой robots.txt и написать, все ли верно там написано?

User-agent: YandexBot
# Directories
Disallow: /includes
Disallow: /misc
Disallow: /modules
Disallow: /profiles
Disallow: /scripts
Disallow: /themes
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /INSTALL.sqlite.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin
Disallow: /comment/reply
Disallow: /filter/tips
Disallow: /node/add
Disallow: /search
Disallow: /user
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login
Disallow: /user/logout
# Paths (no clean URLs)
Disallow: /?q=admin
Disallow: /?q=comment/reply
Disallow: /?q=filter/tips
Disallow: /?q=node/add
Disallow: /?q=search
Disallow: /?q=user/password
Disallow: /?q=user/register
Disallow: /?q=user/login
Disallow: /?q=user/logout

User-agent: Googlebot
# Directories
Disallow: /includes
Disallow: /misc
Disallow: /modules
Disallow: /profiles
Disallow: /scripts
Disallow: /themes
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /INSTALL.sqlite.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin
Disallow: /comment/reply
Disallow: /filter/tips
Disallow: /node/add
Disallow: /search
Disallow: /user
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login
Disallow: /user/logout
# Paths (no clean URLs)
Disallow: /?q=admin
Disallow: /?q=comment/reply
Disallow: /?q=filter/tips
Disallow: /?q=node/add
Disallow: /?q=search
Disallow: /?q=user/password
Disallow: /?q=user/register
Disallow: /?q=user/login
Disallow: /?q=user/logout

User-agent: *
# Directories
Disallow: /includes
Disallow: /misc
Disallow: /modules
Disallow: /profiles
Disallow: /scripts
Disallow: /themes
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /INSTALL.sqlite.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin
Disallow: /comment/reply
Disallow: /filter/tips
Disallow: /node/add
Disallow: /search
Disallow: /user
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login
Disallow: /user/logout
# Paths (no clean URLs)
Disallow: /?q=admin
Disallow: /?q=comment/reply
Disallow: /?q=filter/tips
Disallow: /?q=node/add
Disallow: /?q=search
Disallow: /?q=user/password
Disallow: /?q=user/register
Disallow: /?q=user/login
Disallow: /?q=user/logout

Host: kz0t.com
Sitemap: https://kz0t.com/sitemap.xml

Я всю голову сломал, как заставить гугл индексировать мой сайт.

Комментарии

Аватар пользователя Semantics Semantics 2 апреля 2019 в 23:13
1

Ваш сайт проиндексирован гуглом.
И даже микроразметку рейтинга подхватывает.
Всё не проверял, но выборочно.

Ещё у вас раньше было больше контента и url у страниц был иной. Хорошо бы настроить редиректы.

А вопрос ваш скорее про ранжирование.
На него влияет 100500 факторов.
Возможно, темы поднимаемые вами в статьях слишком узкие и мало кому интересны

Аватар пользователя Kzot Kzot 2 апреля 2019 в 23:45

Тогда еще вопрос. Почему я не вижу тем в гугле? Я захожу в яндекс и их вижу, а в гугле нет?
Например, вот этот запрос: "ff14 быстрая прокачка". Яндекс показывает мой сайт по этмоу запросу, а гугл - нет.

Аватар пользователя Kzot Kzot 3 апреля 2019 в 0:00

А причиной этому может быть давнишний сайт, который носил когда-то имя нынешнего домена? На теперешнем сайте таких нет страниц и ссылок...

Аватар пользователя pselfin pselfin 3 апреля 2019 в 0:59

Ладно, добрый я сегодня, научу.
Тем более тематика схожая.
Берешь старые урлы, восстанавливает или пишешь новый контент, но чтобы та же тема была, ключи, делаешь с битых урлов редиректы на соответствующие.
В итоге если был трафик, он теперь твой, если было ссылочное - тоже твое.
Затем собственно дропы и нужны.
Подробнее объяснять не буду, вся схема озвучена

Аватар пользователя pselfin pselfin 2 апреля 2019 в 23:56
1

Директиву host можно убрать, не нужна.
Да, ранжирование и индексация вещи разные.
Гугл любит хороший контент и ссылочное, вкупе с технической оптимизацией. Воюйте в общем)