файл robots txt

27 мар 2016, 04:21 CHELSI

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search

Sitemap: http://andrew-scrnshots-computer-games.

Здравствуйте. Стоял такой робот файл страницы пропали их индекса. в search concole все страницы кроме главной в индекс не шли.
Вот пример страниц http://andrew-scrnshots-computer-games. ... -results=7
Что это за пункт Disallow: /search что блокировал страницы. убрав эту надпись вроде блокировки теперь нет страницы пошли в индекс.
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow:

Sitemap: http://andrew-scrnshots-computer-games.
Такой робот правильный будет он сейчас стоит у меня.

27 мар 2016, 05:44 CHELSI

Disallow: /search
если я так понял это запрет на индексацию страниц кроме главной.

06 апр 2016, 16:15 Admin

CHELSI писал(а):Disallow: /search
если я так понял это запрет на индексацию страниц кроме главной.

Нет, это запрет на индексацию страниц с адресом

Код:: http://myblog.com/searh

Например, такой адрес имеют страницы Ярлыков. страницы с сообщениями блога имеют адрес

Код:: http://myblog.com/год/месяц/название поста

В них нет слова "searh", поэтому они должны индексироваться. Если этого не происходит, проблему нужно искать в другом. Возможно, нужно было просто подождать.