Пособие по Robots.txt, работа с индексацией

Запрещаем весь сайт к индексации, кроме главной страницы

Используем спецсимвол $, который отменит превентивный запрет на индексацию.

Allow: /$
Disallow: /

Разрешаем к индексации только главную страницу!

А теперь запрещаем к индексации только главную страницу:

Disallow: /$

Disallow: /*?*

Поможет избежать дублей, созданных вашей CMS системой.

Проверка на дубли в яндексе, введите следующую конструкцию в поисковую строку:

грузоперевозки site:gorky-transit.ru

Спасибо за внимание =)

Обратная связь