Правильный robots.txt для сайта без CMS

Данный robots.txt запрещает для индексации страницы с расширением .php, а также все адреса страниц, содержащие GET-параметры.

User-agent: Yandex
Disallow: /*.php*
Disallow: /*?*
Sitemap: url_сайта/sitemap.xml

User-agent: *
Disallow: /*?*
Disallow: /*.php*
Рейтинг автора
Автор статьи
Юрий
SEO-аналитик, программист (PHP, Ajax, Delphi, MySQL).
Написано статей
131
1 Звезда2 Звезды3 Звезды4 Звезды5 Звезд (13 оценок, среднее: 4,92 из 5)
Загрузка...
Понравилась статья? Поделиться с друзьями:
Блог Программиста
Добавить комментарий

;-) :| :x :twisted: :smile: :shock: :sad: :roll: :razz: :oops: :o :mrgreen: :lol: :idea: :grin: :evil: :cry: :cool: :arrow: :???: :?: :!:

17 − пятнадцать =