Для анализа корректности файла sitemap.xml в вебмастере Яндекс существует специальный инструмент – «Анализ файлов
Для анализа корректности составления файла robots.txt в вебмастере Яндекс существует специальный инструмент – «Анализ