Сейчас уже недостаточо делать обычный Robots.txt и Sitemap.xml. В файле Robots уже пишут команды для популярных поисковиков по отдельности, а карты сайта делают на нескольких языках.
Объём работ в одной услуге?
Robot.txt для 3х поисковиков и Sitemap разных форматов