Robots.txt и sitemap.xml для сайтов на любых CMS

Что включает в себя услуга по настройке файла robots.txt:

1. Секции правил для ПС google и яндекс (другие системы по желанию клиента)
2. Учет всей структуры сайта
3. Запрет от индексации страниц дублей, системных страниц, фильтров, мусорных страниц
4. Работы с директивами Allow
5. Указание карты сайта - с протоколом или без

Настройка Sitemap (по выбору):

1. Установка модуля автогенерируемой карты сайта (если такой есть)
2. Генерация статичной карты сайта (по всей структуре сайта)
3. Учет приоритетности страниц для индексации

!!!Пример файла смотрите в приложении!!!