Налаштований файл robots.txt

Налаштовується файл robots.txt. Для Яндекса прописується основний хост.