Узнайте, зачем нужен файл robots.txt, как его настроить и избежать ошибок. Пошаговая инструкция с примерами для начинающих.
