Полный список директив Robots.txt

На данный момент в Robots.txt доступны следующие директивы:

Для более удобной работы с директивами, есть возможность задавать маски и оставлять комментарии.

Директивы, которые были отменены поисковыми системами:

Я всегда стараюсь следить за актуальностью информации на сайте, но могу пропустить ошибки, поэтому буду благодарен, если вы на них укажете. Если вы нашли ошибку или опечатку в тексте, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам:

Отправить