Все о Robots.txtВсе о Robots.txt
  • Плагин
  • Директивы
    • User-agent
    • Disallow и Allow
    • Host (отменена)
    • Clean-param
    • Crawl-delay (отменена)
    • Sitemap
    • Маски
    • Комментарии в файле
  • CMS
    • WordPress
  • Проверка
  • Инструкции
    • Запретить нейросетям сканировать сайт
  • Об авторе

Инструкции

  • Как запретить нейросетям ChatGPT, Google Bard обучаться на вашем контенте
Александр Кела
Александр Кела

Специалист по органическому трафику. Помогаю онлайн-сервисам привлекать целевых клиентов из поиска и рекомендательных систем без платной рекламы.

Александр Кела

Как получать клиентов из поиска, рекомендаций и контента без бюджета на рекламу.

Читать
© 2016–2026 Все о Robots.txt
Контакты