User-agent: *

# Системные директории IPS
Disallow: /api/
Disallow: /applications/
Disallow: /cgi-bin/
Disallow: /datastore/
Disallow: /plugins/
Disallow: /system/

# Разрешаем роботам доступ к шрифтам (важно для Google, чтобы не ломалась верстка при рендеринге)
Allow: /applications/core/interface/font/

# Технические и служебные страницы
Disallow: /login/
Disallow: /register/
Disallow: /lostpassword/
Disallow: /online/
Disallow: /contact/
Disallow: /cookies/
Disallow: /markallread/

# Страницы без уникального контента (дубли)
Disallow: /discover/
Disallow: /search/
Disallow: /leaderboard/
Disallow: /staff/

# Закрытие профилей пользователей от индексации
Disallow: /profile/*

# Фильтрация мусорных GET-параметров, сортировок и динамических страниц
Disallow: /*?do=*
Disallow: /*?tab=*
Disallow: /*?sortby=*
Disallow: /*?filter=*
Disallow: /*noJs*

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: Diffbot
Disallow: /

User-agent: AI2Bot
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: cohere-ai
Disallow: /

User-agent: DataForSeoBot
Disallow: /

User-agent: DotBot
Disallow: /

# Карта сайта
Sitemap: https://forum-info.ru/sitemap.php