# Robots.txt для Permlive.ru # Оптимизирован для Core Web Vitals и SEO 2025-2026 User-agent: Yandex Allow: / Crawl-delay: 1 # API и служебные endpoints Disallow: /api Disallow: /api/ Disallow: /admin/ Disallow: /ping # Страницы аккаунтов и авторизации Disallow: /accounts/ Disallow: /account/ Disallow: /menu/accounts/ Disallow: /login/ Disallow: /signup/ Disallow: /logout/ Disallow: /password/ Disallow: /email/ Disallow: /profile/ Disallow: /users Disallow: /users/* Disallow: /settings # Служебные страницы Disallow: /like/ Disallow: /propose/ Disallow: /error/* # Блокируем дубли с параметрами Disallow: /*?*eventId= Disallow: *webview* Disallow: *sessionKey* Disallow: *clientKey* Disallow: *_ym_uid* Disallow: *utm_source* # Clean-param для удаления tracking-параметров из индекса Clean-param: next&page&query&start&end&date&month&utm_source&utm_medium&utm_campaign&utm_content&utm_term&fbclid&gclid&yclid&ttclid&tgclid&adrclid&yhic&yclyd&yhyd&ychid&etext&erid&sessionKey&clientKey&webview&referrer&source&clid&marketing&_ym_uid&rel_scan&ctime User-agent: Googlebot Allow: / Crawl-delay: 1 # API и служебные endpoints Disallow: /api Disallow: /api/ Disallow: /admin/ Disallow: /error/* # Страницы аккаунтов Disallow: /accounts/ Disallow: /menu/accounts/ Disallow: /users/ Disallow: /subscription/ # Блокируем параметры сессий и версий Disallow: *clientKey=* Disallow: *version* Disallow: *sessionKey* Disallow: *webview* Disallow: *_ym_uid* Disallow: *utm_source* User-agent: * Allow: / # Основные разделы - явно разрешаем Allow: /event/ Allow: /menu/ Allow: /artists/ Allow: /menu/places/ Allow: /new/ Allow: /discount/ Allow: /4u/ Allow: /tag/ Allow: /map/ Allow: /feeds/ # Статические файлы Allow: /static/ Allow: /media/ # API и служебные endpoints Disallow: /api Disallow: /api/ Disallow: /admin/ Disallow: /ping Disallow: /error/* # Страницы аккаунтов и авторизации Disallow: /accounts/ Disallow: /account/ Disallow: /menu/accounts/ Disallow: /login/ Disallow: /signup/ Disallow: /logout/ Disallow: /password/ Disallow: /email/ Disallow: /profile/ Disallow: /users Disallow: /users/* Disallow: /settings # Служебные страницы Disallow: /like/ Disallow: /propose/ # Блокируем дубли с параметрами Disallow: /*?*eventId= Disallow: /*?page=* Disallow: *webview* Disallow: *sessionKey* Disallow: *clientKey* Disallow: *_ym_uid* Disallow: *utm_source* Disallow: /*?utm_* Disallow: /*?fbclid=* Disallow: /*?gclid=* # Для Яндекс.Турбо User-agent: YandexTurbo Allow: / # Блокируем плохих ботов User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: MJ12bot Disallow: / # AI-краулеры и ответные движки: контент открыт всем. # Служебные разделы закрываем, чтобы боты не тратили краулинговый бюджет # на API, аккаунты и дубли с tracking-параметрами. User-agent: GPTBot User-agent: ChatGPT-User User-agent: OAI-SearchBot User-agent: Google-Extended User-agent: anthropic-ai User-agent: Claude-Web User-agent: ClaudeBot User-agent: Claude-SearchBot User-agent: Claude-User User-agent: PerplexityBot User-agent: Perplexity-User User-agent: CCBot User-agent: Applebot-Extended User-agent: Bytespider User-agent: Amazonbot User-agent: Amzn-SearchBot User-agent: Amzn-User User-agent: meta-externalagent User-agent: Meta-WebIndexer User-agent: cohere-ai User-agent: YouBot User-agent: DuckAssistBot User-agent: MistralAI-Index User-agent: MistralAI-User User-agent: Google-CloudVertexBot User-agent: Google-Agent User-agent: YandexAdditional User-agent: YandexAdditionalBot Allow: / Crawl-delay: 3 Disallow: /api Disallow: /api/ Disallow: /admin/ Disallow: /ping Disallow: /error/* Disallow: /accounts/ Disallow: /account/ Disallow: /menu/accounts/ Disallow: /login/ Disallow: /signup/ Disallow: /logout/ Disallow: /password/ Disallow: /email/ Disallow: /profile/ Disallow: /users Disallow: /users/* Disallow: /settings Disallow: /like/ Disallow: /propose/ Disallow: /*?*eventId= Disallow: *webview* Disallow: *sessionKey* Disallow: *clientKey* Disallow: *_ym_uid* Disallow: *utm_source* # Карта сайта (директива Host устарела с 2018 — Яндекс её игнорирует) Sitemap: https://permlive.ru/sitemap.xml # RSS-ленты Allow: /rss/ Allow: /feeds/