User-agent: * Allow: / # Служебные трекинг-параметры (не меняют контент): склейка дублей для Яндекса # Внимание: в Clean-param параметры разделяются символом & (не пробелом/запятой) Clean-param: utm_source&utm_medium&utm_campaign&utm_term&utm_content&utm_referrer&yclid&gclid&fbclid&_ga&_gid Disallow: /api/ # Большие data-JSON (клиентские индексы, 7–52 МБ): не для краулеров — берегут crawl # budget и не «сливают» устаревшие id. Контент доступен в HTML/через sitemap. Disallow: /experiences/index.json Disallow: /experiences/index.ssr.json Disallow: /tours/index.json Disallow: /tours/index.tours.json Disallow: /search/ Disallow: /hotels/ Disallow: /_AI_TASKS/ Disallow: /trips/ Disallow: /soon Disallow: /start Disallow: /stop Disallow: /template-wl Disallow: /test-tg.html Disallow: /dev-index.html Disallow: /letim_fixed.html Disallow: /_landing.html # AI-боты: блок сборщиков контента/секретов User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Amazonbot Disallow: / User-agent: Bytespider Disallow: / # AI-поиск: разрешён (видимость в генеративных выдаче) User-agent: OAI-SearchBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / Sitemap: https://letim.me/sitemap.xml