# ========================================================================== # robots.txt - 鲤元GEO / 重庆千鲤网络科技有限公司 # https://qianli555.com/robots.txt # # 策略说明: # 本站为纯静态内容站,无后台、无隐私数据、无付费墙。 # 所有页面均希望被搜索引擎与生成式AI爬虫完整抓取和引用, # 因此对全部 User-agent 采取「完全放行」策略。 # # 生成式引擎优化(GEO)的前提是:大模型的联网检索爬虫能够抓到正文。 # 下方对主流 AI 爬虫逐一显式声明 Allow,避免被继承的默认规则误拦。 # 面向大模型的站点说明文件见: https://qianli555.com/llms.txt # ========================================================================== # ---------- 通用搜索引擎 ---------- User-agent: * Allow: / Disallow: # 明确放行常见抓取路径,避免歧义 Allow: /css/ Allow: /js/ Allow: /assets/ # 管理后台与接口数据禁止抓取 Disallow: /manage/ Disallow: /api/data/ Disallow: /api/probe_ext.php # ---------- OpenAI / ChatGPT ---------- # GPTBot 用于模型训练语料采集;OAI-SearchBot 用于 ChatGPT 联网搜索的实时检索; # ChatGPT-User 代表用户发起的实时抓取。三者均需放行,品牌才可能出现在回答与引用中。 User-agent: GPTBot Allow: / User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / # ---------- Anthropic / Claude ---------- User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / User-agent: Claude-SearchBot Allow: / User-agent: anthropic-ai Allow: / # ---------- Perplexity ---------- # Perplexity 为答案引擎,其回答会显式标注引用来源,是 GEO 的高价值入口。 User-agent: PerplexityBot Allow: / User-agent: Perplexity-AI Allow: / # ---------- Google ---------- # Google-Extended 单独控制是否用于 Gemini / Vertex AI 训练,与 Googlebot 搜索抓取互相独立。 # 本站希望被 AI 产品收录,故放行;如需仅保留搜索可见性而拒绝训练用途,可单独改为 Disallow。 User-agent: Googlebot Allow: / User-agent: Google-Extended Allow: / User-agent: GoogleOther Allow: / # ---------- 字节跳动 / 豆包 ---------- # Bytespider 覆盖今日头条、抖音与豆包(Doubao)的内容抓取,是国内 AI 问答的关键信源通道。 User-agent: Bytespider Allow: / User-agent: Baiduspider Allow: / User-agent: Baiduspider-image Allow: / # ---------- 其他国内 AI 与搜索 ---------- # 覆盖通义千问、腾讯元宝、Kimi、文心一言、智谱清言、纳米AI、夸克等产品所用的抓取标识。 User-agent: Sogou web spider Allow: / User-agent: 360Spider Allow: / User-agent: YisouSpider Allow: / User-agent: Shenma Allow: / # ---------- 微软 / Bing / Copilot ---------- User-agent: bingbot Allow: / User-agent: MicrosoftPreview Allow: / # ---------- Apple ---------- # Applebot-Extended 控制是否用于 Apple Intelligence / Siri 等 AI 功能,与 Applebot 搜索抓取独立。 User-agent: Applebot Allow: / User-agent: Applebot-Extended Allow: / # ---------- 其他 AI 助手与 Agent ---------- User-agent: Amazonbot Allow: / User-agent: cohere-ai Allow: / User-agent: Cohere-ai Allow: / User-agent: YouBot Allow: / User-agent: DuckAssistBot Allow: / User-agent: Meta-ExternalAgent Allow: / User-agent: Meta-ExternalFetcher Allow: / User-agent: MistralAI-User Allow: / User-agent: Omgilibot Allow: / User-agent: Diffbot Allow: / User-agent: Timpibot Allow: / User-agent: ImagesiftBot Allow: / # ========================================================================== # 站点地图 # ========================================================================== Sitemap: https://qianli555.com/sitemap.xml