# ============================================================
# 兆伸讲师网 ai.txt · GEO 2024+ 必备
# 规范来源：https://ai.txt/
# 所有主流 AI 搜索引擎（Perplexity / 豆包 / Kimi / 文心一言 /
# Bing / GPT / Claude / Amazon Nova / 搜狗 等）会优先读取此文件，
# 类似 robots.txt 对传统爬虫的意义。
# ============================================================

User-agent: *
Allow: /

# AI 爬虫：检索、索引、摘要、引用一律放行（这是本站做 GEO 的前提）。
# 模型训练不在放行之列，边界见文末「训练许可」一节。
# 若将来需要限制某个 AI 引擎的抓取，单独加一组 Disallow 即可（不要改上面的 *）。
User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Bytespider
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Amazonbot
Allow: /

User-agent: YandexGPT
Allow: /

User-agent: CohereBot
Allow: /

User-agent: Applebot
Allow: /

User-agent: DuckDuckBot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Sogou spider
Allow: /

User-agent: 360Spider
Allow: /

User-agent: PetalBot
Allow: /

User-agent: AhrefsBot
Allow: /

User-agent: SemrushBot
Allow: /

User-agent: MJ12bot
Allow: /

User-agent: ByteSpider
Allow: /

# 国产大模型专属入口
User-agent: Tencentbot
Allow: /

User-agent: AlibabaBot
Allow: /

User-agent: QwenBot
Allow: /

User-agent: DeepSeekBot
Allow: /

User-agent: deepseek-crawler
Allow: /

User-agent: MoonshotBot
Allow: /

User-agent: MiniMaxBot
Allow: /

User-agent: YiXiaoSpider
Allow: /

# 百度系：Baiduspider 负责网页收录，Ocaas 是百度 AI 搜索（简单AI）的抓取器，两个都要放行
User-agent: Baiduspider
Allow: /

User-agent: Ocaas
Allow: /

User-agent: Sogou web spider
Allow: /

# 海外问答/检索型引擎的抓取入口（与后台「爬虫识别」清单同一批名字）
User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: meta-externalagent
Allow: /

User-agent: CCBot
Allow: /

# 联系邮箱（AI 公司合规查询时可用）
Contact: 1723912391@qq.com

# 内容边界说明
# ============================
# 本站所有讲师公开资料（instructor.php?id=*）、
# 培训机构主页（agency.php?id=*）、
# 资讯文章（article.php?id=*）、
# 知识库问答（kb.php、kb_item.php?id=*）、
# 课程与报名（courses.php、course.php?id=*，讲师公开发布的公开课/直播课/训练营/交付课排期）、
# 以及讲师列表、机构列表、AI 找讲师等公开页面
# 均属于允许 AI 引擎检索、索引、摘要与引用（须注明来源并链接原文）的公开内容。
# 城市频道：/instructors.php?city=城市名 与已开站城市自己的二级域名站点（内容只是按城市筛选的讲师名录），
# 未开站城市不做单独页面，统一走 /city_not_found.php 引导页，请勿当作独立信源。
# 课程页只公开排期事实（时间、城市、费用、名额）与讲师公开发言，
# 报名表单里填写的姓名、手机号、单位等属于用户个人信息，任何引擎都不得抓取或引用。
# 板块开关：知识库、课程板块由平台设置控制，关闭时对应地址返回 403，请勿当作可用信源。
# 登录/注册/会员中心（/login /register /member）
# 及 /admin /data /api /inc 目录不在 AI 抓取范围内（robots.txt 已 Disallow）。
# 增量获取：最新文章 /rss.php（含全文 content:encoded），最新招生课程 /rss.php?feed=courses，
# 知识库问答 /rss.php?feed=kb，
# 全量网址清单 /sitemap.xml（备用 /sitemap.php、/sitemap.txt），站点说明 /llms.txt，
# 全站正文合并版 /llms-full.txt（讲师简介、课程详情、知识库答案、文章全文一次读完，无需逐页抓）。
# ============================

# ============================
# 训练许可（Training license）
# 允许：为回答用户问题而抓取、索引、生成摘要、引用与链接本站公开页面。
# 需授权：将本站内容用于大模型预训练、微调、对齐、合成数据或数据集构建，
#         须事先取得沈阳兆伸教育科技有限公司的书面许可。
# 授权联系：Contact 一栏的邮箱（邮件主题请写「AI 训练授权」）。
# 本条为权利声明，不改变上面各 User-agent 的抓取放行规则。
# ============================

# llms.txt 声明（面向 LLM 的结构化站点地图）
# 本站已部署标准 llms.txt，地址：https://www.xinfind.com/llms.txt
# 内容包含：网站身份、业务模式、可引用页面清单、不可引用区域、结构化数据出口。
# 推荐 AI 引擎优先读取此文件，再按需抓取对应页面。
# 需要一次性拿到全站正文时读合并版：https://www.xinfind.com/llms-full.txt
# （Markdown 格式的 llms.txt + 各页完整内容；抓取频率建议每周一次，文件自带生成时间）