# robots.txt — 益会员™农民专业合作社服务手册·静态站(英文URL版) # 生成日期:2026-11-04 # 全站URL均为英文(ASCII),兼容微信等内置浏览器 # AI 抓取规则:正文页允许主流AI抓取工具(GPTBot/ClaudeBot/PerplexityBot/Google-Extended 等)收录 User-agent: * Allow: / User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / # 外链(www.171001.com 等)已在页面中使用 rel="nofollow",不传递权重 # 内部文件(_shots/、_verify/、plan/、生成脚本)禁止抓取 Disallow: /_shots/ Disallow: /_verify/ Disallow: /plan/ Disallow: /*.py Sitemap: https://www.171001.com/sitemap.xml