Robots.txt 生成器
为 Google Analytics 4 创建清晰、一致的跟踪链接。
General Settings
设置所有机器人的全局规则。“允许所有”是标准选项。“拒绝所有”会阻止整个互联网访问您的网站(请谨慎使用!)。
Search Engines
控制特定搜索引擎。如果允许全局搜索,请在此处使用“拒绝”来屏蔽特定搜索引擎,例如如果您不在百度或Yandex等搜索引擎上销售商品。
AI & Marketing Bots
阻止 AI 爬虫(如 ChatGPT)使用您的内容进行训练,或阻止竞争对手的 SEO 工具(Ahrefs/Semrush)分析您的数据。
Restricted Directories
隐藏特定文件夹。Shopify 会自动处理系统文件夹,但您也可以在此处添加自定义文件夹。
Ready to deploy
robots.txt
User-agent: *
Allow: /