Robots.txt 生成器

Robots.txt 生成器

选择搜索引擎

默认规则:User-agent: * Allow: /,即所有搜索引擎默认允许抓取,除非在下方明确指定允许或拒绝。

谷歌
Bing
百度
Yandex
搜狗
好搜 (360)
Yahoo
DuckDuckGo
Naver
Seznam

选择 CMS

选择 AI 机器人

GPTBot
ChatGPT-User
ClaudeBot
PerplexityBot
Grok

添加 Sitemap 地址

生成结果

复制成功!
显示验证码
应相关规定要求只支持实名验证登录