Robots.txt 生成器
选择搜索引擎
默认规则:User-agent: * Allow: /,即所有搜索引擎默认允许抓取,除非在下方明确指定允许或拒绝。
谷歌
Bing
百度
Yandex
搜狗
好搜 (360)
Yahoo
DuckDuckGo
Naver
Seznam
选择 CMS
选择 AI 机器人
GPTBot
ChatGPT-User
ClaudeBot
PerplexityBot
Grok
添加 Sitemap 地址
生成结果
复制成功!
