Robots.txt生成器
生成robots.txt文件
网站域名:
策略:
允许所有爬虫
禁止所有爬虫
自定义
自定义规则:
生成
关于此工具
生成标准的robots.txt文件，控制搜索引擎爬虫访问。
n
✅ 链接已复制！打开微信粘贴即可发送