☰
首页
/
robots.txt 生成器
🔧
robots.txt 生成器
生成标准的 robots.txt 文件
User-agent（爬虫名称，*为全部）
禁止访问的路径（每行一个）
允许访问的路径（每行一个）
Sitemap地址
生成
复制
下载
robots.txt 内容