在线工具
🤖 robots.txt 生成
生成 robots.txt 与 Sitemap 声明,支持三种常见策略
robots.txtUser-agent: *
Disallow: /api/
Disallow: /admin/
Disallow: /login
Disallow: /me/
Disallow: /cart/
Disallow: /api/
Disallow: /admin/
Allow: /
User-agent: Baiduspider
Allow: /
User-agent: Googlebot
Allow: /
Crawl-delay: 1
Sitemap: https://www.ai781.com/sitemap.xml
策略允许抓取(屏蔽后台与接口)
结果由浏览器实时计算,仅供参考;不收集、不上传你的输入。
手机扫码直接使用
长按二维码图片可直接保存到相册
扫码直接使用该功能 全网分享
微信 / 相机扫一扫,手机上直接打开本工具;二维码图片也可以下载保存、打印或发到群里。
https://www.ai781.com/tools/box/robots
分享到(点一下直接分享 / 打开对应平台)
相关工具
本工具:免费,不限次数进阶 AI 工具|按点计费|用多少扣多少
免费工具|免注册|不限次数