设置仅保存在当前浏览器。
进去就有提示
robots.txt 用来告诉遵守该协议的爬虫哪些路径不希望被抓取,它不是访问控制机制。CTF 里经常会故意把提示路径写在这里,所以查看 /robots.txt 可以作为信息收集的一步。
robots.txt
/robots.txt
评论将在接近此处时加载,也可点击立即加载。
输入标题、标签或正文关键词,多个词用空格分隔。
也可以从一个专题开始
评论将在接近此处时加载,也可点击立即加载。