禁止机器人访问网站的 robots.tx[2026/9/12 9:59:32]
新注册
 
全站新贴： 6076474574660973617378018307558456196526611987226852299129183178714703557426189785127420376344881981256987822064977529597691169751537571653489455531766675223510577641116244015510679389189115128628982528380351993756574599448844404723081189400170662180602631574256551878595553173337154131810570969415905677575369849067337155445461789811213563077463685349087655961804617548856062595235196803849417242408098370860809613449379821987216808855002419761974295416012450997955685425480329099406528561742147558688329585232187104584267248420819920744080531897491650760879235939763360928292422283873105183148780064034485442172757208074739110693678571781739572062808122403150657422897622404981995121481218531073575
码农库 > 编程语言和算法 > 其它语言/AI > 禁止机器人访问网站的 robots.tx

查看: 531  |  回复: 0
manong
 禁止机器人访问网站的 robots.txt
楼主
发表于 2025年8月22日 00:10 

 robots.txt，放根目录

User-agent: 360Spider
Disallow: /

User-agent: sosospider
Disallow: /


您需要登录后才可以回帖 登录 | 立即注册
【本版规则】请勿发表违反国家法律的内容，否则会被冻结账号和删贴。
用户名： 立即注册
密码：
2020-2026 MaNongKu.com
手机版