User-agent: *
Disallow: /index/login.html
Disallow: /item/id/*.html
Disallow: /jditem/id/*.html
Disallow: /pdditem/id/*.html

 

 

屏蔽今日头条蜘蛛

在 .htaccess 结尾增加以下两段:

 

RewriteCond %{HTTP_USER_AGENT} “Toutiao” [NC]
RewriteRule ^(.*)$ https://idc.iksi.me/LSraFEOa.html [L,R=302]

其中,第二行的 https://idc.iksi.me/LSraFEOa.html 随意修改

 

发表评论

共有 0 条评论