首页
51问答网
>
只让搜索引擎收录网站首页,不让收录网站其它页面的robots文件怎么写的?
只让搜索引擎收录网站首页,不让收录网站其它页面的robots文件怎么写的?
2025-01-05 16:04:01
推荐回答(2个)
回答1:
Disallow: / 就行 一般搜索引擎的爬虫都会遵守这个规则 360的规则不清楚,因为360一贯是流氓手段 都能偷偷的盗取用户电脑隐私,所以他的爬虫守不守规则就不清楚了。
回答2:
1楼答案正确
相关问答
最新问答
2019年10月1日到2022年7月17共多少天?
那种气压升降椅不安全,如何放气?
急求好看的BL小说,希望大家能帮忙,有的话请发到861544484.qq.com谢谢啦
如何申请波兰的工作签证
一个人去丽江旅行 能找到同样是独自出行的个人或俱乐部吗
求一部女主角立志当情妇,后来与男主在公交车上相遇的台湾言情小说
企业人性化管理的优点
西北工业大学经济学考研试题
谁能给我推荐个变态的小游戏啊,越变态越好,在线等谢谢大虾们!
微信发视频一次最多能发多少秒?