只让搜索引擎收录网站首页,不让收录网站其它页面的robots文件怎么写的?

2025-01-05 16:04:01
推荐回答(2个)
回答1:

Disallow: / 就行 一般搜索引擎的爬虫都会遵守这个规则 360的规则不清楚,因为360一贯是流氓手段 都能偷偷的盗取用户电脑隐私,所以他的爬虫守不守规则就不清楚了。

回答2:

1楼答案正确