如果不想被搜索引擎收录的内容,可以使用robots文件进行屏蔽。
比如网站有一个/xxx/文件要屏蔽,可以这样的写法:User-agent:*Disallow:/xxx/
关于robots的详细知识,可以百度搜索:太原seo学习网,里面有这方面的专业文章说明而且里面是一个SEO方面的专业知识性平台,对SEO人员有很大的帮助。望采纳,谢谢!!