今天在整理一个项目时,遇到关于单个网页阻止搜索引擎收录的问题,在网上搜索一翻,现在分享出来,希望对大家有所帮助。
使用<meta>标签拦截或删除网页:在网页的 <head> 部分添加适当的 <meta> 标签。
拦截所有搜索引擎把网页收录:
<meta name=”robots” content=”noindex, nofollow”>
只是拦截百度蜘蛛爬取网页,而允许其他搜索引擎收录:
<meta name=”baiduspider” content=”noindex, nofollow”>
允许搜索引擎收录你的网页,但禁止其追踪外部链接(如:zh.wikipedia.org 为了防止链接泛滥采用了此例):
<meta name=”robots” content=”nofollow”>
允许搜索引擎收录你的网页,但禁止其收录网页上的图片:
<meta name=”robots” content=”noimageindex”>
注:哪一个网页需要拦截或删除,则在那个网页添加<META> 标签,其他页面不会受影响。
<meta> 标签针对的是具体的某个网页,而不是整个网站。