Google新META标记 避免索引特定页面
2018-06-11 来源:
Google爬虫系统主管DanCrow在出席一年一度的SEMNE(SearchEngineMarketingNewEngland)时不小心透露了一些我们期望看到的好消息。
一种新的META标记将会出现,可以帮助网站管理员隐藏一些敏感信息或者它们希望不需要/不想被人看到的信息。如,一个应用程序信息在8月31日过期,之后搜索引擎就不应该再索引这则信息。
所以,一个称为"unavailable_after"的新标记就能实现这一点,人们可以借此告诉Google特定页面在特定日期后不再被爬虫索引。这很有用,它可以明确告诉搜索引擎爬虫哪些内容、在哪个时间段有效,也可以很好的保护自己的特定内容不被搜索引擎泄露出去。例如,一篇文章的前半部分希望别人看到,而后面部分则要隐藏起来,此时这种方法就会很有用。
以前,要实现这目标需要在robots.txt文件上大费周章,致使这个文件变得很大,有了这种新标记,一切都变得简单。但是,这个标记对其他搜索引擎是无效的,GarettRogers说这个标记的使用方法可能为如下形式:<METAname=”unavailable_after”content=”Wed,01Aug200700:00:01GMT”>.
一种新的META标记将会出现,可以帮助网站管理员隐藏一些敏感信息或者它们希望不需要/不想被人看到的信息。如,一个应用程序信息在8月31日过期,之后搜索引擎就不应该再索引这则信息。
所以,一个称为"unavailable_after"的新标记就能实现这一点,人们可以借此告诉Google特定页面在特定日期后不再被爬虫索引。这很有用,它可以明确告诉搜索引擎爬虫哪些内容、在哪个时间段有效,也可以很好的保护自己的特定内容不被搜索引擎泄露出去。例如,一篇文章的前半部分希望别人看到,而后面部分则要隐藏起来,此时这种方法就会很有用。
以前,要实现这目标需要在robots.txt文件上大费周章,致使这个文件变得很大,有了这种新标记,一切都变得简单。但是,这个标记对其他搜索引擎是无效的,GarettRogers说这个标记的使用方法可能为如下形式:<METAname=”unavailable_after”content=”Wed,01Aug200700:00:01GMT”>.
版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点!
本站所提供的图片等素材,版权归原作者所有,如需使用,请与原作者联系。
上一篇:信产部公布3G可视电话标准
下一篇:解密六种"木马"启动方式
最新资讯
热门推荐