内容推送和搜索爬虫控制

有时，你可以向搜索引擎展示一个版本的内容而向用户展示另外一个版本的内容，正如我们所介绍的，这在技术层面上被称为隐藏，而且搜索引擎的指导原则也明确禁止这样做。实际上，许多网站，不管是大型还是小型，好像都能有效地使用内容推送而不被搜索引擎惩罚。不过，如果你要使用这些技巧，那么就要非常小心，也要知道你所承担的风险。

 隐藏和分割内容推送

我们在讨论隐藏技巧的风险和潜在的好处之前，先看一下图6-34，它揭示了隐藏技巧的运行机制。

歌搜索引擎作弊小组前任领导人Matt Cutts明确指出，所有的欺骗（除了第一次点击免费）都要受到惩罚，而在2009年5月对谷歌的John Mueller的一次采访中，他对这一观点表示了大力支持。2011年8月，Matt Cutts在一个YouTube视频中又重申了这一点，他断言：“绝对不会存在所谓的白帽欺骗”。

谷歌也在其政策中对隐藏做了明确的规定：

根据用户代理人提供不同结果的做法，可能会让你的网站被看作具有欺骗性而从谷歌索引中被删除掉。

在上述引言中有两个关键的信息：可能和用户代理人，如果你的隐藏技巧使用不当或意图邪恶，那么谷歌和其他搜索引擎当然可能会将你从其索引中删除，而且如果你做得非常过分，他们当然会这样做。

一个重要的因素是意图：如果搜索引擎认为你试图通过欺骗来操纵其排名或搜索结果，那么他们可能就会采取一些不利于网站的措施，而如果你内容推送的意图不影响它们的目标，那么你可能就不会受到惩罚，但并不是说绝对没有惩罚，谷歌不管你的意图是怎样的，它都强烈反对所有形式的欺骗。

下面是一些使用了隐藏技巧的网站案例。

谷歌

搜索google toolbar、google translate、adwords或其他谷歌的性能，注意，你在搜索结果中看到的网址和你最终进入到的网址几乎是不匹配的，而且，在大多数页面中，不管你是否登录，你看到的内容和缓存中的内容是不一样的。

New York Times

插播式广告、登录指示或五次点击之后创建账户的指示以及归档文件，展示给搜索引擎和用户的内容都是不同的。

Wine.com

除了一些基于你的路径的重定向，在你查看价格（或任何页面）之前，会有一个地区覆盖图强迫你选择一个运输位置，而搜索引擎无须填写这个表格。

Yelp

通过cookie基于位置进行地理位置定位是一个被无数网站使用的地理位置定位技巧。

Trulia

Trulia被发现在合作伙伴页面及其自有网站中进行一些重定向

信息已经非常明确了：隐藏并不总是让你受到惩罚，反而可以利用它做许多事，关键在于你的意图。如果你这样做的目的不是欺骗而是为用户和搜索引擎提供一个更好的体验，那么你就不会遇到什么问题，但这并不是非常绝对的，因此使用这些技巧时需要格外当心，而且要清楚地知道你可能会因它而受到惩罚。