搜索引擎如何理解cookie和会话ID

2021-02-27 17:16:52发布

1条回答
天宇老师
1楼 · 2021-02-27 17:18:45.采纳回答

搜索引擎不会查看cookie或会话ID,而且会像浏览器那样关闭这项功能,但与浏览器不接受cookie的访客不同,爬虫可能会借助那些专门想让它们通过的网站管理者访问隐藏的内容。许多网站的页面要求启用cookie或会话,


但会对搜索引擎程序有专门的规则,允许它们访问内容。尽管这属于技术层面的隐藏,但搜索引擎通常却允许一种称为第一次点击免费的隐藏形式(我们将在6.10节“内容推送和搜索爬虫控制”部分对此进行详细的讲解)。


尽管搜索引擎有时能够访问cookie/会话限制的页面,但大部分使用cookie和会话ID创建的内容、链接和页面都限制访问,网站设计者可以利用诸如第一次点击免费之类的选项来创建更智能的网站和页面,使其能够以适合人类和搜索引擎的方式运行。


TAG标签:

一周热门 更多>

相关问答

嘿,我来帮您!
嘿,我来帮您!