百度搜索一个关键词的时候,展现的是A标题,但是点进去的网页标题却是B。
百度搜索一个关键词的时候,展现的是A标题,但是点进去的网页标题却是B。
日期:2016-09-06 11:10:11 人气:1
这些可以解释出现上述现象的原因么?
有时候百度在爬取的过程中会出现这样的问题,有的网站出现的可能是其他的东西,如导航或是网站底部的内容。
标题描述设置的不合理:如果你的标题或者描述,这里主要指的是描述,出现关键词堆砌或者搜索引擎认为不合理的话,可能会出现不显示或者搜索引擎自己提取网站内容作为描述来显示。
**
百度的数据抓取能力**
尤其是使用CDN的网站,一般来说百度爬虫缓存域名对应服务器IP的时间是超过1天,蜘蛛爬网站的时候,没有按照dns协议去缓存
dns记录,而是缓存d