为什么百度pc端的蜘蛛会抓取移动端页面
重点导读:通过百度方面的解释,我们可以很清楚的看到,无论是百度pc端的蜘蛛抓移动页面,还是移动端的蜘蛛抓pc页面,其实影响都不大。想要减少它们之间的交叉抓取,我们能做的就是把URL处理得更加明显,帮助蜘蛛来判断。
发布人:沐风 - 更新时间:2021-06-10 07:55:06 - 地址:http://www.tangmengyun.com/seo/2762.html - 浏览:3613
问题:为什么百度pc端的蜘蛛会抓取移动端页面?
回答:先看看百度搜索方面怎么说
百度爬虫会尽可能使用移动UA抓取移动端页面,但对于未知的URL,爬虫不能准确预判它是pc端还是移动端,所以可能使用pc UA爬虫抓取,只要能正常抓回页面,就不会影响到网站的内容收录。
从百度方面的回答里面,我们可以得出几个结论:
1、百度抓取pc端的蜘蛛和抓取移动端的蜘蛛不同,但中间没有严格的界线,在预判不准确的情况下,这两种蜘蛛可能会相互抓取。
2、只要页面被抓,不管是pc端还是移动端UA抓,都不影响到页面收录。
3、要注意下页面URL的处理,方便百度搜索蜘蛛做出更加准确的判断,减少两端蜘蛛交叉抓取。
通过百度方面的解释,我们可以很清楚的看到,无论是百度pc端的蜘蛛抓移动页面,还是移动端的蜘蛛抓pc页面,其实影响都不大。想要减少它们之间的交叉抓取,我们能做的就是把URL处理得更加明显,帮助蜘蛛来判断。
为什么百度pc端的蜘蛛会抓取移动端页面所属标签蜘蛛抓取 下的相关文章推荐
- 网站频繁更新内容却没有蜘蛛抓取的原因 - 浏览量:2611
- 蜘蛛爬取频次跟什么有关,蜘蛛抓不到内容时会发生什么 - 浏览量:1313
- 蜘蛛抓取跟权重有关系吗,哪些因素影响蜘蛛抓取 - 浏览量:1146
- 搜索引擎不抓取站点的原因,如何解决 - 浏览量:1293
- 搜索引擎蜘蛛抓取页面的依据是什么 - 浏览量:2010
- 蜘蛛抓取页面没有记录是怎么回事 - 浏览量:1942
- 普通用户看不到的页面蜘蛛会抓取收录吗 - 浏览量:1942
- 搜索引擎抓取频率和男女朋友约会频率的相似点 - 浏览量:2220
- 网站是否需要禁止一些不知名的蜘蛛 - 浏览量:2896
- 案例:百度蜘蛛抓取的速度还是挺慢的 - 浏览量:2664
上一篇>> zblog如何调用友情链接模块下一篇>> 百度对新站的抓取频次变化挺快
沐风博客最新文章
- 文章断更对网站有什么影响 - 2024-09-14
- 很久没更新,沐风博客首页关键词上来了几个 - 2024-08-28
- 外链优化是什么,外链优化的原则和步骤 - 2024-07-25
- 微信视频号流量池规则和流量算法,分级标准及打开流量池的8大技巧 - 2024-07-24
- 百度搜索对技术性内容有特别的展示机制 - 2024-07-24
- 百度搜索的“普通收录”功能貌似没有作用 - 2024-07-21
- 百度搜索貌似在打击SEO优化 - 2024-07-19
- 抖音新账号播放也能做到10万+ - 2024-07-16
- 抖音直接在手机上发作品貌似没有标题 - 2024-07-08
- 微信视频号点赞的都是好友吗 - 2024-07-08