UserAgent分类:
- PC端的UserAgent。
- 移动端UserAgent。
使用UserAgent的必要性:
- 在写python网络爬虫程序的时候,经常需要修改UserAgent,有很多原因,罗列几个如下:
- 不同UserAgent下看到的内容不一样,比如,京东网站上的手机版网页和pc版网页上的商品优惠不一样。
- 为避免被屏蔽,爬取不同的网站经常要定义和修改UserAgent值。
- 可见构建自己的UserAgent池是很重要的。
UserAgent分类:
使用UserAgent的必要性:
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。
最新评论