Python模拟浏览器,python模拟浏览器浏览网页
1,为什么需要修改用户代理
在写大蟒网络爬虫程序的时候,经常需要修改用户代理,有很多原因,罗列几个如下:
不同代理人下看到的内容不一样,比如,京东网站上的手机版网页和个人计算机版网页上的商品优惠不一样
为避免被屏蔽,爬取不同的网站经常要定义和修改用户代理值。
.
修改代理人值这个操作本身比较简单,用户代理值是一串字符串,替换上即可,主要是用对用户代理值。下面列出常用浏览器的用户代理:
2、个人电脑端的用户代理
safari 5.1MAC
用户代理:Mozilla/5.0(麦金塔;u;英特尔MAC OS X 10 _ 6 _ 8;en-us) AppleWebKit/534.50 (KHTML,像壁虎)版本/5.1游猎/534.50
safari 5.1Windows
用户代理:Mozilla/5.0(Windows;u;windows NT 6.1 en-us)apple WebKit/534.50(KHTML,像壁虎)版本/5.1游猎/534.50
火狐38esr
用户代理:Mozilla/5.0(Windows NT 10.0;WOW64rv:38.0)壁虎/20100101火狐/38.0
IE 11
用户代理:Mozilla/5.0(Windows NT 10.0;WOW64三叉戟/7.0;网络4.0C .网络4.0E .净CLR 2。0 .50727;净CLR 3。0 .30729;净CLR 3。5 .30729;InfoPath.3rv:11.0)像壁虎
IE 9.0
用户代理:Mozilla/5.0(兼容;MSIE 9.0Windows NT 6.1三叉戟/5.0;
IE 8.0
用户代理:Mozilla/4.0(兼容;MSIE 8.0Windows NT 6.0三叉戟/4.0)
IE 7.0
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 6.0)
IE 6.0
用户代理:Mozilla/4.0(兼容;MSIE 6.0Windows NT 5.1)
火狐4 .0 .1MAC
用户代理:Mozilla/5.0(麦金塔;英特尔MAC OS X 10.6;rv:2.0.1)壁虎/20100101火狐/4.0.1
火狐4 .0 .1Windows
用户代理:Mozilla/5.0(Windows NT 6.1;rv:2.0.1)壁虎/20100101火狐/4.0.1
opera 11.11MAC
用户代理:Opera/9.80(麦金塔;英特尔麦克OS X 10。6 .8;u;en)急板/2.8.131版本/11.11
opera 11.11Windows
用户代理:Opera/9.80(Windows NT 6.1;u;en)急板/2.8.131版本/11.11
chrome 17.0MAC
用户代理:Mozilla/5.0(麦金塔;英特尔Mac OS X 10 _ 7 _ 0)苹果WebKit/535.11(KHTML像壁虎一样)Chrome/17。0 .963 .56 Safari/535.11
傲游(傲游)
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1傲游2.0)
腾讯电汇
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1腾讯旅行者4.0)
世界之窗(世界)2.x
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1)
世界之窗(世界)3.x
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1世界)
搜狗浏览器1.x
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1三叉戟/4.0;东南2 .X MetaSr 1.0SE 2 .X MetaSr 1.0 .净CLR 2。0 .50727;东南2 .X MetaSr 1.0)
360浏览器
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1360SE)
激进的
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1Avant浏览器)
绿色浏览器
用户代理:Mozilla/4.0(兼容;MSIE 7.0Windows NT 5.1)
3,移动端用户代理
safari iOS 4.33iPhone
用户代理:Mozilla/5.0(iPhone;u;CPU iPhone OS 4_3_3像麦克OS X;美国)apple WebKit/533。17 .9(KHTML,像壁虎一样)版本/5 .0 .2手机/8 J2野生动物园/6533。18 .5
safari iOS 4.33iPod Touch
用户代理:Mozilla/5.0(iPod;u;CPU iPhone OS 4_3_3像麦克OS X;美国)apple WebKit/533。17 .9(KHTML,像壁虎一样)版本/5 .0 .2手机/8 J2野生动物园/6533。18 .5
safari iOS 4.33iPad
用户代理:Mozilla/5.0(iPad;u;CPU操作系统4_3_3像麦克OS X;美国)apple WebKit/533。17 .9(KHTML,像壁虎一样)版本/5 .0 .2手机/8 J2野生动物园/6533。18 .5
安卓N1
用户代理:Mozilla/5.0(Linux;u;安卓2 .3 .7;en-us;nexus One Build/FRF 91)苹果WebKit/533.1(KHTML像壁虎一样)版本/4.0移动Safari/533.1
安卓即时通信软件浏览器适用于机器人
用户代理:MQ浏览器/26 Mozilla/5.0(Linux;u;安卓2 .3 .7;zh-cn;MB 200 Build/grj 22;CyanogenMod-7)苹果WebKit/533.1(KHTML,像壁虎一样)版本/4.0移动Safari/533.1
安卓歌剧手机
用户代理:Opera/9.80(安卓2 .3 .4;Linux opera Mobi/build-1107180945;u;en-GB)急变/2.8.149版本/11.10
Android Pad Moto Xoom
用户代理:Mozilla/5.0(Linux;u;安卓3.0;en-us;xoom Build/hri 39)苹果WebKit/534.13(KHTML,像壁虎)版本/4.0 Safari/534.13
黑莓
用户代理:Mozilla/5.0(黑莓;u;黑莓9800;en) AppleWebKit/534.1 (KHTML,像壁虎)版本/6.0.0.337移动Safari/534.1
WebOS惠普触摸板
用户代理:Mozilla/5.0(惠普-平板;LinuxhpwOS/3。0 .0;u;en-US) AppleWebKit/534.6 (KHTML,像壁虎一样)wos浏览器/233.70 Safari/534.6触摸板/1.0
诺基亚N97
用户代理:Mozilla/5.0(Symbian OS/9.4;60/5.0系列nokian 97-1/20。0 .019;简介/MIDP-2.1配置/CLDC-1.1)apple WebKit/525(KHTML,像壁虎一样)浏览器
windows手机芒果
用户代理:Mozilla/5.0(兼容;MSIE 9.0Windows Phone OS 7.5三叉戟/5.0;IEMobile/9.0;常简称为HTC或宏达电泰坦)
大学学院无
用户代理:999年7月28日
大学学院标准
用户代理:诺基亚5700/UCWEB7.0.2.37/28/999
UCOpenwave
用户代理:Openwave/UCWEB7.0.2.37/28/999
加州大学歌剧院
用户代理:Mozilla/4.0(兼容;MSIE 6.0 opera/ucweb 7 . 0 . 2 . 37/28/999
郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。