python如何访问网页

• Z时代
• 2024-01-10
• 分类：综合

使用Python访问网页主要有三种方式： urllib, urllib2, httplib

urllib比较简单，功能相对也比较弱，httplib简单强大，但好像不支持session

更多urllib知识，可以参考这些文章：

Python2爬虫入门：Urllib库的基本使用

Python2爬虫入门：Urllib的高级用法

 最简单的页面访问

import urllib2
res=urllib2.urlopen(url)
except urllib2.URLError, e:
print res.read()

加上要get或post的数据

data={"name":"hank", "passwd":"hjz"}
urllib2.urlopen(url, urllib.urlencode(data))

 加上http头

header={"User-Agent": "Mozilla-Firefox5.0"}
urllib2.urlopen(url, urllib.urlencode(data), header)#使用opener和handler
opener = urllib2.build_opener(handler)
urllib2.install_opener(opener)

加上session

cj = cookielib.CookieJar()
cjhandler=urllib2.HTTPCookieProcessor(cj)
opener = urllib2.build_opener(cjhandler)
urllib2.install_opener(opener)

以上是 python如何访问网页 的全部内容， 来源链接： utcz.com/z/524909.html