使用Python访问网页主要有三种方式: urllib, urllib2, httplib
urllib比较简单,功能相对也比较弱,httplib简单强大,但好像不支持session
更多urllib知识,可以参考这些文章:
Python2爬虫入门:Urllib库的基本使用
Python2爬虫入门:Urllib的高级用法
最简单的页面访问
import urllib2 res=urllib2.urlopen(url) except urllib2.URLError, e: print res.read()
加上要get或post的数据
data={"name":"hank", "passwd":"hjz"} urllib2.urlopen(url, urllib.urlencode(data))
加上http头
header={"User-Agent": "Mozilla-Firefox5.0"} urllib2.urlopen(url, urllib.urlencode(data), header)#使用opener和handler opener = urllib2.build_opener(handler) urllib2.install_opener(opener)
加上session
cj = cookielib.CookieJar() cjhandler=urllib2.HTTPCookieProcessor(cj) opener = urllib2.build_opener(cjhandler) urllib2.install_opener(opener)
常见问题FAQ
- 免费下载或者VIP会员专享资源能否直接商用?
- 本站所有资源版权均属于原作者所有,这里所提供资源均只能用于参考学习用,请勿直接商用。若由于商用引起版权纠纷,一切责任均由使用者承担。更多说明请参考 VIP介绍。
- 提示下载完但解压或打开不了?
- 找不到素材资源介绍文章里的示例图片?
- 模板不会安装或需要功能定制以及二次开发?
发表评论
还没有评论,快来抢沙发吧!