首先,Python 标准库中的 urllib2 模块提供了你所需要的大多数 HTTP 功能,但是它的 API 不友好。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务,所以学习reuqests模块,比较简洁好用(以后慢慢会学习scapy,更强大的库),安装就不用说了
1 导入模块
> import requests
2 直观感受一下发送请求的简洁
> r = requests.get('your url')
> r = requests.post('your url')
#put delete head options方法也是这种用法
3 为url传递参数
> url_params = {'key':'value'} #字典传递参数,如果值为None的键不会被添加到url中
> r = requests.get('your url',params = url_params)
> print(r.url)
your url"color: #0000ff">4 响应的内容
> r.encoding #获取当前的编码
> r.encoding = 'utf-8' #设置编码
> r.text #以encoding解析返回内容
> r.content #以字节形式(二进制)返回
> r.json() #以json形式返回,前提返回的内容确保是json格式的,不然解析出错会抛异常
5 定制头和coookie信息
> header = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/38.0.2125.122 Safari/537.36 SE 2.X MetaSr 1.0'}
> cookie = {'key':'value'}
> r = requests.get/post('your url',headers=header,cookies=cookie)
6 发送post数据请求
> send = {'key':'value'}
> r = requests.post('your url',data = send) # 如果你传递一个 string 而不是一个dict ,那么数据会被直接发布出去,这个也可以上传文件
7 响应状态码
> r.status_code #如果不是200,可以使用 r.raise_for_status() 抛出异常
8 响应
> r.headers #返回字典类型,头信息
# r.requests.headers 返回发送到服务器的头信息
> r.cookies #返回cookie
> r.history #返回重定向信息,当然可以在请求是加上allow_redirects = false 阻止重定向
9 超时
> r = requests.get('url',timeout=1)#设置秒数超时,仅对于连接有效
10 会话对象,让你能够跨请求保持某些参数
> s = requests.Session()
> s.auth = ('auth','passwd')
> s.headers = {'key':'value'}
> r = s.get('url')
> r1 = s.get('url1')
11 代理
> proxies = {'http':'ip1','https':'ip2' }
> requests.get('url',proxies=proxies)
推荐阅读:
Python Requests安装与简单运用
更新动态
- 凤飞飞《我们的主题曲》飞跃制作[正版原抓WAV+CUE]
- 刘嘉亮《亮情歌2》[WAV+CUE][1G]
- 红馆40·谭咏麟《歌者恋歌浓情30年演唱会》3CD[低速原抓WAV+CUE][1.8G]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[320K/MP3][193.25MB]
- 【轻音乐】曼托凡尼乐团《精选辑》2CD.1998[FLAC+CUE整轨]
- 邝美云《心中有爱》1989年香港DMIJP版1MTO东芝首版[WAV+CUE]
- 群星《情叹-发烧女声DSD》天籁女声发烧碟[WAV+CUE]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[FLAC/分轨][748.03MB]
- 理想混蛋《Origin Sessions》[320K/MP3][37.47MB]
- 公馆青少年《我其实一点都不酷》[320K/MP3][78.78MB]
- 群星《情叹-发烧男声DSD》最值得珍藏的完美男声[WAV+CUE]
- 群星《国韵飘香·贵妃醉酒HQCD黑胶王》2CD[WAV]
- 卫兰《DAUGHTER》【低速原抓WAV+CUE】
- 公馆青少年《我其实一点都不酷》[FLAC/分轨][398.22MB]
- ZWEI《迟暮的花 (Explicit)》[320K/MP3][57.16MB]