Python瞎老弟的爬虫心得之requests篇②requests基本使用
发布网友
发布时间：2023-01-25 12:14
共1个回答
热心网友
时间：2023-09-19 07:25
直接使用requests.get()方法即可
其中内容将通过requests.text查看
将get()方法，改为post()即可
其中需要提交的内容，通过data参数传入
url参数，也即跟在地址后的?后的一串内容
我们可以直接通过url地址将其构造出来
也可以通过params参数，传入一个字典使用
可以看出，地址同样被自动构造为
这是一种更加容易的传入参数的方法，可以不需要使用
我们得到了一个对象r，这是一个requests.models.Response对象
使用r.text可以得到响应内容
其中解码方式是requests自行猜测的，它会把猜测的结果保存在r.encoding中
使用r.encoding可以得到或者改变编码方式
如果使用r.text得到的内容不正确，可以手动修改r.encoding，然后再使用r.text输出内容
如果不知道正确的编码，可能有人会建议你使用chardet模块来进行编码的测试(该模块需要使用pip安装，目前版本也会随安装requests附带)
使用方法：
事实上，现在的requests已经使用了chardet模块，但你仍然可以将chardet用于其他时候使用
使用r.content可以得到二进制的响应内容
使用r.json()可以得到json的响应内容
给headers参数传入一个字典即可
如同之前你预想的那样，user-agent会被修改为lsp
通过r.status_code可以查看状态码
通过r.headers可以查看响应头
通过r.raise_for_status()可以在状态码为不正常的时候抛出异常
在请求中添加timeout参数，即可让你的程序在指定的时间内没有得到响应就抛出异常
通过r.url可以查看到请求地址
通过r.history可以查看到重定向
通过修改allow_redirects参数为False可以禁止重定向
例如禁止github进行重定向
