Python 爬虫 03_requests 请求库

requests 请求库

---

一、requests 介绍与安装

• requests 介绍
  • requests 是一个优雅而简单的 Python HTTP 请求库；
  • requests 作用是 发送请求获取响应数据；
• requests 安装
  pip install requests
• [注意]：
  • 1. 如果要安装在 Python 虚拟环境中，先进入虚拟环境在执行上述命令 。
  • 2. 如果系统中既安装了 Python2 又安装了 Python3,需要安装 Python3 环境中：pip3 install requests

---

二、requests 基本使用

• requests 使用 3 步骤
  • 1. 导入模块
  • 2. 发送get请求，获取响应。
  • 3. 从响应中获取数据。

---

三、示例

• 示例1：向百度首页发送请求，获取响应，并获取响应数据并输出。

# 1. 导入模块
import requests

# 2. 发送请求，获取响应
response = requests.get('http://www.baidu.com')

# 3. 获取响应数据
	# 打印所使用的的编码
	# print(response.encoding) # ISO-8859-1
	
	# 指定二进制转换字符使用的编码
	# response.encoding = 'utf8'
	
	# 响应体 str 类型
	# print(response.text)
	
	# 响应体 bytes 类型
	# print(response.content)

# content 获取响应的二进制数据,通过 decode 解码，默认是 utf-8
print(response.content.decode())
# 通过 enconding = '' , 用指定编码格式解码
print(response.content.decode(encoding='gbk'))

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24

• 示例2：获取丁香园疫情首页。

# 1.导入模块
import requests

# 2.发送请求，获取响应
response = requests.get('https://ncov.dxy.cn/ncovh5/view/pneumonia')

# 3.从响应中，获取数据
print(response.content.decode())

1
2
3
4
5
6
7
8
9

---

---

---