网站设计方面有什么公司,地方门户网站建设要求,wordpress导出数据库,wordpress自定义函数requests 模块是 Python 中的一个第三方库#xff0c;用于发送 HTTP 请求。
它提供了一个简单且直观的 API#xff0c;使得发送网络请求和解析响应变得非常容易。requests 模块支持各种 HTTP 方法#xff0c;如 GET、POST、PUT、DELETE 等#xff0c;并且具有处理 cookies…requests 模块是 Python 中的一个第三方库用于发送 HTTP 请求。
它提供了一个简单且直观的 API使得发送网络请求和解析响应变得非常容易。requests 模块支持各种 HTTP 方法如 GET、POST、PUT、DELETE 等并且具有处理 cookies、会话sessions、重定向、HTTP 头等高级功能。
示例1发送 GET 请求
import requestsresponse requests.get(https://api.example.com/data)# 检查响应状态码
print(response.status_code)# 获取响应内容文本格式
print(response.text)# 获取响应内容JSON 格式如果服务器返回的是 JSON
# 注意这里会抛出异常如果响应内容不是有效的 JSON
try:json_data response.json()print(json_data)
except ValueError:print(Response content is not JSON!)
示例2发送 POST 请求
import requestsurl https://api.example.com/submit
data {key1: value1, key2: value2}response requests.post(url, datadata)# 检查响应状态码
print(response.status_code)# 获取响应内容
print(response.text)
示例3处理 HTTP 头
import requestsurl https://api.example.com/data
headers {Authorization: Bearer YOUR_ACCESS_TOKEN,Content-Type: application/json
}response requests.get(url, headersheaders)# 检查响应状态码
print(response.status_code)# 获取响应内容
print(response.text) 一、安装request模块
先检验当前python环境是否有requests模块
pip show requests 安装requests模块并检验 二、requests模块爬取网页信息
import re
import requestsresponse requests.get(https://www.weather.com.cn/html/weather/101191201.shtml)
# 设置编码格式
response.encoding utf-8
print(response.text)print(**40)
# 正则表达式模式
city_pattern rspan classnamea\s[^]*(.*?)\/a
weather_pattern rspan classweathera[^]*(.*?)/a/span
wd_pattern rli.*?span classwd(.*?)/span.*?/li
# span classzs适宜/span
zs_pattern rli.*?span classzs(.*?)/span.*?/li
# 搜索匹配项
citys re.findall(city_pattern, response.text)
print(citys)
weathers re.findall(weather_pattern, response.text)
print(weathers)
wd_s re.findall(wd_pattern, response.text)
print(wd_s)
zs_s re.findall(zs_pattern, response.text)
print(zs_s)【注意】 在 Python 的正则表达式中前缀 r 表示原始字符串raw string。当你使用原始字符串时字符串中的转义字符不会被处理。这在编写正则表达式时非常有用因为正则表达式本身使用了大量的反斜杠\而在普通的 Python 字符串中反斜杠是一个转义字符。 三、requests模块爬取网页中的图片并下载到本地 3-1、open函数
open 函数是 Python 中用于打开文件的内置函数。
它返回一个文件对象该对象具有读、写或追加文件的方法。
使用 open 函数时必须指定文件名并且可以选择性地指定打开文件的模式、编码等。
open(file, moder, buffering-1, encodingNone, errorsNone, newlineNone, closefdTrue, openerNone)
file要打开的文件或目录的路径。如果是相对路径则是相对于当前工作目录如果是绝对路径则是从文件系统的根目录开始的完整路径。(或者是在写模式下的保存的本地文件的文件名)mode可选参数指定文件的打开模式。默认为 r表示只读模式。其他模式包括 w写模式会覆盖文件、a追加模式在文件末尾添加内容、b二进制模式用于非文本文件、更新模式允许读写等。这些模式可以组合使用如 rb 表示以二进制方式只读打开文件。buffering可选参数设置缓冲策略。默认为 -1表示使用默认的系统缓冲策略。0 表示不缓冲只适用于二进制模式1 表示行缓冲只在文本模式下有效其他正整数表示缓冲区大小以字节为单位。encoding可选参数指定文件的字符编码。默认为 None表示使用系统默认编码。对于文本文件建议使用如 utf-8 的明确编码。errors可选参数指定如何处理编码和解码错误。默认为 None表示使用系统的默认错误处理策略。其他选项包括 strict遇到错误时引发异常、ignore忽略错误等。newline可选参数控制换行符的处理。默认为 None表示使用系统默认的方式处理换行符。其他选项包括 空字符串表示将换行符转换为 \n、\n表示使用 Unix 风格的换行符、\r\n表示使用 Windows 风格的换行符等。closefd可选参数如果为 True默认值则当文件对象被关闭时底层的文件描述符也会被关闭。如果为 False则文件描述符不会被关闭这在某些需要保留文件描述符的场合很有用。opener可选参数一个可调用对象用于打开文件。默认为 None表示使用内置的 os.open() 函数。这个参数通常不常用但在需要自定义文件打开行为时很有用。
示例
1、以只读模式打开文本文件 2、以写模式打开文本文件 使用 with 语句打开文件可以确保文件在使用完毕后被正确关闭即使在读取或写入文件时发生异常也能保证这一点。
