首页 > 编程语言 >软件测试|Python urllib3库使用指南

软件测试|Python urllib3库使用指南

时间:2023-11-15 17:23:17浏览次数:49  
标签:baidu http Python urllib3 https 使用指南 com response 软件测试

简介

当涉及到进行网络请求和处理HTTP相关任务时,Python的urllib3库是一个强大且灵活的选择。它提供了一种简单的方式来执行HTTP请求、处理响应和处理连接池,使得与Web服务进行交互变得更加容易。本文将详细介绍如何使用urllib3库进行网络请求。

安装urllib3

首先我们需要安装urllib3库,我们可以直接使用pip命令进行安装,安装命令如下:

pip install urllib3

发起基本的 GET 请求

下面是一个使用urllib3库发起简单的GET请求的例子:

import urllib3

# 创建一个连接池管理器
http = urllib3.PoolManager()

# 发起 GET 请求
url = "https://www.baidu.com"
response = http.request('GET', url)

# 打印响应内容
print(response.data)

--------------------
响应内容如下:
b'<html>\r\n<head>\r\n\t<script>\r\n\t\tlocation.replace(location.href.replace("https://","http://"));\r\n\t</script>\r\n</head>\r\n<body>\r\n\t<noscript><meta http-equiv="refresh" content="0;url=http://www.baidu.com/"></noscript>\r\n</body>\r\n</html>'

在这个例子中,我们首先导入了urllib3库,然后创建了一个连接池管理器http。接着,我们使用request方法发起了一个GET请求,并指定了请求的URL。最后,我们打印了响应的内容。

发起带有参数的 GET 请求

如果需要在GET请求中传递查询参数,可以使用fields参数来实现:

import urllib3

http = urllib3.PoolManager()

params = {
    'name': 'theshy',
    'team': 'wbg'
}

url = "https://www.baidu.com"
response = http.request('GET', url, fields=params)

print(response.data)

发起 POST 请求

下面是一个使用urllib3库发起POST请求的例子:

import urllib3

http = urllib3.PoolManager()

data = {
    'name': 'theshy',
    'team': 'wbg'
}

url = "https://www.baidu.com"
response = http.request('POST', url, fields=data)

print(response.data)

在这个例子中,我们使用request方法发起了一个POST请求,并通过fields参数传递了POST请求的数据。

处理响应

urllib3的响应对象提供了许多有用的属性和方法来处理响应数据,例如:

import urllib3

http = urllib3.PoolManager()

url = "https://www.baidu.com"
response = http.request('GET', url)

print("Status code:", response.status)
print("Headers:", response.headers)
print("Data:", response.data)

-----------------
输出内容如下:
Status code: 200
Headers: HTTPHeaderDict({'Accept-Ranges': 'bytes', 'Cache-Control': 'no-cache', 'Connection': 'keep-alive', 'Content-Length': '227', 'Content-Security-Policy': "frame-ancestors 'self' https://chat.baidu.com http://mirror-chat.baidu.com https://fj-chat.baidu.com https://hba-chat.baidu.com https://hbe-chat.baidu.com https://njjs-chat.baidu.com https://nj-chat.baidu.com https://hna-chat.baidu.com https://hnb-chat.baidu.com http://debug.baidu-int.com;", 'Content-Type': 'text/html', 'Date': 'Wed, 09 Aug 2023 08:20:31 GMT', 'P3p': 'CP=" OTI DSP COR IVA OUR IND COM ", CP=" OTI DSP COR IVA OUR IND COM "', 'Pragma': 'no-cache', 'Server': 'BWS/1.1', 'Set-Cookie': 'BD_NOT_HTTPS=1; path=/; Max-Age=300, BIDUPSID=67ECF8FD208F495FB1FC93888A3580FB; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com, PSTM=1691569231; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com, BAIDUID=67ECF8FD208F495F18B77C28BD39D136:FG=1; max-age=31536000; expires=Thu, 08-Aug-24 08:20:31 GMT; domain=.baidu.com; path=/; version=1; comment=bd', 'Strict-Transport-Security': 'max-age=0', 'Traceid': '1691569231141853722613530868379522833862', 'X-Ua-Compatible': 'IE=Edge,chrome=1'})
Data: b'<html>\r\n<head>\r\n\t<script>\r\n\t\tlocation.replace(location.href.replace("https://","http://"));\r\n\t</script>\r\n</head>\r\n<body>\r\n\t<noscript><meta http-equiv="refresh" content="0;url=http://www.baidu.com/"></noscript>\r\n</body>\r\n</html>'

使用连接池

连接池可以提高性能,避免频繁地建立和关闭连接。urllib3库默认使用连接池,你可以直接使用PoolManager来管理连接池:

import urllib3

http = urllib3.PoolManager()

url = "https://www.baidu.com"
response = http.request('GET', url)

print(response.data)

总结

urllib3库为Python开发者提供了一个强大的工具,用于进行各种类型的HTTP请求、处理响应以及管理连接池。本文介绍了如何使用urllib3库来发起基本的GET和POST请求,处理响应以及处理网络请求错误。

获取更多技术资料,请点击!

标签:baidu,http,Python,urllib3,https,使用指南,com,response,软件测试
From: https://www.cnblogs.com/hogwarts/p/17834318.html

相关文章

  • 不懂乐理,也能扒谱,基于openvpi将mp3转换为midi乐谱(Python3.10)
    所谓"扒谱"是指通过听歌或观看演奏视频等方式,逐步分析和还原音乐作品的曲谱或乐谱的过程。它是音乐学习和演奏的一种常见方法,通常由音乐爱好者、乐手或学生使用。在扒谱的过程中,人们会仔细聆听音乐作品,辨别和记录出各个音符、和弦、节奏等元素,并通过试错和反复推敲来逐渐还原出准......
  • python 发邮件,简单版本
    importsmtplibfromemail.mime.textimportMIMETextfromemail.mime.multipartimportMIMEMultipartclassTemplate(object):html="""<!DOCTYPEhtml><htmllang="en"><head><metacharset="UTF-8......
  • Python3 协程 await async 相关的用法和笔记
    想要提供可以进行协程切换的awaitable,可以使用下面的方法:1任务taskasyncdeffunc():print("yesWait")task=asyncio.create_task(func())awaittask2协程对象,可以使asyncdef定义的协程函数(是否能触发切换不一定,要看函数内容)函数内可以利用asyncio.sl......
  • 软件测试|使用python绘制等高线密度图
    简介等高线密度图(ContourDensityPlot)是一种可视化数据分布的有效方式,特别适用于显示二维数据的密度分布情况。Python提供了丰富的工具和库,使得创建等高线密度图变得相对容易。在本文中,我们将介绍如何使用Python和Matplotlib库创建等高线密度图,并提供一个示例来演示整个过程。步骤......
  • 软件测试|使用Python提取出语句中的人名
    简介在自然语言处理(NLP)中,提取文本中的人名是一项常见的任务。Python作为一种流行的编程语言,拥有强大的NLP库和工具,使我们能够轻松地进行这项任务。在本文中,我们将使用Python示例来演示如何提取文本中的人名。环境准备我们将使用以下Python库来执行人名提取任务:spaCy:一个流行的NLP库......
  • 在python开发过程中常见的异常错误
    下面这些也是常见的异常错误,在报错的时候不要害怕,记住这些常见的单词。AttributeError尝试访问未知的对象属性EOFError用户输入文件末尾标志EOF(Ctrl+d)FloatingPointError浮点计算错误GeneratorExitgenerator.close()方法被调用的时候ImportError导入模块失败的时候KeyboardInte......
  • 为什么要学习python技术??
    大家好,随着大数据时代的到来,相信大家对新时代的认知达到了一个新的高度,我们可以仔细观察我们的生活,似乎每一年都会发生较大的变化。我记得我刚上大学的时候,移动支付才刚开始普及,短短几年,出门只需要一部手机便能行走天下,其中计算机编程起到了重要作用。 我们为什么要学习编......
  • Python3
    importnumpyasnpx=np.array([1.0,2.0,3.0,4.0])y=x+2Ans:array([3.,4.,5.,6.])y=x>2.0Ans:array([False,False,True,True]) A.SyntaxError-alsoknownasparsingerror.Pythondoesnotlikeyourstructure.ItislikeDrFasks......
  • mojo编程语言:编译后的mojo二进制执行文件调用python库报错——设置MOJO_PYTHON_LIBRAR
    代码:frompythonimportPythonfnf()raises:#ThisisequivalenttoPython's`importnumpyasnp`letnp=Python.import_module("numpy")leta=np.array([1,2,3])print(a)fnmain()raises:f() mojo编译后执行,报错:Mojo/Pyth......
  • mojo编程语言:mojo调用python库及内置函数builtins
    编程语言mojo调用python十分方便,mojo不仅可以调用python的库函数更可以调用python的内置函数(builtins),给出示例代码:frompythonimportPythonfnmain()raises:Python.add_to_path(".")letmypython=Python.import_module("xyz")letx=mypython.hello()......