python3.8安装requests库_再见requests！Python下一代 http客户端出炉啦！

小编玩Python大概是3-4年前，那个时间爬虫非常流行，到处都是爬虫的文章和视频，很多人入门Python都是从爬虫开始。几乎所有学Python都知道requests这个库，它大名鼎鼎K神的得意之作，非常好用。

但是随时Python异步async的大流行，由于requests本身是阻塞的导致在使用异步的时候有些捉襟见肘。今天小编来推荐一个牛逼的库，可以同时支持同步和异步的请求，一箭双雕，一起来看一下。

这个是库就是httpx，收获了5200颗星，号称是Python下一代的HTTP客户端，能够同时支持http同步和异步的请求，非常牛逼，我们快速来看一下。

01.如何安装

直接用pip install httpx 即可，非常方便

02.快速使用

同步的http请求:

这个get用法很简单，跟requests库非常相似

异步的请求:

直接和Python内置的asyncio库进行组合使用，进行异步请求。

还有一种就是直接使用httpx进行异步请求：

用法跟上面差不多，都是用AsyncClient来处理的，但是就是需要升级Python3.8以上才行。

03.强大的功能

httpx支持很多http的请求方式，除了我们常见的get请求之外，还支持自定义header,自定义post表单数据，发送文件分段上传，发送二进制请求数据等等。下面给大家简单看一下：

还有发送表单数据

04.实战异步玩一下

既然httpx它的一个很大的卖点是异步，说了这么多，我们用一个小的异步爬虫案例来玩一下httpx库，并发爬取有道词典看看效果。

整个程序非常短30来行，非常简单，就分两部分：第一部分：就是用httpx构造一个client发起异步请求，连续请求100次，然后把这个100个请求任务包裹在async框架里面，进行并发处理

第二部分：就是每一个去有道发起一个请求，然后用pyquery进行解析html文本数据

我们看一下100次的请求大概需要多久

100次的异步请求大概花了3.5秒左右，还是相当的快滴。如果用requests库同步处理的花至少要20秒左右，httpx还是快不少的。

上面只介绍了一部分功能，httpx还有很多强大的功能，使用方法跟requests差不多。requests能支持的httpx都支持，requests不能干的事情httpx也能干。这个库野心还是很大的，当你的项目既要支持同步请求和也要支持异步请求的时候,httpx就该上场啦！有兴趣的小伙伴赶紧试试哦。

更多原创的精彩干货可以去公众号【菜鸟学Python】找我们。目前原创近400个趣味原创案例(Python入门，进阶，经验技巧，爬虫，数据分析，机器学习，面试经验等)，欢迎来公众号找我们交流！

python3.8安装requests库_再见requests！Python下一代 http客户端出炉啦！相关推荐

python3.7安装numpy库_安装了anaconda3，自带numpy库，但不能导入,问题出在哪里？
是我在jupter notebook网页上输入import numpy后,显示ImportError,但我已经安装了numpy库. 以下是错误的信息: ImportError Traceback (m ...
python3.8安装pyinstaller库_模块：pyinstaller库的安装与使用
PyInstaller库的安装 (cmd命令行) pip install pyinstaller 如果安装失败 python 3.8 不兼容. 解决方案:安装和使用pyinstaller 4.0 de ...
python导入requests库_windows环境中python导入requests
在windows7中装完python,如何导入requests库呢? Requests是一个基于Apache2协议开源的Python HTTP库,号称是"为人类准备的HTTP库". ...
Ubuntu18.04系统中python3.7安装MultiNEAT库
Ubuntu18.04系统中python3.7安装MultiNEAT库前言 MultiNEAT介绍安装问题 boost安装 MultiNEAT安装安装过程遇到问题及解决方法前言 MultiNE ...
python3.7安装dlib库，无须安装vs
python3.7安装dlib库,无须安装vs 首先,下载dlib-19.17.99-cp37-cp37m-win_amd64.whl 链接:https://pan.baidu.com/s/15bQ2 ...
经验分享：Python3离线安装及库更新
Python3离线安装及库更新背景思路步骤一, 安装操作系统二, 安装python 2.1, 安装依赖环境 2.2, 安装python 2.2.1, 创建Python目录 2.2.2, 解压 ...
python需要安装的库_使用python学习【机器学习】需要安装的库~
---------------------------------------------------------------------------------------------------- ...
python3.8安装urllib库_urllib库的基本使用
学习爬虫的目的便是模拟浏览器向服务器发出请求,进而获取所需数据. 爬虫可以分为抓取页面.分析页面和存储数据三步. 每一步中,python都有强大的模块来让我们使用. 今天先来学习请求库urllib的基 ...
python3.8如何安装jieba库_安装jieba、wordcloud等第三方库
任务:安装第三方库 C:\Users\l>pip install wheel Collecting wheel Downloading https://files.pythonhosted.or ...

python3.8安装requests库_再见requests！Python下一代 http客户端出炉啦！

python3.8安装requests库_再见requests！Python下一代 http客户端出炉啦！相关推荐

最新文章

热门文章