一日一技：大幅度提高requests的访问速度

作者 l kingname

来源 l 未闻 Code（ID：itskingname）

以下文章来源于未闻Code ，作者kingname

我做了一个垃圾信息过滤的 HTTP 接口。现在有一千万条消息需要经过这个接口进行垃圾检测。

一开始我的代码是这样的：

import requests
messages = ['第一条', '第二条', '第三条']
for message in messages:
    resp = requests.post(url, json={'msg': message}).json()
    if resp['trash']:
        print('是垃圾消息')

我们写一段代码来看看运行速度：

访问一百次百度，竟然需要 20 秒。那我有一千万条信息，这个时间太长了。

有没有什么加速的办法呢？除了我们之前文章讲到的 多线程、aiohttp 或者干脆用 Scrapy 外，还可以让 requests 保持连接从而减少频繁进行 TCP 三次握手的时间消耗。

那么要如何让 requests 保持连接呢？实际上非常简单，使用 Session 对象即可。

修改后的代码：

import requests
import time
start = time.time()
session = requests.Session()
for _ in range(100):