Ricardo Zavaleta:PostgreSQL连接池器性能测试:PgBouncer、PgCat和Supavisor

Ricardo Zavaleta:PostgreSQL连接池器性能测试:PgBouncer、PgCat和Supavisor

💡 原文英文,约1900词,阅读约需7分钟。
📝

内容提要

本文比较了PgBouncer、PgCat和Supavisor三种PostgreSQL连接池器,发现PgCat在高并发连接下具有更高的吞吐量和更低的延迟,是处理高连接数的最佳选择。

🔎

延伸解读

测试环境与配置

测试在Google Cloud的E2-standard-8虚拟机(8 vCPU、32GB内存)上进行,操作系统为Debian 11.8,PostgreSQL版本15.5。三个连接池器均配置为100个连接池,使用PgBench生成负载。客户端数量从少量到2500不等,以评估不同并发下的表现。

低连接数下的表现

当客户端数少于50时,PgBouncer的延迟最低、吞吐量最高。但超过50个客户端后,PgCat开始展现更好的延迟和吞吐量。Supavisor的延迟显著高于其他两者,差距在80%到160%之间。所有连接池器的延迟都高于直接保持长连接,但低于每次新建连接。

高连接数下的吞吐与延迟

在2500个并发客户端下,PgCat达到59,051 tps的峰值吞吐量,而PgBouncer峰值为44,096 tps,之后下降并稳定在25,000-30,000 tps;Supavisor峰值约21,700 tps。在1250个客户端时,PgCat的延迟为21.1毫秒,PgBouncer为47.2毫秒,Supavisor为64.37毫秒。PgCat在高并发下表现最佳。

CPU利用与架构影响

PgBouncer是单线程的,在50个客户端时CPU利用率已达100%,限制了扩展性。PgCat多线程,在1250个客户端时CPU利用率约400%,能更高效利用多核。Supavisor也是多线程,但在100个客户端时CPU利用率达700%,且延迟波动较大,可能与其架构复杂性有关。

❓

Q&A

为什么PostgreSQL需要连接池器?

创建Postgres数据库连接以执行短查询成本高昂,每个连接约消耗1.3MB到2MB内存,并且数据库服务器需要fork新进程。连接池器可以缓解这些问题。

PgBouncer、PgCat和Supavisor在安装和配置复杂度上有什么区别?

PgBouncer和PgCat安装简单,只需调整配置文件并更改连接字符串;Supavisor设置较复杂,需要额外的辅助数据库存储租户信息,并涉及更多监听端口。

PgCat相比PgBouncer有哪些改进?

PgCat解决了PgBouncer不支持副本故障转移和负载均衡的限制,支持分片、负载均衡、故障转移和镜像,并且是多线程的,能更好地利用硬件资源。

在高并发连接下,哪个连接池器性能最好?

根据实验,PgCat在高并发连接下表现最佳,具有更高的吞吐量和更低的延迟。在超过750个客户端时,PgCat的QPS是PgBouncer和Supavisor的2倍以上。

PgBouncer在低连接数下的性能如何?

在低连接数(少于50)时,PgBouncer具有最低的延迟和最佳的吞吐量。但它是单线程的,超过25个连接可能需要启动多个实例。

Supavisor在高负载下的延迟表现如何?

Supavisor在高负载下延迟较高,相比PgBouncer和PgCat高出80-160%,且延迟有频繁尖峰,可能与其架构复杂性有关。

选择PostgreSQL连接池器时需要考虑哪些因素?

需要考虑易用性(安装配置复杂度)、可扩展性(支持多少并发连接)、内存开销(每个连接的内存占用和获取连接的延迟)以及适应并发连接变化的能力。

🏷️

标签

➡️

继续阅读