主题
MySQL 连接池
数据库访问的公共组件:如果每次查询都要走 TCP 握手、身份验证、断开,并发一高,建连本身就会变成瓶颈。这个连接池维护一批可复用的长连接,业务用 shared_ptr 取用、用完自动归还而不是关闭,生产者按空闲水位补充连接;1 万条插入的压测里,32 线程下的耗时从 194 秒降到 4.8 秒。
技术栈:C++11 · MySQL C API · pthread · CMake
为什么需要连接池
短连接模式下,一次查询要走完整条路:
text
TCP 三次握手 → MySQL 身份验证 → 执行 SQL → 四次挥手并发一高,建连和销毁本身就成了瓶颈:CPU 耗在协议栈、端口被 TIME_WAIT 占满、MySQL 侧连接数频繁抖动。
实现要点
- 生产者-消费者:消费者从队列取连接;生产者监控空闲连接数,低于水位且未达上限时补连接。
- 条件变量等待:取不到连接时
wait_for阻塞,避免忙轮询。 - 智能指针归还:
shared_ptr<Connection>配自定义删除器,用户释放时不是关闭连接,而是重新放回队列。 - 配置化:初始连接数、最大连接数、心跳间隔、等待超时都从配置文件读取。
压测效果
1 万条插入,MySQL 8.0,Ubuntu 22.04:
| 线程数 | 不用连接池 | 用连接池 | 提升 |
|---|---|---|---|
| 1 | 259,130 ms | 65,687 ms | 3.94× |
| 8 | 156,440 ms | 13,707 ms | 11.41× |
| 16 | 164,859 ms | 9,353 ms | 17.62× |
| 32 | 194,310 ms | 4,859 ms | 40.01× |
| 64 | 234,310 ms | 2,282 ms | 102.66× |
为了让瓶颈聚焦在「建连」而不是「写盘」,测试时调了 innodb_flush_log_at_trx_commit=2、用显式事务批量提交,并开启 tcp_tw_reuse 避免端口耗尽。
已知问题与修正
- 生命周期:删除器若捕获池对象
this,池先销毁而连接仍在外部使用时,归还会访问悬空指针。正确做法是让连接持有池的共享状态,而不是裸指针。 - 生产者策略:早期版本只有队列空时才生产连接,高并发下用户频繁等到超时。改为按「空闲数 + 总量」双水位补连接,并把补充信号提前到消费者取走连接时。