数据库链接被占满invalid connection

项目场景:

由于我们的测试环境的数据库默认连接数是200,而我正好做了一个导出的需求,导出的整个流程是:首先从好多数据表中拿到数据在内存中进行组装,组装好了之后上传到导出服务器,然后返回给用户下载链接。


问题描述:

由于导出服务本身就开了10个协程, 在取数据时取三个表的数据又单独开了协程,取每张表大约开了10个协程,总共开了10X10X10个协程去数据库表取数据,然后在测试环境可能同时有很多导出任务在进行。所以频发的出现invalid connection或者bad connection这样的报错。


原因分析:

由于开的协程数过多,导致去数据库取数据时,一直占用着mysql的连接数没有释放,导致mysql在连接被占用时失效,导致错误


解决方案:

将占用过多mysql连接的资源的方式改成少占用mysql连接的方式,将原先的通过开协程去单张表中取数据的方式通过其它过滤条件比如仓库或者国家一次加载到内存中。最后解决了问题。

猜你喜欢

转载自blog.csdn.net/m0_38101105/article/details/118607701