django 多进程 mysql_[Python]django使用多进程连接msyql错误

太过爱你忘了你带给我的痛 2022-11-06 02:55 101阅读 0赞

问题

mysql 查询出现错误

error: (2014, Commands out of sync; you can't run this command now)

查询

mysql文档中的解释

If you get Commands out of sync; you can’t run this command now in your client code, you are calling client functions in the wrong order.

This can happen, for example, if you are using mysql\_use\_result() and try to execute a new query before you have called mysql\_free\_result(). It can also happen if you try to execute two queries that return data without calling mysql\_use\_result() or mysql\_store\_result() in between.

调用顺序错误，同一个连接，发出2个查询请求，第一个请求发出之后没有等到mysql返回就发出第二个请求

背景 思考

我这里的程序是这样的，在django框架中起了一个定时任务，这个任务中有个循环，主线程循环查询mysql然后在循环体中生成了子进程，子进程中也有mysql查询。

我测试了下不实用多进程的情况没有问题，使用多进程就会出现这个问题。

对照上面的文档，其实不难想到，错误应该是这样的

父进程和mysql建立的连接A，循环中fork出一个子进程 子进程保持了父进程的变量，也就是拥有mysql连接A 子进程去用连接A查询mysql，父进程这个时候也并发的使用连接A访问mysql 这样很容易出现了上面Mysql提到的情况，结果就报错了

![129211\_0.png][129211_0.png]

解决

解决的方案其实很容易想到，就是当我们fork一个进程之后，让他从新获取一个和mysql的连接C或者D就好了嘛，

结果几个测试，得到如下的方案。

在父进程的loop中，创建子进程之前关闭mysql连接，这样子进程中就会重新连接mysql。

from django import db

db.close\_connection()

p = Process(target=ap5mintes\_scan, args=(ac, details, mtime))

p.start()

其实就是状态copy的问题，本来多个线程同时并发调用一个connection也不对.

后面做了个测试 ，多进程的情况下查看mysql processlist，的确使用建立多个mysql 连接。

[129211_0.png]: https://imgzx.etuan.com/upload/9105/3/129211/129211_0.png

发表评论取消回复

表情：

评论列表（有 0 条评论，101人围观）

还没有评论，来说两句吧...

相关阅读

相关 php使用多进程

多进程使用场景多进程一般用来处理消息队列，等数据量比大的任务。使用限制 php多进程需要`pcntl`和`posix`扩展支持。可以使用`php -m`查看是

Dear 丶/ 2022年12月28日 07:26/ 0 赞/ 138 阅读

相关 Django 多进程多线程的一些个人理解

一、Django 开发环境与生产环境开发/调试 python manage.py runserver 0.0.0.0:8080 生产环境 Ngin

墨蓝/ 2022年12月13日 12:48/ 0 赞/ 191 阅读

相关 django 多进程 mysql_[Python]django使用多进程连接msyql错误

问题 mysql 查询出现错误 error: (2014, Commands out of sync; you can't run this command now) 查

太过爱你忘了你带给我的痛/ 2022年11月06日 02:55/ 0 赞/ 102 阅读

相关 684-进程&进程控制&多进程&进程控制块

什么是进程？进程是由程序变换而来，介绍进程时，需要先从程序说起。（1）当程序没有运行时当程序没有被运行时，该程序（可执行文件）只是存放在硬盘上的静态数据，与

港控/mmm°/ 2022年09月16日 06:08/ 0 赞/ 157 阅读

相关编写多进程程序 --多进程编程

实验目的通过编写多进程程序，熟练掌握fork()、exec()、wait()和waitpid()等函数的使用，进一步理解在Linux中多进程编程的步骤。实验内容

客官°小女子只卖身不卖艺/ 2022年08月01日 14:50/ 0 赞/ 177 阅读

相关 Python multiprocessing （多进程）使用

官方文档 [https://docs.python.org/3.6/library/multiprocessing.html][https_docs.python.org_3

痛定思痛。/ 2022年05月13日 10:54/ 0 赞/ 189 阅读

相关如何使用多进程python

如何使用多进程由于python中全局解释锁（GIL）的存在，在任意时刻只允许一个线程在解释器中运行，因此python的多线程不适合处理cpu密集型

╰+攻爆jí腚メ/ 2022年02月22日 01:29/ 0 赞/ 178 阅读

相关多进程

多进程概述多进程代码： from multiprocessing import Process 方法：进程对象.start()

迷南。/ 2021年11月11日 15:16/ 0 赞/ 284 阅读

相关 Python多进程

[引用地址https://www.cnblogs.com/kaituorensheng/p/4445418.html][https_www.cnblogs.com_kaituo

川长思鸟来/ 2021年09月20日 14:30/ 0 赞/ 275 阅读

相关多进程编程

多进程编程概念程序: 计算机中存储的二进制代码进程: 计算机中运行的程序多进程: 多个进程同时运行进程的创建 Linux环境下执行实例

今天药忘吃喽~/ 2021年09月17日 06:30/ 0 赞/ 354 阅读