PHP大量数据循环时内存耗尽问题的解决方案

今天药忘吃喽~ 2022-03-31 08:14 641阅读 0赞

最近在开发一个PHP程序时遇到了下面的错误：

PHP Fatal error: Allowed memory size of 9999999999 bytes exhausted

错误信息显示允许的最大内存已经耗尽。遇到这样的错误起初让我很诧异，但转眼一想，也不奇怪，因为我正在开发的这个程序是要用一个foreach循环语句在一个有百万条记录的表里全表搜索具有特定特征的数据，也就是说，一次要把百万条数据取出，然后逐条检查每天数据。可想而知，百万条数据全部加载到内存中，内存不爆才怪。

缓冲的查询是默认的，下面的例子将演示如何执行无缓冲的查询每个API：

它们之间的区别：

无缓冲的MySQL查询执行查询，然后返回一个资源时，数据仍在MySQL服务器等待被读取。这种使用较少的内存在PHP的一面，但可以增加服务器的负载；

缓冲查询结果立即从MySQL服务器转移到PHP然后保存在PHP进程的内存。如果数据过多就会耗尽内存

非缓冲查询方法一: mysqli

<?php   
$mysqli  = new mysqli("localhost", "my\_user", "my\_password", "world");   
$uresult = $mysqli->query("SELECT Name FROM City", MYSQLI\_USE\_RESULT);

if ($uresult) \{   
   while ($row = $uresult->fetch\_assoc()) \{   
       echo $row\['Name'\] . PHP\_EOL;   
   \}   
\}   
$uresult->close();   
?>

非缓冲查询方法二: pdo\_mysql

<?php   
$pdo = new PDO("mysql:host=localhost;dbname=world", 'my\_user', 'my\_pass');   
$pdo->setAttribute(PDO::MYSQL\_ATTR\_USE\_BUFFERED\_QUERY, false);

$uresult = $pdo->query("SELECT Name FROM City");   
if ($uresult) \{   
   while ($row = $uresult->fetch(PDO::FETCH\_ASSOC)) \{   
       echo $row\['Name'\] . PHP\_EOL;   
   \}   
\}   
?>

非缓冲查询方法三: mysql

<?php   
$conn = mysql\_connect("localhost", "my\_user", "my\_pass");   
$db   = mysql\_select\_db("world");

$uresult = mysql\_unbuffered\_query("SELECT Name FROM City");   
if ($uresult) \{   
   while ($row = mysql\_fetch\_assoc($uresult)) \{   
       echo $row\['Name'\] . PHP\_EOL;   
   \}   
\}   
?>

Note:

mysql\_unbuffered\_query() 的好处是有代价的：在 mysql\_unbuffered\_query() 返回的结果集之上不能使用 mysql\_num\_rows() 和 mysql\_data\_seek() 。此外在向 MySQL 发送一条新的 SQL 查询之前，必须提取掉所有未缓存的 SQL 查询所产生的结果行。

例如：  
<?php   
$conn = mysql\_connect("localhost", "root","");   
$db   = mysql\_select\_db("dh");  
$uresult = mysql\_query("SELECT \* FROM serve");   
$num\_rows  =  mysql\_num\_rows ( $uresult );  
echo $num\_rows;//此处结果为0  
var\_dump($uresult);  
if ($uresult) \{   
   while ($row = mysql\_fetch\_assoc($uresult)) \{   
       echo $row\['id'\] . PHP\_EOL;   
   \}   
\}

/\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*

<?php   
$conn = mysql\_connect("localhost", "root","");   
$db   = mysql\_select\_db("dh");  
$uresult = mysql\_query("SELECT id FROM serve");   
var\_dump($uresult);  
if ($uresult) \{   
   while ($row = mysql\_fetch\_assoc($uresult)) \{   
       echo $row\['id'\] . PHP\_EOL;   
   \}   
\}   
$num\_rows  =  mysql\_num\_rows ( $uresult );  
echo $num\_rows;//此处结果为正常值  
?>  
\---------------------   
作者：zNULLT   
来源：CSDN   
原文：https://blog.csdn.net/z15818264727/article/details/51994605   
版权声明：本文为博主原创文章，转载请附上博文链接！