在PHP中怎么解決大量數(shù)據(jù)處理的問題

mysql_query函數(shù)查詢的方式是查詢出全部結果后緩存到內存中，這樣就會出現(xiàn)超內存的現(xiàn)象，使用另外一個函數(shù)mysql_unbuffered_query可以解決這個問題，mysql_unbuffered_query不會緩存結果集，而是查詢出來數(shù)據(jù)后立馬對結果集進行操作，也就是便查詢邊返回，這樣就不會出現(xiàn)超出內存的現(xiàn)象，但是使用mysql_unbuffered_query的是時候不能使用 mysql_num_rows() 和 mysql_data_seek()。并且向 MySQL 發(fā)送一條新的 SQL 查詢之前，必須提取掉所有未緩存的 SQL 查詢所產生的結果行。例如：

公司主營業(yè)務：成都網站制作、成都網站建設、外貿營銷網站建設、移動網站開發(fā)等業(yè)務。幫助企業(yè)客戶真正實現(xiàn)互聯(lián)網宣傳，提高企業(yè)的競爭能力。創(chuàng)新互聯(lián)是一支青春激揚、勤奮敬業(yè)、活力青春激揚、勤奮敬業(yè)、活力澎湃、和諧高效的團隊。公司秉承以“開放、自由、嚴謹、自律”為核心的企業(yè)文化，感謝他們對我們的高要求，感謝他們從不同領域給我們帶來的挑戰(zhàn)，讓我們激情的團隊有機會用頭腦與智慧不斷的給客戶帶來驚喜。創(chuàng)新互聯(lián)推出覃塘免費做網站回饋大家。

使用緩存結果集的代碼：

function selecttest()

{

try {

$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');

// 不使用緩存結果集方式

// $pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $pdo-prepare('select * from test');

$sth-execute();

echo '最初占用內存大小：' . memory_get_usage() . "\n";

$i = 0;

while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {

$i += 1;

if ($i 10) {

break;

}

sleep(1);

print_r($result);

echo '占用內存大小：' . memory_get_usage() . "\n";

}

} catch (Exception $e) {

echo $e-getMessage();

}

}

執(zhí)行時將會報超出內存的錯誤：

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56

Call Stack:

0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0

0.0005 135568 2. test-selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85

0.0050 142528 3. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56

將上面代碼中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注釋去掉后將不在緩存結果集，這時運行該函數(shù)的結果如下：

最初占用內存大小：144808

Array

(

[id] = 1

[a] = v

[b] = w

[c] = i

)

占用內存大小：145544

Array

(

[id] = 2

[a] = b

[b] = l

[c] = q

)

占用內存大小：145544

Array

(

[id] = 3

[a] = m

[b] = p

[c] = h

)

占用內存大小：145536

Array

(

[id] = 4

[a] = j

[b] = i

[c] = b

)

占用內存大小：145536

可以看到，這時返回一條數(shù)據(jù)內存占用非常的小，也就700多字節(jié)，這樣就不會出現(xiàn)超出內存的錯誤了。

如何解決PHP查詢大量數(shù)據(jù)內存耗盡的問題

這個問題在PHP的官方網站上叫緩沖查詢和非緩沖查詢(Buffered and Unbuffered queries)。PHP的查詢缺省模式是緩沖模式。也就是說，查詢數(shù)據(jù)結果會一次全部提取到內存里供PHP程序處理。這樣給了PHP程序額外的功能，比如說，計算行數(shù)，將指針指向某一行等。更重要的是程序可以對數(shù)據(jù)集反復進行二次查詢和過濾等操作。但這種緩沖查詢模式的缺陷就是消耗內存，也就是用空間換速度。

相對的，另外一種PHP查詢模式是非緩沖查詢，數(shù)據(jù)庫服務器會一條一條的返回數(shù)據(jù)，而不是一次全部返回，這樣的結果就是PHP程序消耗較少的內存，但卻增加了數(shù)據(jù)庫服務器的壓力，因為數(shù)據(jù)庫會一直等待PHP來取數(shù)據(jù)，一直到數(shù)據(jù)全部取完。

很顯然，緩沖查詢模式適用于小數(shù)據(jù)量查詢，而非緩沖查詢適應于大數(shù)據(jù)量查詢。

php處理大量數(shù)據(jù)時，運行到一定時間就中斷了，請問如何解決

php處理數(shù)據(jù)時會有一個等待時間，就是所說的超時時間，而且如果使用mysql的話，它也有一個超時時間，運行一串代碼時間如果超過配置文件的時間，會被中斷不運行。第一種你可以修改php配置文件timeout的運行時間，第二你可以分批處理大量數(shù)據(jù)，注意是分批處理，就OK了。

網站標題：怎么解決php數(shù)據(jù)處理 怎么解決php數(shù)據(jù)處理錯誤
分享網址：http://chinadenli.net/article46/dooieeg.html

成都網站建設公司_創(chuàng)新互聯(lián)，為您提供微信公眾號、ChatGPT、網站維護、微信小程序、定制網站、Google

廣告

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)