前言

本文主要介紹了關(guān)于PHP利用PDO從mysql讀取大量數(shù)據(jù)處理的相關(guān)內(nèi)容，分享出來供大家參考學習，下面話不多說了，來一起看看詳細的介紹吧。

環(huán)境

mysql: 5.6.34

php: 5.6

nginx: php-fpm

適用場景

需要處理一定數(shù)據(jù)集業(yè)務(wù)

從mysql讀取一定數(shù)據(jù)的業(yè)務(wù)導出

一次需要處理一定的mysql業(yè)務(wù)操作更新刪除等

更多需要處理一定數(shù)據(jù)集的操作

pdo 關(guān)鍵設(shè)置

$dbh = new \PDO($dsn, $user, $pass);

# 關(guān)鍵設(shè)置，如果不設(shè)置，php依舊會從pdo一次取出數(shù)據(jù)到php

$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

//perpare里的游標屬性不是必須的

$sth = $dbh->prepare("SELECT * FROM `order`", array(\PDO::ATTR_CURSOR => \PDO::CURSOR_SCROLL));

$sth->execute();

生成器

生成器，迭代數(shù)據(jù)操作

本生成器可省略

嘗試代碼

class Test {

public function test()

{

set_time_limit(0);

$dbms='mysql'; //數(shù)據(jù)庫類型

$host=C('DB_HOST'); //數(shù)據(jù)庫主機名

$dbName=C('DB_NAME'); //使用的數(shù)據(jù)庫

$user=C('DB_USER'); //數(shù)據(jù)庫連接用戶名

$pass=C('DB_PWD'); //對應(yīng)的密碼

$dsn="$dbms:host=$host;dbname=$dbName";

$dbh = new \PDO($dsn, $user, $pass);

$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $dbh->prepare("SELECT * FROM `order`");

$sth->execute();

$i = 0;

$newLine = PHP_SAPI == 'cli' ? "\n" : '

';

foreach ($this->cursor($sth) as $row) {

// var_dump($row);

echo $row['id'] . $newLine;

$i++;

}

echo "消耗內(nèi)存：" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine;

echo "處理數(shù)據(jù)行數(shù)：" . $i . $newLine;

echo "success";

}

public function cursor($sth)

{

while($row = $sth->fetch(\PDO::FETCH_ASSOC)) {

yield $row;

}

}

}

$test = new Test();

$test->test();

輸出

1

... //省略部分id

804288

消耗內(nèi)存："0.34918212890625M

處理數(shù)據(jù)行數(shù)：254062

success

總結(jié)

以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值，如果有疑問大家可以留言交流，謝謝大家對腳本之家的支持。

總結(jié)

以上是生活随笔為你收集整理的php mysql 大量读取_PHP使用PDO从mysql读取大量数据处理详解的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。