PHP使用PDO從mysql讀取大量數(shù)據(jù)處理詳解
前言
本文主要介紹了關(guān)于PHP利用PDO從mysql讀取大量數(shù)據(jù)處理的相關(guān)內(nèi)容,分享出來供大家參考學(xué)習(xí),下面話不多說了,來一起看看詳細(xì)的介紹吧。
環(huán)境
- mysql: 5.6.34
- php: 5.6
- nginx: php-fpm
適用場(chǎng)景
需要處理一定數(shù)據(jù)集業(yè)務(wù)
- 從mysql讀取一定數(shù)據(jù)的業(yè)務(wù)導(dǎo)出
- 一次需要處理一定的mysql業(yè)務(wù)操作更新刪除等
- 更多需要處理一定數(shù)據(jù)集的操作
pdo 關(guān)鍵設(shè)置
$dbh = new \PDO($dsn, $user, $pass); # 關(guān)鍵設(shè)置,如果不設(shè)置,php依舊會(huì)從pdo一次取出數(shù)據(jù)到php $dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); //perpare里的游標(biāo)屬性不是必須的 $sth = $dbh->prepare("SELECT * FROM `order`", array(\PDO::ATTR_CURSOR => \PDO::CURSOR_SCROLL)); $sth->execute();
生成器
生成器,迭代數(shù)據(jù)操作
本生成器可省略
嘗試代碼
class Test { public function test() { set_time_limit(0); $dbms='mysql'; //數(shù)據(jù)庫類型 $host=C('DB_HOST'); //數(shù)據(jù)庫主機(jī)名 $dbName=C('DB_NAME'); //使用的數(shù)據(jù)庫 $user=C('DB_USER'); //數(shù)據(jù)庫連接用戶名 $pass=C('DB_PWD'); //對(duì)應(yīng)的密碼 $dsn="$dbms:host=$host;dbname=$dbName"; $dbh = new \PDO($dsn, $user, $pass); $dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); $sth = $dbh->prepare("SELECT * FROM `order`"); $sth->execute(); $i = 0; $newLine = PHP_SAPI == 'cli' ? "\n" : '<br />'; foreach ($this->cursor($sth) as $row) { // var_dump($row); echo $row['id'] . $newLine; $i++; } echo "消耗內(nèi)存:" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine; echo "處理數(shù)據(jù)行數(shù):" . $i . $newLine; echo "success"; } public function cursor($sth) { while($row = $sth->fetch(\PDO::FETCH_ASSOC)) { yield $row; } } } $test = new Test(); $test->test();
輸出
1 ... //省略部分id 804288 消耗內(nèi)存:"0.34918212890625M 處理數(shù)據(jù)行數(shù):254062 success
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,如果有疑問大家可以留言交流,謝謝大家對(duì)腳本之家的支持。
- php中mysql連接方式PDO使用詳解
- Php中用PDO查詢Mysql來避免SQL注入風(fēng)險(xiǎn)的方法
- php mysql PDO 查詢操作的實(shí)例詳解
- PHP實(shí)現(xiàn)PDO的mysql數(shù)據(jù)庫操作類
- php中數(shù)據(jù)庫連接方式pdo和mysqli對(duì)比分析
- php基于PDO實(shí)現(xiàn)功能強(qiáng)大的MYSQL封裝類實(shí)例
- php下pdo的mysql事務(wù)處理用法實(shí)例
- PHP基于pdo的數(shù)據(jù)庫操作類【可支持mysql、sqlserver及oracle】
- PHP基于PDO擴(kuò)展操作mysql數(shù)據(jù)庫示例
- PHP使用PDO創(chuàng)建MySQL數(shù)據(jù)庫、表及插入多條數(shù)據(jù)操作示例
相關(guān)文章
PHP 用數(shù)組降低程序的時(shí)間復(fù)雜度
時(shí)間復(fù)雜度是開發(fā)人員用來衡量應(yīng)用程序算法優(yōu)劣的主要因素??陀^地說,算法的優(yōu)劣除了和時(shí)間復(fù)雜度有關(guān),還與空間復(fù)雜度密切相關(guān)。2009-12-12php查詢mysql數(shù)據(jù)庫并將結(jié)果保存到數(shù)組的方法
這篇文章主要介紹了php查詢mysql數(shù)據(jù)庫并將結(jié)果保存到數(shù)組的方法,實(shí)例分析了php使用mysql_fetch_assoc查詢數(shù)據(jù)庫的技巧,需要的朋友可以參考下2015-03-03一個(gè)PHP二維數(shù)組排序的函數(shù)分享
二維數(shù)組在PHP開發(fā)中經(jīng)常遇到,但是他的排序就不如一維數(shù)組那樣用內(nèi)置函數(shù)來的方便了,下面為大家詳細(xì)介紹下2014-01-01PHP設(shè)計(jì)模式之模板方法模式定義與用法詳解
這篇文章主要介紹了PHP設(shè)計(jì)模式之模板方法模式,結(jié)合實(shí)例形式詳細(xì)分析了php設(shè)計(jì)模式中模板方法模式的概念、原理、定義、用法及相關(guān)注意事項(xiàng),需要的朋友可以參考下2018-04-04PHP similar_text 字符串的相似性比較函數(shù)
PHP尋找兩個(gè)字符串的相似性的similar_text ()函數(shù)使用方法2010-05-05