摘要:環境適用場景需要處理一定數據集業務從讀取一定數據的業務導出一次需要處理一定的業務操作更新刪除等更多需要處理一定數據集的操作關鍵設置關鍵設置,如果不設置,依舊會從一次取出數據到里的游標屬性不是必須的生成器生成器,迭代數據操作本生成器可
環境
mysql: 5.6.34
php: 5.6
nginx: php-fpm
需要處理一定數據集業務
從mysql讀取一定數據的業務導出
一次需要處理一定的mysql業務操作更新刪除等
更多需要處理一定數據集的操作
pdo 關鍵設置$dbh = new PDO($dsn, $user, $pass); # 關鍵設置,如果不設置,php依舊會從pdo一次取出數據到php $dbh->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); //perpare里的游標屬性不是必須的 $sth = $dbh->prepare("SELECT * FROM `order`", array(PDO::ATTR_CURSOR => PDO::CURSOR_SCROLL)); $sth->execute();生成器
生成器,迭代數據操作 本生成器可省略嘗試代碼
class Test { public function test() { set_time_limit(0); $dbms="mysql"; //數據庫類型 $host=C("DB_HOST"); //數據庫主機名 $dbName=C("DB_NAME"); //使用的數據庫 $user=C("DB_USER"); //數據庫連接用戶名 $pass=C("DB_PWD"); //對應的密碼 $dsn="$dbms:host=$host;dbname=$dbName"; $dbh = new PDO($dsn, $user, $pass); $dbh->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false); $sth = $dbh->prepare("SELECT * FROM `order`"); $sth->execute(); $i = 0; $newLine = PHP_SAPI == "cli" ? " " : "輸出
"; foreach ($this->cursor($sth) as $row) { // var_dump($row); echo $row["id"] . $newLine; $i++; } echo "消耗內存:" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine; echo "處理數據行數:" . $i . $newLine; echo "success"; } public function cursor($sth) { while($row = $sth->fetch(PDO::FETCH_ASSOC)) { yield $row; } } } $test = new Test(); $test->test();
1 ... //省略部分id 804288 消耗內存:"0.34918212890625M 處理數據行數:254062 success
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/28386.html
摘要:開發中經常遇到這樣的場景產品汪我要在后臺做一個功能,可以導出自定義時間范圍的訂單信息。結果,第二天一上班產品汪過來就是拍桌子,我想把去年一整年的訂單都導出來,結果后臺直接就掛了開發小哥一查,原來是內存溢出了,一年下來的的訂單量足足有條。 開發中經常遇到這樣的場景 產品汪:我要在后臺做一個功能,可以導出自定義時間范圍的訂單信息。開發小哥二話不說,半天就把功能做完并上線了。結果,第二天一上...
閱讀 3106·2021-11-18 10:02
閱讀 2618·2021-10-13 09:47
閱讀 3034·2021-09-22 15:07
閱讀 791·2019-08-30 15:43
閱讀 1810·2019-08-30 10:59
閱讀 1685·2019-08-29 15:34
閱讀 1702·2019-08-29 15:06
閱讀 438·2019-08-29 13:28