方法一:通過yield的生成器實現有限內存中的大文件讀取
創新互聯網站建設服務商,為中小企業提供成都網站制作、網站設計服務,網站設計,成都網站托管等一站式綜合服務型公司,專業打造企業形象網站,讓您在眾多競爭對手中脫穎而出創新互聯。
方法二:使用SPL 庫 提供的 SplFileObject 類
你需要安裝php運行環境,才能解析php文件!百度phpstudy!一鍵安裝,然后把php放在phpstudy的網站目錄!然后就可以用sublime編寫!然后測試! 要直接sublime+瀏覽器只可以運行html+script! 歡迎拍磚
思路:
讀取csv文件,每讀取一行數據,就插入數據庫
示例
文件夾結構
/
file.csv????//csv大文件,這里只模擬三行數據,不考慮運行效率(PS:csv文件格式很簡單,文件一般較小,解析很快,運行效率的瓶頸主要在寫入數據庫操作)
index.php????//php文件
file.csv
singi,20
lily,19
daming,23
index.php
/**
*?讀取csv文件,每讀取一行數據,就插入數據庫
*/
//獲取數據庫實例
$dsn?=?'mysql:dbname=test;host=127.0.0.1';
$user?=?'root';
$password?=?'';
try?{
$db?=?new?PDO($dsn,?$user,?$password);
}?catch?(PDOException?$e)?{
echo?'Connection?failed:?'?.?$e-getMessage();
}
//讀取file.csv文件
if?(($handle?=?fopen("file.csv",?"r"))?!==?FALSE)?{
while?(($row?=?fgetcsv($handle,?1000,?","))?!==?FALSE)?{
//寫入數據庫
$sth?=?$db-prepare('insert?into?test?set?name=:name,age=:age');
$sth-bindParam(':name',$row[0],PDO::PARAM_STR,255);
$sth-bindParam(':age',$row[1],PDO::PARAM_INT);
$sth-execute();
}
fclose($handle);
}
數據表
CREATE?TABLE?`test`?(
`id`?INT(10)?UNSIGNED?NOT?NULL?AUTO_INCREMENT,
`name`?VARCHAR(255)?NULL?DEFAULT?''?COLLATE?'utf8mb4_bin',
`age`?INT(10)?NULL?DEFAULT?'0',
PRIMARY?KEY?(`id`)
)
COLLATE='utf8mb4_bin'
ENGINE=InnoDB;
運行結束后,數據庫中會插入csv中的三行數據