php+Mysql 大數(shù)據(jù)導(dǎo)入怎樣提高效率

優(yōu)化SQL插入語(yǔ)句；

站在用戶的角度思考問(wèn)題，與客戶深入溝通，找到鳳翔網(wǎng)站設(shè)計(jì)與鳳翔網(wǎng)站推廣的解決方案，憑借多年的經(jīng)驗(yàn)，讓設(shè)計(jì)與互聯(lián)網(wǎng)技術(shù)結(jié)合，創(chuàng)造個(gè)性化、用戶體驗(yàn)好的作品，建站類型包括：網(wǎng)站設(shè)計(jì)、成都網(wǎng)站設(shè)計(jì)、企業(yè)官網(wǎng)、英文網(wǎng)站、手機(jī)端網(wǎng)站、網(wǎng)站推廣、域名注冊(cè)、虛擬空間、企業(yè)郵箱。業(yè)務(wù)覆蓋鳳翔地區(qū)。

比如循環(huán)一條一條插入，改成鏈接多個(gè)值進(jìn)行插入。

將：

foreach($re as $it){

$sql="insert into table (id,name) values(".$it['id'].","."$it['name'].")";

mysql_query($sql);

}

改為：

$sql="insert into table (id,name) values";

foreach($re as $it){

$str= "'".$it['id']."','".$it['name']."'";

}

$sql .= "(".$str."),";

$sql2 = substr($sql,0,-1);

mysql_query($sql);

打開mysql的配置文件，my.ini文件，并找到：max_allowed_packet項(xiàng)；

將值修改大一點(diǎn)，具體根據(jù)自己需要修改。比如這里修改為：1G。

重啟mysql服務(wù)；

5

如果運(yùn)行頁(yè)面提示內(nèi)存溢出，可將值設(shè)大一點(diǎn)。

Allowed memory size of 134217728 bytes exhausted (tried to allocate 132907287 bytes)

步驟閱讀

6

這樣，面對(duì)千萬(wàn)數(shù)據(jù)導(dǎo)入的時(shí)候，比原來(lái)那種方法至少快好多倍。

如何用php導(dǎo)出導(dǎo)入大數(shù)據(jù)庫(kù)

在使用PhpMyAdmin的時(shí)候經(jīng)常用到數(shù)據(jù)的導(dǎo)入和導(dǎo)出(Export/Import)，但是在導(dǎo)入大數(shù)據(jù)的時(shí)候由于php上傳文件的限制和腳本響應(yīng)時(shí)間的限制，導(dǎo)致phpMyAdmin無(wú)法導(dǎo)入大數(shù)據(jù)。很多時(shí)候都是由于文件過(guò)大，從本地瀏覽上傳導(dǎo)入，容易中斷失敗，有沒(méi)有更好的方法呢？

方法：

在phpMyAdmin的目錄下，找到根目錄的config.inc.php文件，

打開config.inc.php文件，查找$cfg['UploadDir']，這個(gè)參數(shù)就是設(shè)定導(dǎo)入文件存放的目錄，這里把值設(shè)定為：ImportSQLFile。

在phpMyAdmin目錄下，建立以ImportSQLFile命名的文件夾，

把我們需要導(dǎo)入的數(shù)據(jù)文件，放到ImportSQLFile文件夾下面，非常簡(jiǎn)單，

登入phpMyAdmin，選擇需要導(dǎo)入的數(shù)據(jù)，點(diǎn)擊導(dǎo)航條上面的“導(dǎo)入”按鈕，

選中“從網(wǎng)站服務(wù)器上傳文件夾ImportSQLFile/中選擇：”選項(xiàng)，并需要導(dǎo)入的數(shù)據(jù)文件，

最后點(diǎn)擊“執(zhí)行”，即可導(dǎo)入成功。

注意事項(xiàng)

如果在config.inc.php文件，沒(méi)有找到$cfg['UploadDir']，可以自己在文件中添加上去即可。

PHP Excel大批量導(dǎo)入崩潰怎么辦？

項(xiàng)目需要批量導(dǎo)入excel文件，如果里面有重復(fù)的數(shù)據(jù)要怎么處理呢？每插入一次數(shù)據(jù)都要到數(shù)據(jù)庫(kù)查詢么？

回復(fù)內(nèi)容：

項(xiàng)目需要批量導(dǎo)入excel文件，如果里面有重復(fù)的數(shù)據(jù)要怎么處理呢？每插入一次數(shù)據(jù)都要到數(shù)據(jù)庫(kù)查詢么？

1、如果里面有重復(fù)的數(shù)據(jù)要怎么處理呢？

1

code可以先判斷數(shù)據(jù)庫(kù)是否有該數(shù)據(jù)。/code

2、每插入一次數(shù)據(jù)都要到數(shù)據(jù)庫(kù)查詢么

1

code是的。/code

先去重得到?jīng)]有重復(fù)的數(shù)據(jù)，再批量插入數(shù)據(jù)庫(kù)。也可以嘗試MYSQL中的insert ignore into或 replace into

如果查詢比較慢，對(duì)不能重復(fù)的字段加唯一鍵，然后用INSERT IGNORE INTO

php批量導(dǎo)入數(shù)據(jù)出錯(cuò)

我現(xiàn)在要做的是，把一個(gè)產(chǎn)品數(shù)據(jù)從EXCEL中導(dǎo)入到PHP的MYSQL中，導(dǎo)入的過(guò)程中，總是會(huì)提示“Allowed memory size of 167772160 bytes exhausted (tried to allocate 689919 bytes) in D:\wamp\www\Company\product\admin\uploadOrder.php on line 167”這個(gè)錯(cuò)誤，然后我分成第100條導(dǎo)入時(shí)，就不會(huì)提示這個(gè)錯(cuò)誤，這個(gè)是不是內(nèi)存溢出，有沒(méi)有好的解決方法呢？

------解決方案--------------------

php.ini中講memory_limit選項(xiàng)設(shè)置大一點(diǎn)，然后重啟apache或nginx就行了

------解決方案--------------------

文件太大了，這樣的話可以用source命令直接導(dǎo)入！

------解決方案--------------------

php怎么把數(shù)據(jù)導(dǎo)入數(shù)據(jù)庫(kù)

需要PHP基礎(chǔ)知識(shí)和數(shù)據(jù)庫(kù)基礎(chǔ)知識(shí)。

以SQL為例。使用PHP MySQL 函數(shù)可以編輯數(shù)據(jù)庫(kù)。

mysql_connect() 函數(shù)打開MySQL 連接。舉例

?php

$con = mysql_connect("localhost","mysql_user","mysql_pwd");

if (!$con)

{

die('Could not connect: ' . mysql_error());

}// 一些代碼...mysql_close($con);

?

mysql_connect()三個(gè)參數(shù)分別是服務(wù)器名，連接賬號(hào)，連接密碼。

連接之后，可以使用mysql_select_db()設(shè)置要處理的數(shù)據(jù)庫(kù)，后面則是用數(shù)據(jù)庫(kù)語(yǔ)句處理數(shù)據(jù)。SQL語(yǔ)法簡(jiǎn)介網(wǎng)頁(yè)鏈接

文章標(biāo)題：php大數(shù)據(jù)量導(dǎo)入 php excel 導(dǎo)出大數(shù)據(jù)
URL分享：http://chinadenli.net/article42/hpedec.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供建站公司、軟件開發(fā)、Google、網(wǎng)站策劃、全網(wǎng)營(yíng)銷推廣、品牌網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)