如何使用mysql存儲大文件

設(shè)n個線程同時工作, 把文件份成n份,從n份的起始位置開始讀,讀一部分保存一部分。地n+1個線程讀剩余的文件并保存。

成都創(chuàng)新互聯(lián)主要從事做網(wǎng)站、網(wǎng)站制作、網(wǎng)頁設(shè)計、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)下城,十年網(wǎng)站建設(shè)經(jīng)驗,價格優(yōu)惠、服務(wù)專業(yè),歡迎來電咨詢建站服務(wù):18982081108

大文件導(dǎo)入 MYSQL，如何最快速

一般的數(shù)據(jù)備份用 ：mysql路徑+bin/mysqldump -u 用戶名 -p 數(shù)據(jù)庫名 導(dǎo)出的文件名

數(shù)據(jù)還原是：到mysql命令行下面，用：source ? 文件名;的方法。

但是這種方法對大數(shù)據(jù)量的表進行操作就非常慢。因為他不僅導(dǎo)出了數(shù)據(jù)還導(dǎo)出了表結(jié)構(gòu)。

在針對大數(shù)據(jù)量的表時，我們可以用infile和 outfile來操作。

outfile導(dǎo)出數(shù)據(jù)庫數(shù)據(jù)的用法：

下圖我們可以看到6百多萬數(shù)據(jù)35秒就搞定了：

下面我們看看infile的語法：

在infile導(dǎo)入數(shù)據(jù)的時候，我們還可以做一些優(yōu)化。我們可以用

alter table table_name disable keys ? 關(guān)閉普通索引。等數(shù)據(jù)導(dǎo)入玩，再用：

alter table table_name enable keys ? ?來開啟普通索引。這樣就不會邊導(dǎo)入數(shù)據(jù)，邊整理索引的二叉樹兒影響導(dǎo)數(shù)據(jù)的效率。

如果可以保證 數(shù)據(jù)的正確性，我們可以將表的唯一索引也關(guān)閉，之后再開啟,不是每條數(shù)據(jù)就算是唯一的他都要去檢測一遍。命令：

set unique_checks=0;?#關(guān)閉唯一校驗

set unique_checks=1;#開啟唯一校驗

如果是InnoDB存儲引擎，我們還可以set auto commit=0;關(guān)閉自動提交，來提高效率。InnoDB是按主鍵的順序保存的，我們將其主鍵順序排列也可以提高效率。

下面我們對myisam引擎的表做個測試，我們先不關(guān)索引，導(dǎo)入數(shù)據(jù)(用了近4分鐘)：

然后我們先把索引關(guān)閉試試(只用了一分鐘多一點，快了不少啊！摸摸大！)：

怎么快速導(dǎo)入一個超大的mysql文件

1、首先已管理員身份（通過win+r）進入命令提示符

2、先進入MYSQL安裝目錄，以我的為例：d:/wamp/bin/mysql/mysql5.5.20/bin 進入該目錄的bin目錄下，該目錄下有個mysql.exe 文件

mysql 導(dǎo)入超大文件到數(shù)據(jù)庫 - queen - 安然

3、為了保證一次性通過，可以先測試一下數(shù)據(jù)庫的是否連接成功 mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼)；再測試一下訪問的數(shù)據(jù)庫是否能訪問 mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼) craft(這個就是數(shù)據(jù)庫的名稱)；我第二次導(dǎo)入時遇到一個問題，就是我測試數(shù)據(jù)庫連接成功后，直接又測試數(shù)據(jù)庫是否能夠訪問，出現(xiàn)錯誤

mysql 導(dǎo)入超大文件到數(shù)據(jù)庫 - queen - 安然

我檢查了一遍命令沒發(fā)現(xiàn)錯誤啊，沒辦法了，問我領(lǐng)導(dǎo)，人家三下五除二就搞定了，問了才知道，所有的命令都應(yīng)該在

mysql 導(dǎo)入超大文件到數(shù)據(jù)庫 - queen - 安然

下執(zhí)行，包括測試數(shù)據(jù)庫是否連接成功，數(shù)據(jù)庫是否能訪問和最后的數(shù)據(jù)庫導(dǎo)入，我的錯誤就是在檢查了數(shù)據(jù)庫是否連接成功后就進入mysql里，沒有退出來。好吧，又記了一遍。

4、如果上面的操作沒有問題，下一步就進行數(shù)據(jù)導(dǎo)入操作

mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼) craft d:/craft.sql

導(dǎo)入過程可能會由于其他原因?qū)е洛e誤，我遇到的是在導(dǎo)入過程中可能由于編碼的原因出現(xiàn)錯誤，所以，可以再加上點內(nèi)容 mysql -u root -p --default-character-set=utf8 craft d:/craft.sql，敲回車后，出現(xiàn)輸入密碼提示，如果數(shù)據(jù)庫設(shè)置密碼，就可以輸入密碼后再打回車，直到導(dǎo)入操作完成

mysql 導(dǎo)入超大文件到數(shù)據(jù)庫 - queen - 安然

注意：這樣就完成了導(dǎo)入，不過中間還可能出現(xiàn)的問題就是要導(dǎo)入文件的權(quán)限問題，要保證你所登錄的身份有對文件的寫操作，所以為了防止萬一，我們可以將文件的所有權(quán)限都打開：選中文件，點右鍵，選擇屬性，選“安全”選項卡，選中你登錄的角色，點“編輯”，選中“允許”下面的“完全控制”，點擊確定。

mysql 怎么樣貯存大文件

你要是做程序的話，應(yīng)該把圖片存在設(shè)置的文件夾中，數(shù)據(jù)庫只存圖片的路徑。

如果想存文件建議用oracle。mysql對存儲文件相對效率不高。

高手來~~c# MySql 存儲大文件

如果分塊的話那我覺得要建立一個表，專門存放這些分塊，表的結(jié)構(gòu)為

id 文件的ID號

subVolumeID 文件的分卷號，即：如果該文件有兩個分塊那么就有1、2兩條記錄

data 文件的對應(yīng)分卷號的數(shù)據(jù)。

在保存文件的時候，先判斷需要分多少塊，然后以每塊一條記錄的插入上面所講的表結(jié)構(gòu)中。

同樣，要取的時候就查詢此表，然后按照分卷號順序把文件組合回來即可。

以上就是思路，代碼的話可以根據(jù)你上面提供的改一下就可以了，不過要注意的是插入記錄時要啟動事務(wù)，避免插入不完整的文件數(shù)據(jù)。

本文標題：mysql怎么存大文件 mysql導(dǎo)入文件太大
文章路徑：http://chinadenli.net/article2/hpecic.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供營銷型網(wǎng)站建設(shè)、網(wǎng)站策劃、標簽優(yōu)化、商城網(wǎng)站、品牌網(wǎng)站建設(shè)、App開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)