如何使用mysql存儲大文件

設n個線程同時工作, 把文件份成n份,從n份的起始位置開始讀,讀一部分保存一部分。地n+1個線程讀剩余的文件并保存。

成都創(chuàng)新互聯(lián)主要從事做網(wǎng)站、網(wǎng)站制作、網(wǎng)頁設計、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務。立足成都服務下城,十年網(wǎng)站建設經(jīng)驗,價格優(yōu)惠、服務專業(yè),歡迎來電咨詢建站服務:18982081108

大文件導入 MYSQL，如何最快速

一般的數(shù)據(jù)備份用 ：mysql路徑+bin/mysqldump -u 用戶名 -p 數(shù)據(jù)庫名 導出的文件名

數(shù)據(jù)還原是：到mysql命令行下面，用：source ? 文件名;的方法。

但是這種方法對大數(shù)據(jù)量的表進行操作就非常慢。因為他不僅導出了數(shù)據(jù)還導出了表結構。

在針對大數(shù)據(jù)量的表時，我們可以用infile和 outfile來操作。

outfile導出數(shù)據(jù)庫數(shù)據(jù)的用法：

下圖我們可以看到6百多萬數(shù)據(jù)35秒就搞定了：

下面我們看看infile的語法：

在infile導入數(shù)據(jù)的時候，我們還可以做一些優(yōu)化。我們可以用

alter table table_name disable keys ? 關閉普通索引。等數(shù)據(jù)導入玩，再用：

alter table table_name enable keys ? ?來開啟普通索引。這樣就不會邊導入數(shù)據(jù)，邊整理索引的二叉樹兒影響導數(shù)據(jù)的效率。

如果可以保證 數(shù)據(jù)的正確性，我們可以將表的唯一索引也關閉，之后再開啟,不是每條數(shù)據(jù)就算是唯一的他都要去檢測一遍。命令：

set unique_checks=0;?#關閉唯一校驗

set unique_checks=1;#開啟唯一校驗

如果是InnoDB存儲引擎，我們還可以set auto commit=0;關閉自動提交，來提高效率。InnoDB是按主鍵的順序保存的，我們將其主鍵順序排列也可以提高效率。

下面我們對myisam引擎的表做個測試，我們先不關索引，導入數(shù)據(jù)(用了近4分鐘)：

然后我們先把索引關閉試試(只用了一分鐘多一點，快了不少?。∶?！)：

怎么快速導入一個超大的mysql文件

1、首先已管理員身份（通過win+r）進入命令提示符

2、先進入MYSQL安裝目錄，以我的為例：d:/wamp/bin/mysql/mysql5.5.20/bin 進入該目錄的bin目錄下，該目錄下有個mysql.exe 文件

mysql 導入超大文件到數(shù)據(jù)庫 - queen - 安然

3、為了保證一次性通過，可以先測試一下數(shù)據(jù)庫的是否連接成功 mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼)；再測試一下訪問的數(shù)據(jù)庫是否能訪問 mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼) craft(這個就是數(shù)據(jù)庫的名稱)；我第二次導入時遇到一個問題，就是我測試數(shù)據(jù)庫連接成功后，直接又測試數(shù)據(jù)庫是否能夠訪問，出現(xiàn)錯誤

mysql 導入超大文件到數(shù)據(jù)庫 - queen - 安然

我檢查了一遍命令沒發(fā)現(xiàn)錯誤啊，沒辦法了，問我領導，人家三下五除二就搞定了，問了才知道，所有的命令都應該在

mysql 導入超大文件到數(shù)據(jù)庫 - queen - 安然

下執(zhí)行，包括測試數(shù)據(jù)庫是否連接成功，數(shù)據(jù)庫是否能訪問和最后的數(shù)據(jù)庫導入，我的錯誤就是在檢查了數(shù)據(jù)庫是否連接成功后就進入mysql里，沒有退出來。好吧，又記了一遍。

4、如果上面的操作沒有問題，下一步就進行數(shù)據(jù)導入操作

mysql -u root -p (數(shù)據(jù)庫有密碼的寫上密碼) craft d:/craft.sql

導入過程可能會由于其他原因?qū)е洛e誤，我遇到的是在導入過程中可能由于編碼的原因出現(xiàn)錯誤，所以，可以再加上點內(nèi)容 mysql -u root -p --default-character-set=utf8 craft d:/craft.sql，敲回車后，出現(xiàn)輸入密碼提示，如果數(shù)據(jù)庫設置密碼，就可以輸入密碼后再打回車，直到導入操作完成

mysql 導入超大文件到數(shù)據(jù)庫 - queen - 安然

注意：這樣就完成了導入，不過中間還可能出現(xiàn)的問題就是要導入文件的權限問題，要保證你所登錄的身份有對文件的寫操作，所以為了防止萬一，我們可以將文件的所有權限都打開：選中文件，點右鍵，選擇屬性，選“安全”選項卡，選中你登錄的角色，點“編輯”，選中“允許”下面的“完全控制”，點擊確定。

mysql 怎么樣貯存大文件

你要是做程序的話，應該把圖片存在設置的文件夾中，數(shù)據(jù)庫只存圖片的路徑。

如果想存文件建議用oracle。mysql對存儲文件相對效率不高。

高手來~~c# MySql 存儲大文件

如果分塊的話那我覺得要建立一個表，專門存放這些分塊，表的結構為

id 文件的ID號

subVolumeID 文件的分卷號，即：如果該文件有兩個分塊那么就有1、2兩條記錄

data 文件的對應分卷號的數(shù)據(jù)。

在保存文件的時候，先判斷需要分多少塊，然后以每塊一條記錄的插入上面所講的表結構中。

同樣，要取的時候就查詢此表，然后按照分卷號順序把文件組合回來即可。

以上就是思路，代碼的話可以根據(jù)你上面提供的改一下就可以了，不過要注意的是插入記錄時要啟動事務，避免插入不完整的文件數(shù)據(jù)。