本篇內(nèi)容介紹了“怎么用C++實(shí)現(xiàn)數(shù)據(jù)庫刪除大表”的有關(guān)知識,在實(shí)際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!
東河網(wǎng)站制作公司哪家好,找成都創(chuàng)新互聯(lián)公司!從網(wǎng)頁設(shè)計、網(wǎng)站建設(shè)、微信開發(fā)、APP開發(fā)、響應(yīng)式網(wǎng)站建設(shè)等網(wǎng)站項目制作,到程序開發(fā),運(yùn)營維護(hù)。成都創(chuàng)新互聯(lián)公司于2013年創(chuàng)立到現(xiàn)在10年的時間,我們擁有了豐富的建站經(jīng)驗和運(yùn)維經(jīng)驗,來保證我們的工作的順利進(jìn)行。專注于網(wǎng)站建設(shè)就選成都創(chuàng)新互聯(lián)公司。
背景:數(shù)據(jù)庫的IO壓力非常大,如果在線上刪除大表,對IO以及業(yè)務(wù)會造成很大的抖動;作為一名DBA的通用做法是,建立.frm 以及.ibd的硬連接,然后在drop table tablename;但是表文件依然存在于該機(jī)器上,如果直接用rm刪除,會造成IO的until達(dá)到100%
問題:那么如何解決刪除文件時,如果避免IO達(dá)到100%呢?
解決方案:通過ftruncate逐漸清除文件,下面本人提供自己寫的slowrm來刪除文件,測試io使用率10-20%之間,刪除速度1個小時100多G(這里只是一個粗略的版本,各位看官可以自己修改下)
#include
#include
#include
#include
#include
#include
//判讀輸入是否合法
int fileInputLegal(const char *pfile=nullptr);
int main(int argc,char *argv[]){
//利用stat獲取文件的大小
//調(diào)用open打開文件獲取文件描述符
//調(diào)用ftrucate縮減文件的大小,直到0為止
int fd = -1;
//這個參數(shù)經(jīng)過調(diào)整過的
int deleteBytes = 1024700;
//這個目的是獲取文件長度
struct stat buf;
off_t fileSize = 0;
if( argc !=2 ){
std::cout<<"你傳輸?shù)膮?shù)不正確"<
}
const char *filename=argv[1];
if(fileInputLegal(filename) < 0){
return -1;
}
if((fd = open(filename,O_RDWR)) < 0 ){
std::cout<<"打開文件"<
}
if(lstat(filename,&buf) <0){
std::cout<<"獲取文件信息(大小失敗)"<
fileSize = buf.st_size;
while(fileSize > deleteBytes ){
fileSize = fileSize - deleteBytes;
if(ftruncate(fd,fileSize) < 0){
std::cout<<"刪除文件出錯,請重新執(zhí)行"<
//這里特別要注意,設(shè)置的時間越短,ftruncate調(diào)用越頻繁,設(shè)置不當(dāng),適得其反
usleep(20000);
}
if(ftruncate(fd,0) < 0){
std::cout<<"刪除文件出錯,請重新執(zhí)行"<
}
close(fd);
unlink(filename);
return 0;
}
int fileInputLegal(const char *pfile){
if(nullptr==pfile){
return -1;
}
if(access(pfile,R_OK|W_OK)<0){
std::cout<<"對文件沒有讀寫權(quán)限"<
if(opendir(pfile) != NULL){
std::cout<<"是一個目錄"<
}
return 0;
}
編譯方法:
g++ -std=gnu++11 -o slowrm slow_rm.cpp
使用方法:
“怎么用C++實(shí)現(xiàn)數(shù)據(jù)庫刪除大表”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!