本篇文章為大家展示了MySQL NDB如何進行批量更新100萬行數(shù)據(jù),內容簡明扼要并且容易理解,絕對能使你眼前一亮,通過這篇文章的詳細介紹希望你能有所收獲。
為畢節(jié)等地區(qū)用戶提供了全套網頁設計制作服務,及畢節(jié)網站建設行業(yè)解決方案。主營業(yè)務為網站設計制作、網站設計、畢節(jié)網站設計,以傳統(tǒng)方式定制建設網站,并提供域名空間備案等一條龍服務,秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務。我們深信只要達到每一位用戶的要求,就會得到認可,從而選擇與我們長期合作。這樣,我們也可以走得更遠!
生產NDB數(shù)據(jù)庫中的一張800多萬行的大表需要更新部分字段,為減少對數(shù)據(jù)庫性能的影響,編寫了一個存儲過程來實現(xiàn):
1. 導出這張表的主鍵字段,數(shù)據(jù)量有100多萬條
select MSISDN from TEST where LastAccessTimeStamp=0
into outfile '/tmp/TEST_out.txt' fields terminated by ',' ;
2. 在其中一個SQL節(jié)點,創(chuàng)建兩張臨時表
--創(chuàng)建第一張臨時表,用于和生產數(shù)據(jù)庫的源表主鍵進行關聯(lián),以更新部分字段
create table tmp_Subscribers_01(id int not null auto_increment primary key,MSISDN char(20)) engine=innodb;
--向第一張臨時表導入之前的導出數(shù)據(jù)
load data infile '/tmp/Subscribers_out.txt' into table tmp_Subscribers_01 fields terminated by ',' (MSISDN);
--創(chuàng)建第二張臨時表,用于記錄數(shù)據(jù)更新的進度
create table tmp_Subscribers_02(id int, MSISDN char(20),cdate datetime) engine=innodb;
3. 編寫數(shù)據(jù)更新的存儲過程
drop procedure proc_Subscribers_update;
delimiter $$
create procedure proc_Subscribers_update(IN v_fetch_cnt INT, IN v_sleep_secs INT)
begin
DECLARE v_count INT;
DECLARE v_times INT DEFAULT 1;
DECLARE v_max_value INT;
/*compute the times that the loop runs*/
select ceil(count(MSISDN)/v_fetch_cnt) into v_count from tmp_Subscribers_01;
/*compute the maximum rows that have been already updated*/
WHILE v_times < v_count DO
select ifnull(max(id),0) into v_max_value from tmp_Subscribers_02;
if v_max_value < v_fetch_cnt * v_count then
SET v_times = 1 + floor(v_max_value/v_fetch_cnt);
update TEST s,tmp_Subscribers_01 t set s.LastAccessTimeStamp=1420066800
where s.MSISDN=t.MSISDN and t.id > v_max_value and t.id <= v_fetch_cnt * v_times;
/*record the processing rows*/
insert into tmp_Subscribers_02 select id, MSISDN, now() from tmp_Subscribers_01 where id = v_fetch_cnt * v_times;
select concat('The job',' has already updated ', v_fetch_cnt * v_times, ' rows..') as Info;
select sleep(v_sleep_secs);
end if;
commit;
END WHILE;
select concat('The job',' is ','finished!') as Info;
commit;
end$$
delimiter ;
--執(zhí)行存儲過程
--其中第一個傳入?yún)?shù)為每次更新的行數(shù),第二個參數(shù)為每次更新后的休眠時間
call proc_Subscribers_update(10000, 2);
上述內容就是MySQL NDB如何進行批量更新100萬行數(shù)據(jù),你們學到知識或技能了嗎?如果還想學到更多技能或者豐富自己的知識儲備,歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道。
名稱欄目:MySQLNDB如何進行批量更新100萬行數(shù)據(jù)
轉載源于:http://chinadenli.net/article4/joiioe.html
成都網站建設公司_創(chuàng)新互聯(lián),為您提供靜態(tài)網站、動態(tài)網站、關鍵詞優(yōu)化、網站改版、網站設計公司、品牌網站設計
聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)