国产又粗又猛又大的视频在线播放_精品国产一区二区日韩91_日韩成人成色在线观看_日韩毛片一二三区_打扑克牌又疼又叫软件下载_欧美激情综合色综合啪啪五月_国产精品激情自拍系列_麻豆国产在线视频_fc2成人免费人成在线观看播放_那里可以免费看毛片

跳轉(zhuǎn)到主要內(nèi)容

Hive數(shù)據(jù)跨HDFS集群遷移

故障描述

  客戶存算分離,將Hive數(shù)據(jù)從本地HDFS遷移到EMC A300 HDFS存儲(chǔ)。

故障分析

  無(wú)

處理過(guò)程

1、前期預(yù)遷移hdfs文件:hadoop distcp -pugpt -update -skipcrccheck  -m 24 /user/hive hdfs://A300.corem.local:8020/user/hive

2、停止hive服務(wù),增量遷移hadoop distcp -pugpt -update -skipcrccheck  -m 24 /user/hive hdfs://A300.corem.local:8020/user/hive

3、Mysql導(dǎo)出元數(shù)據(jù)表:mysqldump -hlocalhost -uhive -p --databases hive > hive_bk.sql

4、替換hive_bk.sql文件中間的路徑關(guān)鍵字:sed -i 's/master-1/A300.corem.local/g' hive_bk.sql

5、在Mysql里成導(dǎo)入hive_bk.sql:

mysql -hlocalhost -uhive –p

mysql> source hive_bk.sql

6、啟動(dòng)hive服務(wù),檢查狀態(tài),通過(guò)show database,select等檢查表狀態(tài)。

 

建議/總結(jié)

  1.HDFS文件部分,需多次同步更新,最終停止業(yè)務(wù)后再同步一次即可。

        2.元數(shù)據(jù)表里保存了表的保存路徑。需替換相應(yīng)數(shù)據(jù)。確保更新后路徑一致。