91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

記一次從oracle到hive的歷史數據遷移(一)

發布時間:2020-07-19 22:09:23 來源:網絡 閱讀:8444 作者:綠箭俠1 欄目:關系型數據庫

介紹一下具體場景

    需要從現有在用的oracle中將歷史數據遷移出來并導入到hive中,存在幾個問題:1、現有oracle數據庫在使用無法整個庫導出,數據庫服務器沒有權限;2、由于各個數據提供方的各次升級,oracle數據庫采取添加字段而不刪除字段的方式更新,而hive中建立的表數據結構要按新的來,也就是說oracle導出的數據到hive表中需要做字段對應。

    決定先將oracle導入到另一個oracle中,將oracle中表字段和hive中的表字段進行比對得到各個的對應關系,之后寫對應的sqoop語句對應利用ETL流程安裝賬期一天一天導入。 

    從一個oracle到另一個oracle導入的方案,利用大神寫出的sqluldr2 工具用來導出數據,導入利用

sqlldr 命令導入到另一個庫表中。

   導出的具體命令

sqluldr2.bin user=root/pwd@tnsname query="select /*+ parallel(8) */ * from table   " head=no File=/data/oracle/tmp/file 導出到本地目錄

  導入的具體命令

sqlldr root/pwd@@ip:1521/tnsname control=/data/oracle/shell/xxx.ctl 

data=/data/oracle/tmp/file

log=/data/oracle/log/file.log errors=0 rows=100000 bindsize=1024000000 direct=y;

xxx.ctl 是用來指定導入表的字段和分割符如下寫法

load data

truncate into table  tablename

Fields terminated by ',' #文件的列分隔符

TRAILING NULLCOLS

IP char(255), 

APPKEY char(255), 

PLATFORM char(255), 

PORTAL char(255), 

COMPANYID char(255) )


向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

新巴尔虎右旗| 五大连池市| 逊克县| 卓资县| 比如县| 商水县| 手游| 孟州市| 富川| 鄄城县| 陇川县| 斗六市| 茌平县| 九龙坡区| 葫芦岛市| 舒城县| 平度市| 深圳市| 秭归县| 忻城县| 定安县| 乌什县| 香格里拉县| 青河县| 阆中市| 宜黄县| 公主岭市| 清水河县| 兴安盟| 铜梁县| 临海市| 阿坝| 广东省| 赣州市| 武清区| 四子王旗| 平安县| 菏泽市| 志丹县| 乐亭县| 象州县|