transwarp環境下Hive創建表并通過Sqoop導入數據

這篇文章主要講解了“transwarp環境下Hive創建表并通過Sqoop導入數據”，文中的講解內容簡單清晰，易于學習與理解，下面請大家跟著小編的思路慢慢深入，一起來研究和學習“transwarp環境下Hive創建表并通過Sqoop導入數據”吧！

//第一步 先把oracle中的數據導入到hdfs下面 執行導入命令之前 需要創建日志文件目錄 /root/nantong_out/以及hdfs導入文件目錄/jssdatas/nantong/ 其中/e_mp_cur_curve 目錄會在導入語句中自動創建，不需要單獨創建。
nohup sqoop import --connect jdbc:oracle:thin:@192.168.2.155:1521:orcl --username nantong --password nantong123 --fetch-size 1000 -m 1 --target-dir /jssdatas/nantong/e_mp_cur_curve/ --query "select * from e_mp_cur_curve where \$CONDITIONS" --fields-terminated-by '\001' &>/root/nantong_out/e_mp_cur_curve.out &

//第二步 創建表 并把表和數據文件關聯 use databasename 用哪個數據庫就會在哪個數據庫下面建表 建表時會指定對應的數據文件，這樣數據就可以關聯起來了 
create external table e_mp_cur_curve ( id string,data_date string,phase_flag int,data_whole_flag string,data_point_flag int,i1 double,i2 double,i3 double,i4 double,i5 double,i6 double,i7 double,i8 double,i9 double,i10 double,i11 double,i12 double,i13 double,i14 double,i15 double,i16 double,i17 double,i18 double,i19 double,i20 double,i21 double,i22 double,i23 double,i24 double,i25 double,i26 double,i27 double,i28 double,i29 double,i30 double,i31 double,i32 double,i33 double,i34 double,i35 double,i36 double,i37 double,i38 double,i39 double,i40 double,i41 double,i42 double,i43 double,i44 double,i45 double,i46 double,i47 double,i48 double,i49 double,i50 double,i51 double,i52 double,i53 double,i54 double,i55 double,i56 double,i57 double,i58 double,i59 double,i60 double,i61 double,i62 double,i63 double,i64 double,i65 double,i66 double,i67 double,i68 double,i69 double,i70 double,i71 double,i72 double,i73 double,i74 double,i75 double,i76 double,i77 double,i78 double,i79 double,i80 double,i81 double,i82 double,i83 double,i84 double,i85 double,i86 double,i87 double,i88 double,i89 double,i90 double,i91 double,i92 double,i93 double,i94 double,i95 double,i96 double ) row format delimited fields terminated by '\001' lines terminated by '\n' location '/jssdatas/nantong/e_mp_cur_curve';

//創建文件目錄命令（普通文件目錄命令沒權限的情況下，按照以下來執行）
sudo -u hdfs hdfs dfs -mkdir /jssdatas/nantong/e_mp_cur_curve  //創建
sudo -u hdfs hdfs dfs -chmod /jssdatas/nantong/e_mp_cur_curve //賦權限
sudo -u hdfs hdfs dfs -ls /jssdatas/nantong/e_mp_cur_curve //查看
sudo -u hdfs hdfs dfs -rm -R /jssdatas/nantong/e_mp_cur_curve  //刪除
sudo -u hdfs hdfs dfs -chown hive:hadoop /jssdatas/nantong/e_mp_cur_curve //給某用戶賦權限

//普通文件目錄命令
hdfs dfs -mkdir /jssdatas/nantong/e_mp_cur_curve  //創建
hdfs dfs -chmod /jssdatas/nantong/e_mp_cur_curve //賦權限
hdfs dfs -ls /jssdatas/nantong/e_mp_cur_curve //查看
hdfs dfs -rm -R /jssdatas/nantong/e_mp_cur_curve  //刪除
 

感謝各位的閱讀，以上就是“transwarp環境下Hive創建表并通過Sqoop導入數據”的內容了，經過本文的學習后，相信大家對transwarp環境下Hive創建表并通過Sqoop導入數據這一問題有了更深刻的體會，具體使用情況還需要大家實踐驗證。這里是億速云，小編將為大家推送更多相關知識點的文章，歡迎關注！