gz本地解壓後put到hadoop:數據分析88篇

gz本地解壓後put到hadoop

1)從hdfs上下載壓縮文件

hadoop fs -get/user/test/ filenamr.gz ./

2)解壓文件

gzip -d filenamr.gz

gz本地解壓後put到hadoop:數據分析88篇

3)要上傳的目錄

hadoop fs -mkdir/user/test/testlog3

hadoop fs -ls/user/test/testlog3

4)解壓後的文件到hdfs上

hadoop fs -put./ filename /user/test/testlog3/

5)加載到hive表中

drop table tmp_unzip;

CREATE EXTERNAL TABLE tmp_unzip( all string )

location '/user/test/testlog3/'

insert overwrite table test_orc

select *

from tmp_unzip


分享到:


相關文章: