快捷導(dǎo)航

Hive數(shù)據(jù)導(dǎo)出詳解

更新時(shí)間：2023年04月14日 14:05:04 作者：滄州精神衛(wèi)生中心張醫(yī)師

hive是一個(gè)依賴Hadoop集群的數(shù)據(jù)處理平臺(tái)，我們不僅需要對(duì)數(shù)據(jù)進(jìn)行篩選處理，更需要進(jìn)行導(dǎo)出，供我們多次重復(fù)使用，本文主要介紹了hive如何導(dǎo)出數(shù)據(jù)，感興趣的小伙伴歡迎閱讀

一、數(shù)據(jù)導(dǎo)出是什么？

hive是一個(gè)依賴Hadoop集群的數(shù)據(jù)處理平臺(tái)，我們不僅需要對(duì)數(shù)據(jù)進(jìn)行篩選處理，更需要進(jìn)行導(dǎo)出，供我們多次重復(fù)使用。

二、六大幫派

1.insert

insert有兩種形式，加local上傳到本地路徑，不加local上傳到集群

代碼如下（示例）：

insert加local

insert overwrite local directory '/root/export/data/student' select * from student;

insert不加local（并將數(shù)據(jù)格式化）
insert overwrite directory '/student' row format delimited fields terminated by ',' select * from student;

2.Hadoop命令導(dǎo)出到本地

代碼如下（示例）：

hadoop dfs -get /user/hive/warehouse/hive.db/student/student.txt /root/export/data/student/

3.Hive shell命令導(dǎo)出

一個(gè) > 是覆蓋，兩個(gè)>是追加

代碼如下（示例）：

bin/hive -e 'select * from hive.student' >> /root/export/data/student/student.txt

4.export導(dǎo)出到HDFS上

當(dāng)該hdfs路徑下有文件時(shí)或表存在，都不可導(dǎo)，與import連用。

代碼如下（示例）：

export table hive.student to '/user/hive/warehouse/hive.db/student';

5.Sqoop導(dǎo)出

將數(shù)據(jù)導(dǎo)出到window系統(tǒng)的mysql，并進(jìn)行可視化操作

6.清除表中的數(shù)據(jù)（Truncate）——刪庫(kù)跑路

Truncate只能刪除管理表，不能刪除外部表的數(shù)據(jù)(但可以將外部表轉(zhuǎn)為內(nèi)部表哦，嘿嘿嘿）只是刪除內(nèi)部表的hdfs數(shù)據(jù)，元數(shù)據(jù)還在

內(nèi)部轉(zhuǎn)為外部表
alter table student set tblproperties('EXTERNAL'='TRUE')一定大寫

截?cái)啾?
Truncate table student；

總結(jié)

六大派別與五大幫派共同統(tǒng)治著數(shù)碼武林，俠義精神深入人心，hive語(yǔ)句婦孺皆知。街頭小巷上談?wù)撝麄兊挠⑿凼论E，再一次掀起了學(xué)習(xí)hive秘籍的狂潮?；蛟S現(xiàn)在人們學(xué)習(xí)的已經(jīng)不再是傍身之計(jì)，更多的是對(duì)天下武功，為快不滅的熱愛(ài)。有人的地方就會(huì)就有江湖，大數(shù)據(jù)時(shí)代亦是如此。

到此這篇關(guān)于Hive數(shù)據(jù)導(dǎo)出詳解的文章就介紹到這了,更多相關(guān)Hive數(shù)據(jù)導(dǎo)出內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: