hive向表中加载数据的Load和Insert

  • Post author:
  • Post category:其他




hive向表中加载数据的Load

  • load语法

hive> load data [local] inpath ‘/opt/module/datas/student.txt’ [overwrite] | into table tabName [partition (partcol1=val1,…)];

(1)load data:表示加载数据

(2)local:表示从本地加载数据到 hive 表;否则从 HDFS 加载数据到 hive 表

(3)inpath:表示加载数据的路径

(4)overwrite:表示覆盖表中已有数据,否则表示追加

(5)into table:表示加载到哪张表

(6)tabName:表示具体的表

(7)partition:表示上传到指定分区

创建表

hive (default)> create table student(id string, name string) row 
format delimited fields terminated by '\t';

加载本地文件到 hive

hive (default)> load data local inpath 
'/root/data/student.txt' into table default.student;

加载 HDFS 文件到 hive 中上传文件到 HDFS

hive (default)> dfs -put /root/data/student.txt /hive;

加载 HDFS 上数据

hive (default)> load data inpath 
'/hive/student.txt' into table default.student;

加载数据覆盖表中已有的数据,上传文件到 HDFS

hive (default)> dfs -put /root/data/student.txt /hive;

加载数据覆盖表中已有的数据

  • 注意这是

    overwrite into
hive (default)> load data inpath 
'/hive/student.txt' overwrite into table 
default.student;

load加载数据的时候会自动生成hive表里的元数据



Insert 向表中插入数据

创建一张分区表

hive (default)> create table student(id int, name string) 
partitioned by (month string) row format delimited fields 
terminated by '\t';

基本插入数据

hive (default)> insert into table student 
partition(month='20201022') values(1,'zhangsan');

基本模式插入(根据单张表查询结果)

hive (default)> insert overwrite table student 
partition(month='20201023')
 select id, name from student where month='20201023';

insert 插入数据适合把hive表里的查询结果放入到别的表中然后再处理。



版权声明:本文为m0_49092046原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。