目录
注：只是为了以后忘了，好翻。。。。。。。做个总结
一) hive 操作
1) hive -e
hive -e “sql” 不需要进入交互窗口
2) hive -f
hive -f? hive.sql 执行hql的文件
hive -f? hive.sql? > path/result.txt
3) 查看在hive中输入的所有历史命令
[root@henghe-052 bin]# cd /root
[root@henghe-052 ~]# cat .hivehistory
4) hive运行日志修改
hive的log默认放在 /tmp/用户
[root@henghe-052 ~]# cd /tmp/root/
修改地址[root@henghe-052 conf]# mv hive-log4j2.properties.template ?hive-log4j2.properties
[root@henghe-052 conf]# vim hive-log4j2.properties
二) hive参数配置
1）配置文件
在hive-site.xml和hive-default.xml中配置
2）命令行方式
[root@henghe-052 apache-hive-3.1.2-bin]# ?bin/hive -hiveconf mapred.reduce.tasks=10;
3）参数声明方式
hive> set mapred.reduce.tasks=100;
参数声明>命令行>配置文件
三) hive数据类型
基本数据类型
集合数据类型
1）复杂类型解释
数组："name":["bb","cc"]-> namearry<string>
集合:? "aa":{"bb":1,"cc":2}-> aa map<string,int>
struct: "address":{"street":"wangjing","city":"beijing"}-> address struct<street:string,city:string>
2）建表语句：
create table test(
name string,
friends array<string>,
children map<string, int>,
address struct<street:string, city:string> )
row format delimited fields terminated by ','
collection items terminated by '_'
map keys terminated by ':'
lines terminated by '\n';字段解释：row format delimited fields terminated by ',' -- 列分隔符collection items terminated by '_' --MAP STRUCT 和 ARRAY 的分隔符 ( 数据分割符号 )map keys terminated by ':' -- MAP 中的 key 与 value 的分隔符lines terminated by '\n'; -- 行分隔符
3)? 造数据 ：text.txt
cy,tt_susu,yuanyuan:didi,chao yang_beijing
4）load数据
load data local inpath '/data/test.txt' into table test;
5)? 访问方式
hive> select friends[1],children['xiao song'],address.city from test
hive类型转换
1 ）隐式类型转换规则如下（ 1 ）任何整数类型都可以隐式地转换为一个范围更广的类型，如 TINYINT 可以转换成INT ， INT 可以转换成 BIGINT 。（ 2 ）所有整数类型、 FLOAT 和 STRING 类型 都可以隐式地转换成 DOUBLE 。（ 3 ） TINYINT 、 SMALLINT 、 INT 都可以转换为 FLOAT 。（ 4 ） BOOLEAN 类型不可以转换为任何其它的类型。2 ）可以使用 CAST 操作显示进行数据类型转换例如 CAST('1' AS INT) 将把字符串 '1' 转换成整数 1 ；如果强制类型转换失败，如执行CAST('X' AS INT) ，表达式返回空值 NULL 。
四) DDL操作
库操作
1) 创建数据库
CREATE DATABASE [IF NOT EXISTS] database_name[COMMENT database_comment][LOCATION hdfs_path][WITH DBPROPERTIES (property_name=property_value, ...)];
location:指定在hdfs位置
create database if not exists db_hive2 location '/db_hive2.db';
2）修改数据库
alter database db_hive2 set dbproperties('createtime'='20210730');
3) 删除数据库
hive>drop if not exists? database db_hive2;
如果数据库不为空，加上cascade命令，强制删除
hive> drop database db_hive cascade;
表操作
建表语句
CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)][CLUSTERED BY (col_name, col_name, ...)[SORTED BY (col_name [ASC|DESC], ...)] INTO num_buckets BUCKETS][ROW FORMAT row_format][STORED AS file_format][LOCATION hdfs_path][TBLPROPERTIES (property_name=property_value, ...)][AS select_statement]
字段解释：
EXTERNAL： 外部表
COMMENT ：注释
PARTITIONED BY： 分区表
CLUSTERED BY：分桶表
SORTED BY：对桶中的一个或多个列另外排序
ROW FORMAT:
LIKE: 复制表结构，但是不复制数据
栗子
1.创建普通表
create table if not exists student(id int, name string)row format delimited fields terminated by '\t'stored as textfilelocation '/user/hive/warehouse/student';
2.根据查询结果创建表
create table if not exists student2 as select id, name from student;
3.根据已经存在的表结构创建表
create table if not exists student3 like student;
外部表
create external table if not exists dept(deptno int,dname string,loc int)row format delimited fields terminated by '\t';
?
hive> alter table student set tblproperties('EXTERNAL'='TRUE');
?
