重庆分公司,新征程启航
为企业提供网站建设、域名注册、服务器等服务
1、创建数据库并赋权
create database if not exists test001;
grant all on database test001 to user hive;
2、模糊搜索表
show tables like '*name*';
3、查看表结构
desc table_name;
desc formatted table_name;
4、查看建表语句
show create table table_name;
5、创建表
create table test001
(card_type string
,start_data string
,end_date string
)
PARTITIONED BY(dt STRING) --分区
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ',' --分隔符
STORED AS TEXTFILE;
6、删除/清理分区
ALTER TABLE test001 DROP/truncate IF EXISTS PARTITION (dt='2017-01-08');
7、添加列
ALTER TABLE test001 ADD COLUMNS (col_name STRING);
8、修改列
ALTER TABLE test001 CHANGE col1 col2 INT;
9、删除列
ALTER TABLE test001 REPLACE COLUMNS (
card_type string
,start_data string
);
10、复制表结构
CREATE TABLE test002 LIKE test001;
11、修改表结构
ALTER TABLE test001 RENAME TO test002;
12、清空数据
truncate table test001;
13、数据插入
insert/overwrite into table test001
select c1,c2 from test002;
load data local inpath 'test001.txt' into/overwrite table test001;
14、数据提取
hive -database bss -e "set mapred.job.queue.name=datagather;
select * from ts_u_user_all limit 10 " >/data/test/test001.csv
带字段名字的数据导出:
hive -S -e"set hive.cli.print.header=true;
select * from test001" > test001.csv
hive -database bss -e"select * from ts_u_user_all limit 10"
15、转换文件的分隔符
sed -i 's/\t/,/g' test001.csv
16、函数引入
add jar /home/webusr/UDFAddByMe.jar ;
create temporary function ADD_MONTHS as 'org.apache.hadoop.hive.ql.udf.UDFAddMonths';
17、指定队列
set mapred.job.queue.name=datagather;
set mapred.job.queue.name=thirdpart;
18、工作查杀
进入目录/home/webusr/hadoop-2.4.0.2.1.2.0-402/bin
hadoop job -list
hadoop job -kill job_1436177979246_7826
----------------------
19、查询文件大小
hdfs dfs -du -h /apps/hive/warehouse/dwd.db/dd_par_user_flag_jf_d
20、查看hdfs文件信息
hdfs dfs -ls /apps/hive/warehouse/
21、下载文件到某目录
hdfs dfs -get /user/jrjt/warehouse/ods.db/o_h02_click_log_i_new/dt=2014-01-21/000212_0 /data/test/work/;
另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。