1.上传tar包
2.解压
tar -zxvf hive-1.2.1.tar.gz
3.装置mysql数据库
举荐yum 在线装置(运行脚本装置)
4.配置hive
(a)配置HIVE_HOME环境变量
vi conf/hive-env.sh
配置其中的$hadoop_home
(b)配置元数据库信息
vi hive-site.xml
增加如下内容:
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
<description>JDBC connect string for a JDBC metastore</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>Driver class name for a JDBC metastore</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
<description>username to use against metastore database</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
<description>password to use against metastore database</description>
</property>
</configuration>
5.装置hive和mysq实现后,将mysql的连贯jar包拷贝到$HIVE_HOME/lib目录下
如果呈现没有权限的问题,在mysql受权(在装置mysql的机器上执行)
mysql -uroot -p
设置明码
set password=password('root');
#(执行上面的语句 *.*:所有库下的所有表 %:任何IP地址或主机都能够连贯)
GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'root' WITH GRANT OPTION;
FLUSH PRIVILEGES;
通过mysql -uroot -proot
6. Jline包版本不统一的问题,须要拷贝hive的lib目录中jline.2.12.jar的jar包替换掉hadoop中的
6.1、 cp hive/lib/jline-2.12.jar /opt/software/hadoop-2.6.4/share/hadoop/yarn/lib/
6.2、装hive和mysq实现后,将mysql的连贯jar包拷贝到$HIVE_HOME/lib目录下
-------------------------------------------------------------------------------------------------------
启动hive
bin/hive
----------------------------------------------------------------------------------------------------
Hive几种应用形式:
1.Hive交互shell bin/hive
2.Hive JDBC服务(参考java jdbc连贯mysql)
3.hive启动为一个服务器,来对外提供服务
bin/hiveserver2
nohup bin/hiveserver2 1>/var/log/hiveserver.log 2>/var/log/hiveserver.err &
启动胜利后,能够在别的节点上用beeline去连贯
bin/beeline -u jdbc:hive2://mini1:10000 -n root
或者
bin/beeline
! connect jdbc:hive2://mini1:10000
4.Hive命令
hive -e ‘sql’
bin/hive -e 'select * from t_test'
创立表:
外部表--删除之后数据全副失落
CREATE TABLE [IF NOT EXISTS] table_name
内部表--删除元数据之后源数据还存在
CREATE EXTERNAL TABLE [IF NOT EXISTS] table_name LOCATION hdfs_path
1、构造一样,然而数据不一样 ----like
create table bws like te;
2、构造一样,数据也一样----as
create table bws2 as select * from tes;
设置表构造:肯定依照这个程序来
ROW FORMAT DELIMITED : 行格局分隔
FIELDS TERMINATED BY ’,’ : 字段之间应用空格分隔
COLLECTION ITEMS TERMINATED BY ‘,’ : 汇合(就是这的数据)应用逗号分隔
MAP KEYS TERMINATED BY ‘:’ : 键值对应用冒号分隔
LINES TERMINATED BY ‘\t’ : 记录之间应用换行符分隔
Hive 查看表形容
DESCRIBE [EXTENDED|FORMATTED] table_name
extended
formatted
table-type:查看创立表的类型
补充:长期表
在以后过程中能够对数据进行相应的操作,然而退出hive时,就主动删除
create TEMPORARY table name-----肯定是一张外部表
前期会不断更新相干的内容,对Java、大数据比拟感兴趣的敌人能够关注我
公众号:Java架构师联盟
码云上会一直的上传一些材料,有须要的,码云地址: https://gitee.com/biwangsheng/personal