hadoop,hive数据库连接

编辑
文档创建者:文档助手1 (67727 )     浏览次数:7769次     编辑次数:17次     最近更新:susie 于 2018-03-09     

目录:

1. 描述编辑

Hadoop是个很流行的分布式计算解决方案,Hive是基于hadoop的数据分析工具。一般来说我们对Hive的操作都是通过cli来进行,也就是Linux的控制台,但是,这样做本质上是每个连接都存放一个元数据,各个之间都不相同,这样的模式用来做一些测试比较合适,并不适合做产品的开发和应用。
因此,就产生Hive的JDBC连接的方式。

2. 步骤编辑

使得我们可以连接Hive并进行一些类关系型数据库的sql语句查询等操作,首先我们需要将这些驱动拷贝到报表工程下面,然后再建立连接,最后通过连接进行数据查询。
2.1 拷贝jar包到FR工程
1)普通的hadoop、hive的jar
jar包下载地址:hbase-finereporter-lib.rar,将文件中的所有jar包拷贝至报表工程%FR_HOME%\WebReport\WEB-INF\lib下。
2)针对星环Inceptor的jar
将星环Inceptor的inceptor-driver(驱动版本需要和服务端一致,可从manager界面下载)拷贝至报表工程%FR_HOME%\WebReport\WEB-INF\lib下;
注:这里给出TDH4.6对应的inceptor JDBC驱动
2.2 配置数据连接
启动设计器,打开服务器>定义数据连接,新建JDBC连接。
在Hive 0.11.0版本之前,只有HiveServer服务可用,在程序操作Hive之前,必须在Hive安装的服务器上打开HiveServer服务。
而HiveServer本身存在很多问题(比如:安全性、并发性等);
针对这些问题,Hive0.11.0版本提供了一个全新的服务:HiveServer2,这个很好的解决HiveServer存在的安全性、并发性等问题。

1)HiveServer
数据库:Inceptor;数据库驱动:org.apache.hive.jdbc.HiveDriverURL:jdbc:hive://env.finedevelop.com:57002/default;(Hive 0.11.0之前的版本)或jdbc:hive2://env.finedevelop.com:57002/default(Hive 0.11.0及往后的版本);填写实际的用户名和密码。
注:hive服务默认端口为10000,根据实际情况修改端口;默认数据库名为default,根据实际数据库名修改database name,所有的Hive都支持。
测试连接,提示连接成功即可。
222

2)Inceptor
数据库others;数据库驱动:org.apache.hive.jdbc.HiveDriver;URL:jdbc:inceptor2://localhost:10000/default;填写实际的用户名和密码
注:默认数据库名为default,根据实际数据库名修改database name
注:该连接方式只支持Hive0.11.0及之后版本。

222

关键字:星环,Inceptor

附件列表


主题: 数据连接
如果您认为本文档还有待完善,请编辑

文档内容仅供参考,如果你需要获取更多帮助,请咨询帆软技术支持
关于技术问题,您还可以前往帆软社区,点击顶部搜索框旁边的提问按钮
若您还有其他非技术类问题,可以联系帆软传说哥(qq:1745114201

此页面有帮助吗?