hue实现对hiveserver2 的负载均衡

7月前作者：墨卿风竹分类：Toy博客阅读(26) 违法举报

这篇具有很好参考价值的文章主要介绍了hue实现对hiveserver2 的负载均衡。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

如果你使用的是CDH集群那就很是方便的

在Cloudera Manager中，进入HDFS Service
进入Instances标签页面，点击Add Role Instances按钮，如下图所示
点击Continue按钮，如下图所示
返回Instances页面，选择HttpFS角色，并点击Start启动服务，如下图所示
HttpFS服务启动后，点击进入Hue Service > Configuration页面，如下图所示
找到Service-Wide > HDFS Web Interface Role属性，选中httpfs单选框，如下图所示
点击Save Changes按钮保存修改并重启Hue服务

如果使用的是其他的模式：
集群未打开Kerberos身份认证开关的集群
Hue连接该负载均衡HiveServer2，需要在Hue配置的hue页签中添加如下三个自定义参数。
参数描述
zookeeper.clusters.default.hostports Zookeeper的连接地址，请根据实际情况填写，本示例为master-1-1:2181,master-1-2:2181,master-1-3:2181。
beeswax.hive_discovery_hs2 固定值为true。
beeswax.hive_discovery_hiveserver2_znode 固定值为/hiveserver2。文章来源地址https://www.toymoban.com/news/detail-721393.html

到了这里，关于hue实现对hiveserver2 的负载均衡的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

hive-无法启动hiveserver2

启动hiveserver2没有反应，客户端也无法连接( beeline -u jdbc:hive2://node01:10000 -n root) 查看hive的Log日志，发现如下报错在hive的hive_site.xml中添加如下代码

2024年02月12日
浏览(25)
Nginx+Tomcat实现负载均衡、动静分离集群部署

1、安装好JDK 2、安装tomcat 3、配置tomcat环境变量 4、修改tomcat2中的server.xml文件，要求各tomcat实例配置不能有重复的端口号 5、修改各tomcat实例中的startup.sh和shutdown.sh文件，添加tomcat环境变量 6、启动各tomcat中的/bin/startup.sh 7、浏览器访问测试 1、Nginx应用 Nginx是一款非常优秀的

2024年02月08日
浏览(77)
利用nginx实现动静分离的负载均衡集群实战

大家好，我是沐风晓月，今天我们利用nginx来作为负载，实现两台apache服务器的动静分离集群实战；本文收录于沐风晓月的专栏《linux基本功-系统服务实战》，更多内容可以关注我的博客： https://blog.csdn.net/wisdom_futrue 本次用到的操作系统及服务：本次实验一共需要3台服务器

2024年02月02日
浏览(27)
HiveServer2 常见异常和处理方法

可能原因： HiveServer 连接数达到上限。因为每个 jdbc，HiveServer 需要一个线程。 HiveServer OOM 不能及时处理客户请求 Hive Metastore 没有响应或者后台数据库卡住。 HiveServer2 Server socket 的 backlog 默认是 0，在centos 系统中查看 HiveServer2 的 backlog 是50。当Socket accept 的速度变慢，操作系

2024年02月03日
浏览(33)
hive 入门配置hiveserver2 (三)

Hive的hiveserver2服务的作用是提供jdbc/odbc接口，为用户提供远程访问Hive数据的功能，例如用户期望在个人电脑中访问远程服务中的Hive数据，就需要用到Hiveserver2。在远程访问Hive数据时，客户端并未直接访问Hadoop集群，而是由Hivesever2代理访问。由于Hadoop集群中的数据具备访问

2024年02月11日
浏览(25)
合并文件解决HiveServer2内存溢出方案

• 表文件数量为6522102 • 分区为string 类型的time字段，分了2001个区。 •可以看到Jvm内存使用明显增大，Hiveserver2内存溢出，进程挂掉了；查看HiveServer2状态标红。 •详细日志如下 • 将每个分区里的若干个小文件合并成一个文件，最终文件个数为分区数。合并流程如下: 2.1.

2024年02月11日
浏览(28)
hive 配置metastore hiveserver2服务开启

hive-site.xml: hive-site.xml: hive-site.xml: 重启MetaStore服务: 启动hive服务: 启动后需要等待一段时间，jdbc才能连接上hive服务使用beeline客户端验证是否可以连接：

2024年02月03日
浏览(28)
使用Python实现爬虫IP负载均衡和高可用集群

做大型爬虫项目经常遇到请求频率过高的问题，这里需要说的是使用爬虫IP可以提高抓取效率，那么我们通过什么方法才能实现爬虫IP负载均衡和高可用集群，并且能快速的部署并且完成爬虫项目。通常在Python中实现爬虫ip负载均衡和高可用集群需要一些高级的网络和编程知识

2024年02月04日
浏览(41)
spark的jdbc接口，类似于hiveserver2

https://spark.apache.org/docs/2.4.0/sql-distributed-sql-engine.html#running-the-thrift-jdbcodbc-server Spark SQL可以作为一个分布式查询引擎，通过其JDBC/ODBC或命令行接口进行操作。通过JDBC/ODBC接口，用户可以使用常见的数据库工具或BI工具来连接和查询Spark SQL，这使得Spark SQL可以与现有的数据分析工

2024年01月20日
浏览(28)
【大数据之Hive】五、Hiveserver2服务部署

hiveserver2提供JDBC/ODBC接口，使得用户可以远程访问Hive数据，即作为客户端的代理与Hadoop集群进行交互。 hiveserver2部署时需要部署到一个能访问集群的节点上，保证能够直接往Hadoop上提交数据。用户在客户端提交SQL语句时，由hiveserver请求HDFS或者提交计算任务到

2024年02月13日
浏览(26)