首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
SAAS
ToB门户
了解全球最新的ToB事件
论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
微博
Follow
记录
Doing
博客
Blog
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
排行榜
Ranklist
相册
Album
应用中心
qidao123.com ToB IT社区-企服评测·应用市场
»
论坛
›
大数据
›
数据仓库与分析
›
怎样使用datagrip毗连spark
返回列表
发新帖
怎样使用datagrip毗连spark
[复制链接]
发表于 2025-12-6 05:08:03
|
显示全部楼层
|
阅读模式
马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。
您需要
登录
才可以下载或查看,没有账号?
立即注册
×
ThriftServer:类似hiveserver2
本质:Spark中的一个特别的步调,使用步调的资源运行全部SQL,该步调除非手动关闭,否则不停运行
1、在hive 下修改hive-site.xml
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
复制
代码
2、将hive-site.xml 复制到 spark的conf 下
cp /opt/installs/hive/conf/hive-site.xml /opt/installs/spark/conf
复制
代码
3、接着分发一下:
xsync.sh /opt/installs/spark/conf/hive-site.xml
复制
代码
4、重启thrift服务:
/opt/installs/spark/sbin/start-thriftserver.sh --hiveconf hive.server2.thrift.port=10000 --hiveconf hive.server2.thrift.bind.host=bigdata01 --master yarn --conf spark.sql.shuffle.partitions=2
若hiveServer2 启动过,那么改成10001 是因为 hiveserver2占用了10000
启动服务,该服务不会停止,一直在后台启动,假如启动不了,记得查看
日志
。
停止服务:
/opt/installs/spark/sbin/stop-thriftserver.sh
复制代码
使用datagrip 重新毗连一下,记得革新一下毗连。
回复
使用道具
举报
返回列表
浏览过的版块
物联网
Java
商道如狼道
+ 我要发帖
登录后关闭弹窗
登录参与点评抽奖 加入IT实名职场社区
去登录
微信订阅号
微信服务号
微信客服(加群)
H5
小程序
快速回复
返回顶部
返回列表