首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
SAAS
ToB门户
了解全球最新的ToB事件
论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
微博
Follow
记录
Doing
博客
Blog
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
排行榜
Ranklist
相册
Album
应用中心
qidao123.com ToB IT社区-企服评测·应用市场
»
论坛
›
数据库
›
Oracle
›
在Spark中通过jps下令看到的历程名,是哪个下令产生有什 ...
返回列表
发新帖
在Spark中通过jps下令看到的历程名,是哪个下令产生有什么作用
[复制链接]
发表于 2025-9-19 06:49:27
|
显示全部楼层
|
阅读模式
马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。
您需要
登录
才可以下载或查看,没有账号?
立即注册
×
Hadoop 分布式体系中的干系历程:
Worker
:
产生下令:
yarn
下令产生。
作用:在 YARN(Yet Another Resource Negotiator)中,Worker(通常指 NodeManager)负责管理单个节点上的资源和任务实验。它与 ResourceManager 通讯,吸收并实验分配给它的任务。
NodeManager
:
产生下令:yarn下令产生。
作用:NodeManager 是 YARN 中的节点署理,负责管理单个节点上的资源和任务实验。它与 ResourceManager 通讯,吸收并实验分配给它的任务。
DataNode
:
产生下令:hadoop下令产生。
作用:DataNode 是 Hadoop 分布式文件体系(HDFS)中的工作节点,负责
存储
实际的数据块。它与 NameNode 通讯,吸收数据块的读写哀求。
Master
:
产生下令:这个名称不太明确,在 Hadoop 干系环境中大概指 ResourceManager(YARN)或 HDFS 中的 NameNode。
作用:假如是 ResourceManager,它负责集群资源的分配和管理;假如是 NameNode,它负责管理文件体系的定名空间和数据块的映射关系。
NameNode
:
产生下令:hadoop下令产生。
作用:NameNode 是 HDFS 的主节点,负责管理文件体系的定名空间和数据块的映射关系。它维护文件体系的目次树和文件元数据。
JobHistoryServer
:
产生下令:mapred下令产生。
作用:JobHistoryServer 负责
存储
和提供已完成的 MapReduce 作业的汗青记载。用户可以通过它查察作业的实验环境和统计信息。
HistoryServer
:
产生下令:yarn下令产生。
作用:在 YARN 环境中,HistoryServer 负责
存储
和提供已完成的应用步伐(包罗 MapReduce、Spark 等)的汗青记载。用户可以通过它查察应用步伐的实验环境和统计信息。
回复
使用道具
举报
返回列表
浏览过的版块
分布式数据库
鸿蒙
物联网
DevOps与敏捷开发
Java
SAAS
运维.售后
SQL-Server
前端开发
写过一篇
+ 我要发帖
登录后关闭弹窗
登录参与点评抽奖 加入IT实名职场社区
去登录
微信订阅号
微信服务号
微信客服(加群)
H5
小程序
快速回复
返回顶部
返回列表