千家信息网

HADOOP YARN(一)

发表于:2026-11-01 作者:千家信息网编辑
千家信息网最后更新 2026年11月01日,HADOOP YARN是什么? Yarn全称是Yet Another Resource Negotiator(资源管理器)基本概念Container容器是Yarn对资源的一层抽象。(CP
千家信息网最后更新 2026年11月01日HADOOP YARN(一)

HADOOP YARN是什么?

        Yarn全称是Yet Another Resource Negotiator(资源管理器)

基本概念

Container容器是Yarn对资源的一层抽象。(CPU核数,内存等计算资源)容器由NodeManager启动和管理,并被它所监控容器由ResureceManager调度ResourceManager(RM)负责资源管理,包含定时调度器(scheduler)和应用管理器(ApplicationManager)调度器向分配资源,应用管理器监控应用程序。ApplicationMaster每提交一个作业,Appmaster向Resourcemanager申请资源,获得资源后将运行的程序发送到容器启动。(数据不动,程序动)Nodemanager负责容器的管理,监控资源的使用情况,向ResourceManager提供资源的使用报告。

程序提交流程

1.  Client向Yarn提交Application2.  ResourceManager向NodeManager通信,为Appmaster分配第一个容器3.  Appmaster对作业进行拆分,向ResourceManager申请容器4.  Appmaster与NodeManager通信,将作业分发到容器中。5.  容器向Appmaster发送心跳6.  程序结束,Appmaster向ResourceManager注销资源
资源 容器 管理 程序 作业 应用 监控 调度 资源管理 分配 通信 全称 内存 应用程序 情况 报告 数据 核数 概念 流程 数据库的安全要保护哪些东西 数据库安全各自的含义是什么 生产安全数据库录入 数据库的安全性及管理 数据库安全策略包含哪些 海淀数据库安全审计系统 建立农村房屋安全信息数据库 易用的数据库客户端支持安全管理 连接数据库失败ssl安全错误 数据库的锁怎样保障安全 互联网科技金融 互联网金融科技创新 奇士达互联网科技 美国互联网黑科技 互联网巨头投资的硬核科技 互联网科技公司需要的职位 互联网之后的科技是什么 须眉科技是互联网公司吗 互联网系的金融科技公司 中化能源互联网科技招聘 互联网时代科技改变生活 来此购互联网科技有限公司 成都铂石互联网科技做什么的 互联网科技大奖都有哪些公司 华夏恒生科技与互联网科技 互联网科技年终奖 宇信科技在杭州互联网排第几 互联网安防科技感 承德科技产业互联网平台 科技发展第三阶段互联网时代 互联网科技 深圳九邦互联网科技有限公司 天下捷融互联网科技 互联网科技视频素材 海南科技产业互联网平台 宜昌元轩互联网科技有限公司 科技互联网的核心竞争力 上海钢联属于互联网科技股吗 广州千川互联网科技有限公司 互联网科技品牌
0