• 第三章 调度系统架构设计之获取集群资源信息


    • 实现方案:通过Rest API方式获取集群资源与内存信息判断是否继续提交任务还是将任务阻塞在客户端

    1、Yarn的Rest API

    (1)Rest API简介

    ​ Rest将增删改查直接映射到HTTP中已实现的GET、POST、PUT、DELETE方法。

    (2)Yarn Rest API

    ​ Hadoop YARN 自带了一系列的web service REST API,我们可以通过这个web service,可以通过web service访问集群(cluster)、节点(nodes)、应用(application)以及应用的历史信息。

    • 注意事项:web service REST API语法如下
    http://{http address of service}/ws/{version}/{resourcepath}
    
    • 1

    ①address:获取服务器的地址信息,包括RM、NM、History

    ②ws:固定语句

    ③version:API版本

    ④resourcepath:资源路径

    (3)Yarn集群监控指标相关Rest API

    ①API说明

    • 访问路径:
    http://
  • 相关阅读:
    SpringBoot 整合 RabbitMQ 消息过期 TTL、死信队列 (三) 有图 有源码
    北京地区图片
    HTTP 响应头 X-Frame-Options
    uniapp 实现拍照 相册选取选视频和照片
    umi-request & useRequest 源码分析及业务实践
    程序分析与优化 - 5 指针分析
    如何用手机号注册亚马逊买家账号
    【Vue】开发实现 Vue 中的自定义指令(2)
    中文编程开发语言工具编程实际案例:美发店会员管理系统软件编程实例
    php费尔康框架phalcon(费尔康)框架学习笔记
  • 原文地址:https://blog.csdn.net/qq_27924553/article/details/126099122