Hadoop MaWo: YARN服务上的Master Worker框架

101 阅读 0 评论 67 点赞

我是靠谱客的博主雪白爆米花，最近开发中收集的这篇文章主要介绍Hadoop MaWo: YARN服务上的Master Worker框架，觉得挺不错的，现在分享给大家，希望可以做个参考。

MaWo 是一个基于 YARN 服务的框架，用于处理基于 Master Worker 的工作负载。这是一个应用程序，它可以输入包含任务的工作规范、任务的预期持续时间，并且包含一个 Master 将任务分发给预定的一组works,组件将负责在特定的时间内完成工作。

MaWo组件

MaWo 应用程序是一个YARN 服务应用程序。它主要有两个组成部分。

1.Master：

·读取MaWo-Payload 文件并创建任务队列

·注册Worker

·将任务分配给工作节点

·监控任务状态

·记录任务状态

2.Worker：

·向 Worker 发送心跳

·执行任务

以上就是雪白爆米花为你收集整理的Hadoop MaWo: YARN服务上的Master Worker框架的全部内容，希望文章能够帮你解决Hadoop MaWo: YARN服务上的Master Worker框架所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。