Yarn|作业调度和集群资源管理系统

北美洲 美国 america 网络 computer 同类型网站

Yarn 是一个包管理器， 它允许你使用并分享代码给全世界的开发者， Yarn 做这些快捷、安全、可靠，所以你不用担心什么。Yarn 允许你使用其他开发者的解决方案处理不同的问题，让你开发软件更容易。

YARN 分层结构的本质是 ResourceManager。这个实体控制整个集群并管理应用程序向基础计算资源的分配。ResourceManager 将各个资源部分(计算、内存、带宽等)精心安排给基础 NodeManager(YARN 的每节点代理)。ResourceManager 还与 ApplicationMaster 一起分配资源，与 NodeManager 一起启动和监视它们的基础应用程序。

ApplicationMaster 管理一个在 YARN 内运行的应用程序的每个实例。ApplicationMaster 负责协调来自 ResourceManager 的资源，并通过 NodeManager 监视容器的执行和资源使用(CPU、内存等的资源分配)。请注意，尽管目前的资源更加传统(CPU 核心、内存)，但未来会带来基于手头任务的新资源类型(比如图形处理单元或专用处理设备)。从 YARN 角度讲，ApplicationMaster 是用户代码，因此存在潜在的安全问题。YARN 假设 ApplicationMaster 存在错误或者甚至是恶意的，因此将它们当作无特权的代码对待。

NodeManager 管理一个 YARN 集群中的每个节点。NodeManager 提供针对集群中每个节点的服务，从监督对一个容器的终生管理到监视资源和跟踪节点健康。MRv1 通过插槽管理 Map 和 Reduce 任务的执行，而 NodeManager 管理抽象容器，这些容器代表着可供一个特定应用程序使用的针对每个节点的资源。YARN 继续使用 HDFS 层。它的主要 NameNode 用于元数据服务，而 DataNode 用于分散在一个集群中的复制存储服务。

旧的 Hadoop 架构受到了 JobTracker 的高度约束，JobTracker 负责整个集群的资源管理和作业调度。新的 YARN 架构打破了这种模型，允许一个新 ResourceManager 管理跨应用程序的资源使用，ApplicationMaster 负责管理作业的执行。这一更改消除了一处瓶颈，还改善了将 Hadoop 集群扩展到比以前大得多的配置的能力。此外，不同于传统的 MapReduce，YARN 允许使用 Message Passing Interface 等标准通信模式，同时执行各种不同的编程模型，包括图形处理、迭代式处理、机器学习和一般集群计算。

所以yarn解决了扩展性差，单点故障以及只能局限于MR计算框架等的问题。Yarn 会缓存它下载的每个包，所以不需要重复下载。它还能并行化操作以最大化资源利用率，所以安装速度之快前所未有。

Yarn|作业调度和集群资源管理系统网址:    https://yarnpkg.com/zh-Hans/

丝画阁 阅读:167评论:82018-12-11 22:47:07

Virtualpiano:在线虚拟钢琴模拟器

欧洲 德国 germany 网络 computer 同类型网站

虚拟钢琴（Virtual Piano）是一个在线钢琴演奏模拟的网站，如果你喜欢钢琴，但是又没有地方可以练习，不妨试试这款在线的钢琴模拟工具，非常适初学钢琴的用户...... [更多]

Virtualpiano:在线虚拟钢琴模拟器网址:    http://www.virtualpiano.net/

丝画阁 阅读:5061评论:82018-12-11 22:54:44

GeGeek:电脑工具U盘便携版大全

北美洲 美国 america 网络 computer 同类型网站

GeGeek:电脑工具U盘便携版大全是有一位叫做Gegeek的工程师通过多年的收集和积累而制作了的一个超过300款技术工具的软件集合工具包，所有的应用程序都可用...... [更多]

GeGeek:电脑工具U盘便携版大全网址:    http://gegeek.com/

丝画阁 阅读:4295评论:82018-12-11 22:53:15

GTD:全球恐怖主义研究数据库

北美洲 美国 america 网络 computer 同类型网站

GTD:全球恐怖主义研究数据库（Global Terrorism Database）是一个开放源代码的数据库网站，这里记录了从1970年到2013年世界各地的恐...... [更多]

GTD:全球恐怖主义研究数据库网址:    http://www.start.umd.edu/gtd/

丝画阁 阅读:4067评论:82018-12-11 22:53:17

VPS.ME:免费VPS云主机服务平台

北美洲 美国 america 网络 computer 同类型网站

VPS ME:免费VPS云主机服务平台是一个提供新一代的免费VPS主机的IDC商家，隶属于Hosting24公司旗下，免费版配置为CPU为0 6 Ghz，内存为...... [更多]

VPS.ME:免费VPS云主机服务平台网址:    http://www.vps.me/

丝画阁 阅读:3329评论:82018-12-11 22:53:21

Reeoo:时尚潮流网站设计欣赏网

亚洲 中国 china 网络 computer 同类型网站

Reeoo:时尚潮流网站设计欣赏网是一个收集最新的时尚潮流网站设计案例，提供你的设计灵感，为您的设计提供了参考类似的成功案例网站。...... [更多]

Reeoo:时尚潮流网站设计欣赏网网址:    http://reeoo.com/

丝画阁 阅读:2068评论:82018-12-11 22:54:21

NetsKope:云端应用管理和安全服务平台

北美洲 美国 america 网络 computer 同类型网站

NetsKope:云端应用管理和安全服务平台是一个致力于为大型企业提供云端应用监控服务的平台，提供云应用分析和政策创建工具，通过可视化和高级政策部署帮助企业从敏...... [更多]

NetsKope:云端应用管理和安全服务平台网址:    http://www.netskope.com/

丝画阁 阅读:1967评论:82018-12-11 22:53:19

HowZhi:好知网知识分享新社区

亚洲 中国 china 网络 computer 同类型网站

HowZhi:好知网知识分享新社区是技能和兴趣知识分享平台，这里有大量的免费课程，课程涵盖计算机知识，企业管理，摄影，职业技能，运动、外语、美食，时尚，手工艺，...... [更多]

HowZhi:好知网知识分享新社区网址:    http://www.howzhi.com/

丝画阁 阅读:1698评论:82018-12-11 22:54:16

Cosdna|在线化妆品成分查询网

亚洲 中国 china 网络 computer 同类型网站

Cos DNA 是一个支持查询化妆品、保养品、彩妆、洗发精等成分数据的站点，目前支持快速检索市面上绝大多数的化妆品的成分及其安全系数，如果你对某一款化妆品存在疑...... [更多]

Cosdna|在线化妆品成分查询网网址:    http://cosdna.com/chs/

丝画阁 阅读:1003评论:82018-12-11 22:47:20

vBuLuo:V部落团队管理移动办公平台

亚洲 中国 china 网络 computer 同类型网站

vBuLuo:V部落团队管理移动办公平台是一款高效的团队分享和协作工具，让用户在协作中借助V部落提升执行力并降低沟通成本；V部落定位在团队分享和协作，在产品设计...... [更多]

vBuLuo:V部落团队管理移动办公平台网址:    http://www.vbuluo.com/

丝画阁 阅读:900评论:82018-12-11 22:53:39

Greasemonkey:浏览器油猴扩展插件官网

北美洲 美国 america 网络 computer 同类型网站

Grease Monkey 是由Mozilla Firefox的一个附加组件衍生而来，它让用户安装一些脚本使大部分HTML为主的网页于用户端直接改变得更方便易用...... [更多]

Greasemonkey:浏览器油猴扩展插件官网网址:    http://www.greasespot.net/

丝画阁 阅读:797评论:82018-12-11 22:48:35

ReceiveFreeSMS:在线免费收短信服务网

欧洲 英国 england 网络 computer 同类型网站

ReceiveFreeSMS:在线免费收短信服务网是一个提供无需注册即可免费收取国外短信的站点，你可以在这里接收来自世界各地的短信，尤其是没有国外手机号的用户想...... [更多]

ReceiveFreeSMS:在线免费收短信服务网网址:    http://www.receivefreesms.com/

丝画阁 阅读:655评论:82018-12-11 22:53:21

MediaFire:在线免费云存储平台

北美洲 美国 america 网络 computer 同类型网站

MediaFire:在线免费云存储平台是美国华盛顿的免费网络硬盘，无限容量空间、无限带宽、无限上传 下载次数、不限速度，单个文件100M以内，无需注册帐户即可上...... [更多]

MediaFire:在线免费云存储平台网址:    http://www.mediafire.com/

丝画阁 阅读:603评论:82018-12-11 22:54:46

ChronoZoom:在线宇宙演化体验网

北美洲 美国 america 网络 computer 同类型网站

ChronoZoom 网站是由微软研究院和莫斯科州立大学共同研发的一个在线演示137亿年宇宙演化史的互动平台，如果我们要想了解宇宙演化史方面的信息的话，通常会借...... [更多]

ChronoZoom:在线宇宙演化体验网网址:    http://www.chronozoom.com/

丝画阁 阅读:584评论:82018-12-11 22:48:15

GlobalRichlist:在线个人收入全球排行网

欧洲 爱尔兰 ireland 网络 computer 同类型网站

GlobalRichlist:在线个人收入全球排行网是一个提供全球富豪排行的网站，不过其主要的功能是，你可以查看你的收入在全球排名在多少位，你需要自己的存款金额...... [更多]

GlobalRichlist:在线个人收入全球排行网网址:    http://www.globalrichlist.com/

丝画阁 阅读:575评论:82018-12-11 22:53:07

ConverTfiles:在线格式转换工具

北美洲 美国 america 网络 computer 同类型网站

在线文件格式转换的网站CometDocs，但该网站主要是支持文本、图片等文件内容的格式转换。...... [更多]

ConverTfiles:在线格式转换工具网址:    http://www.convertfiles.com/

丝画阁 阅读:559评论:82018-12-11 22:57:58

TypeCho:免费极简开源博客程序

亚洲 中国 china 网络 computer 同类型网站

TypeCho:免费极简开源博客程序是一个可以让我们通过打字，在网络上表达自己的平台，是一款免费开源的博客程序，它在 GPL version 2 许可证下发行，...... [更多]

TypeCho:免费极简开源博客程序网址:    http://typecho.org/

丝画阁 阅读:534评论:82018-12-11 22:53:11

Mailinator:在线免费临时邮箱

北美洲 美国 america 网络 computer 同类型网站

Mailinator 网站是一个提供免费一次性临时邮箱的服务站点，帮助用户免于垃圾邮件的骚扰，该服务的特点是避免暴露自己的常用邮箱，简单易用，无需注册、激活、登...... [更多]

Mailinator:在线免费临时邮箱网址:    http://www.mailinator.com/

丝画阁 阅读:530评论:82018-12-11 22:48:24

TamperMonkey:谷歌浏览器油猴代码库

欧洲 德国 germany 网络 computer 同类型网站

Tamper Monkey网站是一个可以让谷歌Chrome浏览器支持UserScript 的 Chrome 扩展的工具和代码库，本身不支持用户脚本功能，不过用户...... [更多]

TamperMonkey:谷歌浏览器油猴代码库网址:    http://tampermonkey.net/

丝画阁 阅读:493评论:82018-12-11 22:48:35

Incapsula:免费网站CDN加速服务

北美洲 美国 america 网络 computer 同类型网站

Incapsula:免费网站CDN加速服务我是一个提供网站CND加速服务，降低服务器负载，提升安全性的站点，利用分散于全世界的节点来快取网页，让不同国家的访客都...... [更多]

Incapsula:免费网站CDN加速服务网址:    http://www.incapsula.com/

丝画阁 阅读:487评论:82018-12-11 22:53:26

InBox:基于云端的邮件系统

北美洲 美国 america 网络 computer 同类型网站

InBox:基于云端的邮件系统是一个支持Yahoo、Microsoft Exchange 和其他更多的的邮件系统的新一代邮件平台，给同邮件相关的应用或者服务提供...... [更多]

InBox:基于云端的邮件系统网址:    https://www.inboxapp.com/

丝画阁 阅读:472评论:82018-12-11 22:53:19