从品牌网站建设到网络营销策划,从策略到执行的一站式服务
本文来源:通通学--知识学习与分享平台
成都创新互联是一家专业提供孝南企业网站建设,专注与网站设计、成都网站设计、HTML5、小程序制作等业务。10年已为孝南众多企业、政府机构等服务。创新互联专业网络公司优惠进行中。
转载链接:http://www.tongtongxue.com/archives/220.html
HDFS: Hadoop Distributed File System 分布式文件系统
MapReduce:并行计算框架
Yarn:集群资源管理和调度框架
适合大数据的分布式存储、计算、资源管理平台
作者:Doug Cutting
受Google三篇论文的启发
主从结构
主节点,只有一个: namenode
从节点,有很多个: datanodes
namenode负责:
接收用户操作请求
维护文件系统的目录结构
管理文件与block之间关系,block与datanode之间关系
datanode负责:
存储文件
文件被分成block存储在磁盘上
为保证数据安全,文件会有多个副本
主从结构
主节点,只有一个: ResourceManager
控制节点,每个Job都有一个MRAppMaster
从节点,有很多个: YarnChild
ResourceManager负责:
接收客户提交的计算任务
把Job分给MRAppMaster执行
监控MRAppMaster的执行情况
MRAppMaster负责:
负责一个Job执行的任务调度
把Job分给YarnChild执行
监控YarnChild的执行情况
成都网站建设公司地址:成都市青羊区太升南路288号锦天国际A座10层 建设咨询028-86922220
成都快上网科技有限公司-四川网站建设设计公司 | 蜀ICP备19037934号 Copyright 2020,ALL Rights Reserved cdkjz.cn | 成都网站建设 | © Copyright 2020版权所有.
专家团队为您提供成都网站建设,成都网站设计,成都品牌网站设计,成都营销型网站制作等服务,成都建网站就找快上网! | 成都网站建设哪家好? | 网站建设地图