首页  站长新闻  正文

聚名企服

hadoop的三大组件有什么？

转载 2021-11-15 14:56:15 7298

hadoop三大组件：1、HDFS，一个高可靠、高吞吐量的分布式文件系统；2、MapReduce，一个分布式的离线并行计算框架；3、Yarn，分布式资源管理框架。

hadoop三大组件：

hadoop的三大组件有什么？

1、HDFS

一个高可靠、高吞吐量的分布式文件系统

存储海量数据

分布式

安全性

副本数据

数据是以block的方式进行存储的，128M

比如：200M—128M 72M

2、MapReduce

一个分布式的离线并行计算框架

对海量数据的处理

分布式

思想：

分而治之

大数据集分为小的数据集

每个数据集进行逻辑业务处理(map)

合并统计数据结果(reduce)

3、Yarn

分布式资源管理框架

管理整个集群的资源(内存、CPU核数)

分配调度集群的资源

声明：本文转载于：互联网，如有侵犯，请联系service@Juming.com删除

相关标签: hadoop

上一篇: base64编码是什么？

下一篇: com和net有什么区别吗？

相关文章

相关专题

编辑推荐

域名注册专题合集
域名抢注专题合集
企业建站专题合集

热门排行榜

猜你喜欢

热门标签

网站信息

查ICP网：全新的综合网站备案信息查询网

Copyright © 2008-2028 www.chaicp.com [ 查icp] All Rights Reserved.| 合肥寻云网络科技有限公司 | 营业执照

icp备案号：【皖B2-20160079-16】增值电信业务经营许可证【皖B2-20160079-16】网站地图 robots文件皖公网安备: 34010402702277号不良举报关于我们免责申明广告合作



联系
我们



用户交流QQ

1926846642



关注聚名网
实时了解活动详情

