数码 返回
天气预报 > 数码 > hadoop是做什么的
hadoop是做什么的
更新时间： 2021-02-08 08:32:00  

1、Hadoop主要是分布式计算和存储的框架，所以Hadoop工作过程主要依赖于HDFS(Hadoop Distributed File System)分布式存储系统和Mapreduce分布式计算框架。

2、分布式存储系统HDFS中工作主要是一个主节点namenode(master)（hadoop1.x只要一个namenode节点，2.x中可以有多个节点）和若干个从节点Datanode(数据节点)相互配合进行工作。

3、HDFS主要是存储Hadoop中的大量的数据，namenode节点主要负责的是：接收client用户的操作请求，这种用户主要指的是开发工程师的Java代码或者是命令客户端操作。维护文件系统的目录结构，主要就是大量数据的关系以及位置信息等。管理文件系统与block的关系。

4、Hadoop中大量的数据为了方便存储和管理主要是以block块（64M）的形式储存。一个文件被分成大量的block块存储之后，block块之间都是有顺序关系的，这个文件与block之间的关系以及block属于哪个datanode都是有namenode来管理。

关键词： hadoop 什么

hadoop是做什么的相关经验

天气预报

最新推荐

页面:/news/view-999403/ | 耗时:0.5644 s | 内存:2.11 MB | 查询:4 | 缓存读取:3 写入:0 | 加载文件:25
select * from tbl_Articles WHERE ArticleID=999403 LIMIT 0,1
select * from tbl_Articles_data WHERE ArticleID=999403 LIMIT 0,1
select * from tbl_Articles_sphinx where id=999403 LIMIT 0,1
SELECT ArticleID,Title FROM tbl_Articles WHERE ArticleID IN(1117618,1085214,1092622,1081973,1082926,1119622,1110826,1102120,1082304,1101913,1099167,1117097,1116503,1126284,1095504,1095442,1097293,1116641,1304349,1087933,1120342,1104971,1109136,1116389,1110331,1109741,1123186,1076714,1091400,1081225) ORDER BY field (ArticleID,1117618,1085214,1092622,1081973,1082926,1119622,1110826,1102120,1082304,1101913,1099167,1117097,1116503,1126284,1095504,1095442,1097293,1116641,1304349,1087933,1120342,1104971,1109136,1116389,1110331,1109741,1123186,1076714,1091400,1081225)