hadoop是做什么的
更新时间: 2024-04-26 14:54:32
1、Hadoop主要是分布式计算和存储的框架,所以Hadoop工作过程主要依赖于HDFS(Hadoop Distributed File System)分布式存储系统和Mapreduce分布式计算框架。
2、分布式存储系统HDFS中工作主要是一个主节点namenode(master)(hadoop1.x只要一个namenode节点,2.x中可以有多个节点)和若干个从节点Datanode(数据节点)相互配合进行工作。
3、HDFS主要是存储Hadoop中的大量的数据,namenode节点主要负责的是:接收client用户的操作请求,这种用户主要指的是开发工程师的Java代码或者是命令客户端操作。维护文件系统的目录结构,主要就是大量数据的关系以及位置信息等。管理文件系统与block的关系。
4、Hadoop中大量的数据为了方便存储和管理主要是以block块(64M)的形式储存。一个文件被分成大量的block块存储之后,block块之间都是有顺序关系的,这个文件与block之间的关系以及block属于哪个datanode都是有namenode来管理。
hadoop是做什么的 相关文章
上一篇:鱼汤怎样做不破坏蛋白
下一篇:燕州市是哪个省
其他相关资讯
- 楚雄天气预报:元谋县气象台发布高温黄...
- 甘南州天气预报:迭部县气象台发布雷电...
- 固原天气预报:固原市气象台发布雷电黄...
- 大理天气预报:剑川县气象台发布大风蓝...
- 阿克苏天气预报:拜城县气象台发布大风...
- 平凉天气预报:平凉市气象台发布雷电黄...
- 鄂尔多斯天气预报:乌审旗气象台解除大...
- 延安天气预报:吴起县气象台发布大风蓝...
- 赤峰天气预报:喀喇沁旗气象台发布雷电...
- 漳州天气预报:漳浦县气象台解除暴雨蓝...
- 三明天气预报:建宁县气象台解除雷电黄...
- 克孜勒苏天气预报:克孜勒苏柯尔克孜自...
- 邯郸天气预报:曲周县气象台发布大风蓝...
- 鄂尔多斯天气预报:乌审旗气象台发布大...
- 南平天气预报:顺昌县气象台解除雷电黄...
- 朔州天气预报:崇礼区气象台解除大风蓝...
- 朔州天气预报:应县气象台发布大风蓝色...
- 沧州天气预报:肃宁县气象台发布大风蓝...
- 承德天气预报:丰宁满族自治县气象台发...
- 台州天气预报:临海市气象台发布大雾橙...
天气预报导航