Advertisement

Hadoop 第一篇:架构与部署

阅读量:

一、概述

该开源平台名为Hadoop(Apache Hadoop),其作为大规模分布计算框架的核心组件之一而存在

在这里插入图片描述

HDFS旨在为海量数据提供高效存储解决方案;其中性能卓越的高性能分布式文件系统(HDFS)能够经济地部署于廉价硬件架构;并且支持高效的读取能力;能够处理大规模数据集;同时取消对POSIX接口的要求;允许文件系统以流式读取的方式操作;而MapReduce则实现了对海量数据的并行处理。

在这里插入图片描述

Hadoop 应用 可以支持构建大型仓库系统(1PB=1024TB 1TB=1024GB),实现高效的大规模数据分析能力;涵盖多种应用场景如搜索引擎, 日志分析, 商业智能, 数据挖掘等;通过 Hadoop 技术, 可以轻易地将多台普通或低性能服务器组合成分布式运算-存储集群, 实现对海量数据进行分布式计算与智能服务

Hadoop设计生

全部评论 (0)

还没有任何评论哟~