大数据技术——Hadoop 3.X 入门（1）

文章目录

第一章 大数据概述
第二章 Hadoop入门
第三章 Hadoop运行环境搭建（其中开发重点为...）
第三章第一节 基于模板的虚拟机搭建方案说明
第三章第二节 复制现有虚拟机配置方案的具体步骤
第三章第三节 在hadoop-102节点部署Java JDK环境并完成安装
第三章第四节 在hadoop-102环境中配置Hadoop组件安装包并完成部署流程
第三章第五节 完成HDFS和Yarn集群配置并实现基本功能测试流程

四 跑马灯模式

• 五、常见错误及解决方案

一、大数据概论

1.1. 大数据的概念
大数据（Big Data）是指无法在一个时间段内通过常规软件工具进行采集、管理和处理的数据集合，并且需要采用新的处理模式才能具备更强的决策支持能力、洞察分析能力和流程优化能力的海量性、高增长率以及多样化的信息资产。

    按顺序给出数据存储单位：
    bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。
    1Byte = 8bit 1K = 1024Byte 1MB = 1024K
    1G = 1024M 1T = 1024G 1P= 1024T

大数据的核心任务是高