大数据与人工智能及云计算的知识概述

大数据与人工智能知识概括

• 大数据简介
• 云计算
• 人工智能

大数据简介

什么是大数据：

• 举例：
  ①商品推荐：
  <1>问题：1、如何高效地管理大量订单 2、如何进行有效计算处理
  ②天气预报：
  <1>问题：1、如何有效地存储海量天气数据 2、如何对海量天气数据进行精确分析

  • 本质：
    ①数据的存储：分布式文件系统（分布式存储）
    ②数据的计算：分布式计算

大数据与Java的关系：

• 该Hadoop框架主要采用Java语言进行开发
  • 该Spark框架主要使用Scala语言进行开发 ，其中使用的Scala技术本身也依赖于Java语言

学大数据需要的基础：

• java基础（javase）—> 类的对象化概念包括对象类、子类关系、数据交换接口、元编程技术及类型系统支持****
• linux基础（linux操作）-----> 通过生成文件和组织存储空间来管理资源，并利用强大的文本编辑工具vi进行操作****

大数据学习路线：

• Java入门课程与Linux基础学习
• Hadoop学习之旅：架构体系与核心原理
  ①第一阶段：

• 数据存储引擎：<1>HDFS（基于文件系统的方式）
• 计算框架：<2>MapRedu