Spark安装：Standalone

Spark安装部署：Standalone模式

文章结构概述

• • Spark安装部署：Standalone模式
    • 1、实验说明
    • 2、实验配置环境
    • 3、所需掌握的能力
    • 4、涉及的核心内容
    • 5、达成的成果展示
    • 6、操作流程
    • 7、归纳与反思

1、实验设计与实施

• 采用Spark Standalone运行模式部署Spark集群

  • 实验持续时间：

    • 45分钟

  • 核心操作流程：

    • 对Spark安装包进行解压处理
    • 配置Spark相关参数文件
    • 初始化并启动Spark集群环境
    • 执行测试程序以验证功能

2、实验环境配置与说明

• 虚拟机数量：3台（包含1台主节点及2台从节点，对应的主机名称依次为：master、slave01、slave02）
  • 操作系统版本：Centos 7.5
  • Hadoop软件版本：Apache Hadoop 2.7.3
  • Spark软件版本：Apache Spark 2.1.1

3、相关技能

• Spark Standalone的安装与配置部署

4、知识点

• 常用Linux操作指令的应用