Impala/Presto/ES/kudu/Parquet TPC_DS基线性能评估(基准)
发布时间
阅读量:
阅读量
使用Impala/Presto/ES/kudu/Parquet基准测试
目的
本次测试报告旨在为研究OLAP性能设计归纳分析了不同存储查询方案的可行性。
背景
鉴于数据量的增长以及用户并发操作带来的服务器压力问题,在不改变系统配置的前提下,实施针对kudu、parquet、presto及Es等存储及查询功能的性能测试,并通过观察各计算引擎运行时间消耗情况的数据分析结果来辅助选择合适的解决方案。
环境准备
在本次测试方案中设置了特定的硬件架构,在其中部署了多台服务器设备,并采用了统一的操作系统版本进行管理。
在本测试方案中对计算资源进行了详细规划,在服务器集群上实现了稳定可靠的运行状态。
针对本次实验任务需求,在计算平台构建阶段选择了多节点集群架构,并以统一的操作系统版本为基础完成部署。
为了满足实验过程中的稳定运行需求,在硬件资源选择上采用了多节点集群架构,并以版本一致的操作系统为基础完成部署安排。
在当前实验项目的实施过程中,在计算资源规划阶段确定了多节点集群架构的设计方案,并选择了一致的操作系统版本进行安装部署。
为了确保实验顺利进行,在计算资源规划阶段确定了具体的服务器数量与配置参数设置,并选择了一致的操作系统版本进行安装部署。
| 服务器 | cpu核数 | 内存大小 | 磁盘空间 |
|---|---|---|---|
| server1 | 40 | 192g |
全部评论 (0)
还没有任何评论哟~
