首页 > 其他 > 详细

【原创】大数据基础之Benchmark(4)TPC-DS测试结果(hive spark impala)

时间:2019-03-11 17:02:34      阅读:550      评论:0      收藏:0      [点我收藏+]

1 测试集群

内存:256G
CPU:32Core (Intel(R) Xeon(R) CPU E5-2640 v3 @ 2.60GHz)
Disk(系统盘):300G
Disk(数据盘):1.5T*1

2 测试数据

tpcds parquet 10g

3 测试对象

hive-2.3.4 【set mapreduce.map.memory.mb=4096; set mapreduce.map.java.opts=-Xmx3072m;】【yarn 200g*3】
hive-2.3.4 on spark-2.4.0 【--master yarn --num-executors 10 --executor-memory 4g】
spark-2.4.0 【--master yarn --num-executors 10 --executor-memory 4g】
impala-2.12 【MEM_LIMIT=20gb * 3】

4 测试结果

技术分享图片

ps:0 means 执行失败

 

技术分享图片

 

【原创】大数据基础之Benchmark(4)TPC-DS测试结果(hive spark impala)

原文:https://www.cnblogs.com/barneywill/p/10511500.html

(1)
(1)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!