研究文章

在火花SQL查询执行优化

表1

对比计算和实际调整大小。

ID 1 2 3 4 5 6 7 8 9 10 11

一般任务 9 114年 14 119年 7 14 9 22 14 7 7
输入(MB) 256年 2688年 384年 2560年 512年 384年 128年 128年 256年 640年 256年
计算调整大小 27 282.4 40.3 269年 53.81 40.35 13.45 15.05 28.03 67.25 29.06
实际调整大小 25 267.58 38.2 254.8 50.96 38.22 12.76 12.76 25.48 63.71 25.48