1.内存优化
% q2 Y) P8 {9 @2小文件过多问题5 A/ h z! z! l5 p) v
3.spark sql合理利用cpu资源
; |: f: p$ h. Q8 k/ ]+ d+ j4.spark sql广播join
" }3 u& ?/ T# t5 X5 O0 r5.提高并行度解决数据倾斜错误演示
# \( w6 h+ N# l0 N6.解决数据倾斜打散大表扩容小表
2 ^+ f- @7 T% N5 q4 z. N7.大表join大表优化SMBJoin& V& y1 z: f' O% |5 R
8.使用堆外内存. G2 c0 F% }6 l2 [
9.spark 3.0AQE动态缩小分区8 o/ t" I: z; Z5 u+ T) n
10.spark 3.0AQE动态选择join策略
7 U# t. `% {5 r0 e2 a% Z$ W11 spark3.0AQE动态优化倾斜join
1 p+ v) K+ {2 i5 z* W' d12 sparak3.0 dpp动态分区修剪
' P, {5 ]( z8 p
$ k, i0 |& A" N, T本站精挑细选，只分享优质精品资源，已泛滥、已过时、质量差的资源不录入！
$ V8 W6 [4 ~7 x9 U) p: A
5 B* n( P# V; G% L& Y& x4 N
4 p% R1 b$ j- s* V' u
5 E) t8 a; V, j; F
. A( w/ ?3 L, e a/ ~' \
|
/1 
