1.内存优化
# L. \2 k9 T& a) T3 G+ y. f1 F2小文件过多问题# v$ i) @& c! r; S8 `. k
3.spark sql合理利用cpu资源/ A2 E% ~; Z+ c/ o7 q2 V2 L
4.spark sql广播join
: H# r+ u z$ w8 t- e7 b+ `: }5.提高并行度解决数据倾斜错误演示! ]" ~( \' r3 D0 F+ ?, x
6.解决数据倾斜打散大表扩容小表2 c$ O, V% ?: r" i+ `- b. D8 Q
7.大表join大表优化SMBJoin: p7 D l2 x" X" b* C3 N
8.使用堆外内存; m0 D, t" H+ b" N p
9.spark 3.0AQE动态缩小分区* ?' M& d- Z/ O* o) [# v
10.spark 3.0AQE动态选择join策略; c3 n6 k- P. X) x) f! N
11 spark3.0AQE动态优化倾斜join2 X" [8 L5 t" u, _$ V9 R# ^
12 sparak3.0 dpp动态分区修剪
/ y$ r1 y, k- c9 E* ?8 L0 @' T N
- b* e+ k& j, F本站精挑细选,只分享优质精品资源,已泛滥、已过时、质量差的资源不录入!- _! y2 b3 C- a7 u: W7 K
) S" m6 r/ p" X9 {8 T% i
8 }: D! i% t2 f# ]' @0 M. T/ n; C, ]+ A' A; R* w% I
8 ^' E3 ^+ Z6 K7 y
|