1.内存优化0 W( [ \- S' R4 g& J
2小文件过多问题, k: r) Q9 | v1 F
3.spark sql合理利用cpu资源- h* K8 A- D1 E' u
4.spark sql广播join+ x1 A* G2 K" _ b, m: r
5.提高并行度解决数据倾斜错误演示0 s) i ~# ~7 {3 m& I. g& E ^8 l
6.解决数据倾斜打散大表扩容小表
- G, \0 U! e- B- X8 Z) N7.大表join大表优化SMBJoin/ d$ R6 O2 S/ Z } L x
8.使用堆外内存5 Z$ z% o! g- j+ Y* D) n! i
9.spark 3.0AQE动态缩小分区. U7 S. r9 Q6 W3 M* k. S, K
10.spark 3.0AQE动态选择join策略* h) R) x3 t& M7 \) M8 u& M
11 spark3.0AQE动态优化倾斜join7 j; X6 E. l1 m4 [* A" H2 }
12 sparak3.0 dpp动态分区修剪
3 o+ K! p- x9 d7 s
9 j' ]! S! | Z! e本站精挑细选，只分享优质精品资源，已泛滥、已过时、质量差的资源不录入！( b. E$ o9 L$ O) d
- h* n/ t0 W9 p5 X
+ C2 G9 O3 D+ {, K) B- i# O
' S% T" }0 h7 z7 y
4 Q: u+ {5 X/ D9 Z$ J
|
/1 
