1.内存优化3 I! \1 a" H: j$ |; ]
2小文件过多问题- Z b: Z* X8 X* |/ {" {
3.spark sql合理利用cpu资源
5 t" U9 b% H4 b. r+ z( h4.spark sql广播join
3 j. }6 x* t- l, t! R5.提高并行度解决数据倾斜错误演示
6 k5 @- g( Z* g5 o6 h6.解决数据倾斜打散大表扩容小表
" @( y: R- y2 n! T1 _; m$ B7.大表join大表优化SMBJoin
0 o" L+ ]- A* T- u$ g0 V8.使用堆外内存$ ^% p9 k. m1 N& o& b, v% |
9.spark 3.0AQE动态缩小分区# Q/ N/ H4 Y d" e8 g* _; w
10.spark 3.0AQE动态选择join策略3 F3 q5 H0 F4 m5 g0 P
11 spark3.0AQE动态优化倾斜join. _& ~* A) B' ^- ]: U
12 sparak3.0 dpp动态分区修剪
n/ k. {4 V) f7 q
6 M8 h9 p0 z' p2 W" x) O5 V2 ~+ L本站精挑细选,只分享优质精品资源,已泛滥、已过时、质量差的资源不录入!- i# c9 z/ ?+ ]# G+ x
* y$ u3 I/ A2 {& [. |" R
: r7 ?" {9 k! E0 q8 \3 M0 K
7 C& i" L4 m+ k) h8 i: z# f9 Q6 W! b
|