1.内存优化
3 A2 g9 T* p0 l4 K2小文件过多问题
! r! x) I: J3 ?9 W3.spark sql合理利用cpu资源
& }" `" S, l. J8 J4.spark sql广播join1 j1 K8 K5 ?( {+ \5 c" C
5.提高并行度解决数据倾斜错误演示
0 A0 t) _/ E* S' M' x% i7 V6.解决数据倾斜打散大表扩容小表
3 s1 z7 Y. @( ^( m0 h7.大表join大表优化SMBJoin
$ P& s, ?- Z: H8 e+ l, }8.使用堆外内存. g) w3 S5 Z6 w
9.spark 3.0AQE动态缩小分区
L; N( q0 D4 n, |0 L10.spark 3.0AQE动态选择join策略
$ R1 ^8 I9 Y9 C( n- Y11 spark3.0AQE动态优化倾斜join
- h; W% W( U1 R; F6 o) S12 sparak3.0 dpp动态分区修剪4 v- G- m$ d7 Y4 n2 Y
7 v% K1 p: v6 L# h1 d
本站精挑细选，只分享优质精品资源，已泛滥、已过时、质量差的资源不录入！
' Q2 ^7 E5 m! @+ x/ o! K, g" ~. e: p; l6 K, f5 z$ f8 W1 B
Y ]+ j- `5 }9 P
& K* w+ D3 u- ~1 S: P O/ F0 Y; x5 m A$ e1 ~0 \- K- i) t& ?
|
/1 
