1.内存优化
2 J1 L- T, ^" F! q; B8 R3 h4 T2小文件过多问题
4 ?: F: |1 m1 H* @2 E/ ^3.spark sql合理利用cpu资源4 F/ \3 B# m/ R7 e( m& P. U
4.spark sql广播join+ E& _3 L) b3 Z- M
5.提高并行度解决数据倾斜错误演示
- Y" f, e" [, x% O, z2 `" L6.解决数据倾斜打散大表扩容小表/ y( f) @- A% P, K1 d8 Q% F
7.大表join大表优化SMBJoin
% B5 w1 A, M: N; Q5 y8 f V, T8.使用堆外内存/ x: P4 T3 O' b$ v/ K
9.spark 3.0AQE动态缩小分区
h `, d. I8 R1 w5 r% ^" u( y10.spark 3.0AQE动态选择join策略: b2 a5 Q2 o/ @$ z$ I9 N! |2 J8 P
11 spark3.0AQE动态优化倾斜join
" Y6 Y! O6 Q% {2 P" Z12 sparak3.0 dpp动态分区修剪
, q3 R& z7 J: ^7 |( f7 h) o/ u# y' I5 I+ y( V" r; f/ u& u6 _
本站精挑细选，只分享优质精品资源，已泛滥、已过时、质量差的资源不录入！# S3 [. k3 ]# ]. R
* N( W# @' q: f$ x c
. F' X2 _, t3 Y- q- n/ d/ s0 [' j, g
: O, ~. T* q8 Q' X
|
/1 
