วิศวกรที่เขียน Spark job พื้นฐานได้แล้ว แต่ต้องรัน job ประมวลผลข้อมูลขนาดใหญ่ให้เสร็จตรงเวลาทุกครั้ง คอร์สนี้พาไปเข้าใจ partitioning, shuffle, ANSI SQL mode และ testing/CI-CD ของ Spark 4.0

วินิจฉัยปัญหา performance ผ่าน Spark UI และ execution plan

แก้ปัญหา partitioning, shuffle และ skew join

เข้าใจผลกระทบของ ANSI SQL mode ใน Spark 4.0

ตั้ง testing และ CI/CD สำหรับ Spark job