タグ: #whole-stage-codegen
GPU・LLM・MLOps・Kubernetes、そしてマインドセット · 1 件
Apache Spark 内部完全ガイド 2025: RDD, Catalyst Optimizer, Tungsten, Whole-Stage Codegen, Shuffle 深層解析
Spark が同じクエリを MapReduce より 100 倍速く処理する秘訣。RDD から DataFrame/Dataset、Catalyst optimizer、Tungsten project、whole-stage code generation、shuffle 最適化まで完全解析する。
2026-04-15 · 17 分で読めます #spark#catalyst#tungsten#rdd#whole-stage-codegen