P-01選定・相談

Apache Sparkはどのクラスタマネージャー上で実行できますか?

Apache Sparkの導入形態について、Apache Spark公式のofficial product documentation page ('Cluster Mode Overview')(https://spark.apache.org/docs/latest/cluster-overview.html)で確認できます。None of the existing References describe how/where Spark actually runs in production (deployment/cluster-manager options); existing content stays at the level of processing paradigms (batch/streaming/ML) and organizational history, so this is a genuinely new deployment-focused fact.具体的には「Apache Spark currently officially supports three cluster managers for deployment: its own built-in Standalone cluster manager, Hadoop YARN, and Kubernetes; Apache Mesos, which was historically supported, is not listed among the currently supported cluster managers on this documentation page.」といった記載が確認できます。限界として、提供形態の詳細(対応地域・対応バージョン等)はこのSourceからは確認できません。 This reflects the current ('latest') version of the documentation; it does not state exactly when Mesos support was removed, and does not cover cloud-vendor-managed Spark offerings (e.g. Databricks, AWS EMR, Google Dataproc) which layer on top of these underlying cluster managers.Current Statusとして、2026年08月23日に当該Sourceを取得し、上記の内容を確認しました。Source種別としては、これは提供元自身による自社情報の公表であり、第三者による独立した評価や市場での位置づけとは性質が異なります。

実績・根拠

情報ソース