Sparkはどれくらいの規模のクラスタに拡張できるのか？
多くの組織では、数千ノードのクラスタでSparkを実行している。我々が知っている最大のクラスターは8000台だ。データサイズに関しては、Sparkはペタバイトまでうまく機能することが示されている。100TBのデータを1/10のマシンでHadoop MapReduceの3倍速くソートし、2014年のDaytona GraySort Benchmarkで優勝したほか、1PBのソートにも使用されている。いくつかの本番ワークロードでは、スパークを使用して数PBのデータでETLとデータ分析を行っている。