PySparkとは何ですか？
PySparkはPythonによるApache Sparkのインターフェースである。PythonのAPIを使ってSparkアプリケーションを記述できるだけでなく、分散環境でインタラクティブにデータを分析するためのPySparkシェルも提供する。PySparkは、Spark SQL、DataFrame、Streaming、MLlib（機械学習）、Spark Coreなど、Sparkのほとんどの機能をサポートしている。