PySpark란 무엇인가요?
PySpark는 Python에서 Apache Spark를 위한 인터페이스입니다. Python API를 사용하여 Spark 애플리케이션을 작성할 수 있을 뿐만 아니라 분산 환경에서 데이터를 대화형으로 분석하기 위한 PySpark 셸도 제공합니다. PySpark는 Spark SQL, DataFrame, Streaming, MLlib(머신 러닝), Spark Core 등 대부분의 Spark 기능을 지원합니다.
What is PySpark?
PySpark is an interface for Apache Spark in Python. It not only allows you to write Spark applications using Python APIs, but also provides the PySpark shell for interactively analyzing your data in a distributed environment. PySpark supports most of Spark’s features such as Spark SQL, DataFrame, Streaming, MLlib (Machine Learning) and Spark Core.