[Python] MacOS pyspark 설치 방법

서론

이번 글에서는 MacOS 운영체제에서 pyspark 설치 방법을 알아보고자 한다.

설치 방법

$ java -version

pyspark를 사용하기 위해서는 자바가 설치되어 있어야 한다.

위 명령어를 입력했을 때 자바가 설치되지 않은 경우 자바를 먼저 설치한다.

 

자바 설치 방법은 아래 글을 참고하였다.

 

• https://phoenixnap.com/kb/install-java-macos

How to Install Java on Mac | phoenixNAP KB

자바가 정상적으로 설치되었을 경우 명령어를 입력하면 아래와 같은 화면이 출력된다.

그림1. 자바 버전 확인 명령어

$ pip3 install pyspark

다음으로는 pip 명령어를 통해 pyspark를 설치한다.

필자는 Python 3.x.x 버전을 사용하므로 pip3 명령어를 통해 설치를 진행했다.

 

설치가 완료되면 터미널에 pyspark 명령어를 입력하여 실행할 수 있다.

그림2. pyspark 실행 결과

결언

다음 글에서는 pyspark를 이용한 Spark Programming에 대해서 다룰 예정이다 :)