Apache Spark Cluster 구성
Tips
2021. 10. 10. 21:48
아래의 블로그가 매우 유용하였다. https://velog.io/@somnode/spark-cluster-install [spark] Spark 3 클러스터 설치 두 개의 컴퓨터를 사용하여 hadoop 클러스터 위에서 돌아가는 spark 클러스터를 설치한다.각각 master, worker1라고 한다.이미 hadoop cluster가 구축되어있다는 가정 하에 진행한다.\[hadoop] Cluster 설치 참고 velog.io Hadoop Cluster 위에서 동작하는 Spark를 설치하는 것이므로 먼저 Hadoop Cluster를 설치해야 한다. 이 글을 참고하여 먼저 Hadoop Cluster를 구성해주자. Spark를 설치한 환경은 1개의 Master, 2개의 Slave의 총 3개의 서버로 구성하였다...
