스파크는 무엇이고 왜 쓰는지?
스파크란? 기존 애플리케이션은 단일 프로세서에서 실행되도록 설계되었습니다. 문제는 데이터 양이 시간이 지날수록 기하급수적으로 증가한다는 점입니다. 방열의 물리적 한계 때문에하드웨어 성능의 향상은 중지되었다는 것입니다. 단일 프로세서의 성능을 높이는 대신 개발자는 여러 CPU 코어를 병렬로 추가하기로 결정했습니다. 이미 데이터는 날이 갈수록 커지고 결국 너무 커서 더 이상 클러스터에서 처리할 방법이 없습니다. 스파크가 이 문제를 해결한 것 같습니다. … Read more