병렬 처리 프레임워크의 종류와 특징

Hadoop

- 대용량 데이터를 분산처리 할 수 있는 자바 기반의 오픈소스 병렬 처리 프레임워크

- 데이터가 여러 노드에 분산되어 저장되기 때문에 손실의 우려가 없다는 장점

 

Spark

- 메모리 내 처리를 지원하여 빅 데이터를 분석하는 애플리케이션의 성능을 향상시키는 오픈 소스 병렬 처리 프레임워크

- 메모리를 사용해 데이터를 처리하기 때문에 하둡보다 100배 빠름