빅데이터분석기사 (빅분기) / 01 분석기획
스파크가 맵리듀스보다 반복 연산에서 빠른 주된 이유는?
- 중간 결과를 메모리에 올려 두고 재사용하기 때문입니다
- 데이터를 압축하지 않기 때문입니다
- 디스크 용량을 더 많이 쓰기 때문입니다
- 네트워크를 쓰지 않기 때문입니다
정답과 해설 보기
1. 중간 결과를 메모리에 올려 두고 재사용하기 때문입니다
맵리듀스는 단계마다 결과를 디스크에 쓰지만 스파크는 메모리에서 이어 갑니다. 그래서 같은 데이터를 반복해 훑는 기계학습에서 차이가 크게 벌어집니다.
모던지가 직접 쓴 문항입니다. 시행기관과 관계가 없습니다.