맵리듀스(Map Reduce)

클러스터 환경에서 알고리즘을 사용하여 빅데이터를 처리하고 생성하는 소프트웨어 인프라(프레임워크)다. 이 프로그램은 데이터를 필터링과 정렬을 하는 맵(Map) 과정과 이를 요약하는 방법(Reduce)으로 되어 있다. 맵리듀스는 다양한 작업을 병렬로 실행하고 시스템의 여러 부분 간의 모든 통신 및 데이터 전송을 관리하며 중복성을 제거하는 과정을 진행한다. 하둡(Hadoop)은 많은 분야에서 대용량 데이터 처리를 위한 핵심 기술로 맵리듀스를 활용하고 있다. 맵리듀스라는 이름은 처음에는 구글의 독점적인 기술로 여겨졌지만 이후 일반화되었으며 2014년 이후 더 이상 구글은 맵리듀스를 주요 빅데이터 처리 모델로 사용하지 않고 있다.
- 다음
- 머니퓰레이터(manipulator) 2018.12.12
- 이전
- 맥 주소(MAC address) 2018.12.12
