티스토리 뷰

Microsft Azure/고급 분석

Hadoop Distribution

정홍주 2013. 12. 2. 08:00

 

Hadoop Distribution

 

Hadoop은 오픈 소스인데 Hadoop Ecosystem의 여러 오픈 소스 프로젝트를 묶어 배포하고 교육이나 컨설팅, 또는 추가 솔루션을 탑재하는 곳이 크게 외국 업체로 3 군데가 있습니다. 국내에도 업체들이 있습니다.

간략히 한번 살펴보겠습니다.

l  Coudera

http://www.cloudera.com

CDH(Coudera’s Distribution including Apache Hadoop)의 다이어그램은 아래 그림을 참고하실 수 있습니다.

출저: http://www.cloudera.com/content/cloudera/en/products-and-services/cdh.html

구체적인 오픈소스 프로젝트가 잘 안 보이는데 아래 링크에서 확인이 가능합니다.

http://www.cloudera.com/content/cloudera/en/products-and-services/cdh/projects-and-versions.html

 

l  Hortonworks

http://hortonworks.com

HDP(Hortonworks Data Platform) 의 다이어그램은 아래 그림을 참고하실 수 있습니다.

 

출처: http://hortonworks.com/products/hdp/

위 링크에서 구체적인 프로젝트를 살펴 보실수 있습니다. 현재 HDP 버전은 2.0을 제공하고 있습니다. HDPWindows를 제공하고 있으므로 플랫폼을 구성할 때 Windows 또는 Linux를 고려할 수 있습니다. Microsoft에서는 HDInsight 라는 이름으로 제공되고 있습니다. Windows Azure 에서는 HDInsight 서비스로 HDP가 구성되어 있어 클라우드의 서비스로 하둡을 구성할 수 있습니다.

 

l  MapR

http://www.mapr.com/

MapR의 다이어그램은 아래 그림을 참고할 수 있습니다.

출처: http://www.mapr.com/Download-document/7-MapR-White-Paper

 Windows Azure 에서는 HDInsight 서비스를 구체적으로 다루어보기 위해 도입부로 본 글을 작성합니다.

 

 

'Microsft Azure > 고급 분석' 카테고리의 다른 글

Windows Azure의 HDInsight 시작  (0) 2014.01.17
MapReduce 2.0 (MRv2), YARN  (0) 2013.12.09
빅 데이터 활용 기술 및 솔루션  (0) 2013.05.06
데이터 과학자 – Data Scientist  (1) 2013.04.24
D3  (0) 2013.04.22
댓글