티스토리 뷰

프로그래밍/Hadoop

하둡공부 방법

Hading 2017. 3. 10. 17:54

보통은 hadoop.apache.org 에 있는 문서나 튜토리얼을 잘 찾아 보는게 기본입니다. 궁금해 하시는 부분들은 Architecture 문서들을 잘 읽어보는게 중요합니다.

특히 아래의 3가지는 꼭 읽어보시기 바랍니다.


HDFS: http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/HdfsDesign.html


MapReduce: http://hadoop.apache.org/docs/current/hadoop-mapreduce-client/hadoop-mapreduce-client-core/MapReduceTutorial.html


Yarn: http://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-site/YARN.html


hadoop 자체는 분산 파일 시스템 (hdfs) 와 분산 컴퓨팅 시스템 (Yarn) 으로 이루어져 있으며, 이를 기반으로 한 다양한 플랫폼이 존재합니다. 하둡 공식 페이지 뿐만 아니라, cloudera 나 hortonworks 같은 업체 홈 페이지를 잘 돌아다녀도 하둡과 연동되는 다양한 플랫폼에 대한 정보를 얻으실수 있습니다.

처음 공부하시는 분이라면 간단한 한글 책을 보면서 공부하시는 것도 좋은 방법입니다. 다만 디테일한 부분은 오픈소스 특성상 시간이 지나면 새로운 기술들이 적용되므로 HDFS, MapReduce, Yarn에 대한 이해를 높이면 새로운 기술이나, 플랫폼을 익히는데도 도움이 됩니다.

공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
TAG
more
«   2024/07   »
1 2 3 4 5 6
7 8 9 10 11 12 13
14 15 16 17 18 19 20
21 22 23 24 25 26 27
28 29 30 31
글 보관함