Apache Hadoop — HDFS 와 YARN 을 한 파드에 세우고 운영한다
Hadoop 3.5 를 파드 하나에 의사 분산으로 띄워 NameNode 와 DataNode 가 무엇을 나눠 갖는지, 블록과 복제, 권한과 ACL, 이름·공간 쿼터, 휴지통과 스냅샷, fsimage 와 edits, 맵리듀스와 Hadoop Streaming, YARN 컨테이너 크기와 대기열, 작은 파일과 하둡 아카이브까지 다룹니다. 판정은 NameNode 와 잡 이력에 남은 사실로 합니다. 리눅스 셸이 익숙한 분을 위한 과정입니다.
중급 · 레슨 30 · 실습 10
커리큘럼
HDFS 의 두 역할
블록과 복제
- 파일은 블록으로 쪼개져 DataNode 디스크에 놓인다 reading
- 12MiB 파일을 블록으로 쪼개 디스크까지 따라간다 lab
- 퀴즈: 블록과 복제 quiz
권한과 사용자
- 단순 인증은 당신이 말하는 이름을 그대로 믿는다 reading
- 재무 폴더를 한 팀에만 열고 다른 사람에게 읽기만 준다 lab
- 퀴즈: 권한과 사용자 quiz
쿼터
스냅샷과 휴지통
- 지운 파일을 되돌리는 두 길 — 휴지통과 스냅샷 reading
- 실수로 지운 파일을 휴지통과 스냅샷에서 되살린다 lab
- 퀴즈: 스냅샷과 휴지통 quiz