김영찬2022년 3월 23일1분 분량Kudu Failover ArchitectureKudu는 Master Server와 Tablet Server로 구성 Tablet은 table의 일부를 저장하는 저장소 Tablet Server는 데이터 저장과 처리를 책임 Master Server는 데이터는 저장하지 않고 메타데이터(스키마)...
김영찬2022년 3월 23일2분 분량HDFS Failover Process용어설명 NameNode : HDFS 파일 시스템의 핵심입니다. 파일 시스템의 모든 파일에 대한 디렉토리 트리를 유지하고 클러스터에서 파일 데이터가 보관되는 위치를 추적합니다. 이 파일 자체의 데이터는 저장하지 않습니다. DataNode :...
김영찬2022년 3월 23일1분 분량Hadoop Daemon 기동 과정Namenode 가동 -> START-UP 메시지(standby), Zookeeper에 Namenode 를 standby 상태로 기록 Load FsImage : 가장 최근 저장된 스냅샷 반영 Journalnode의 Edit Log로...
김영찬2022년 3월 23일3분 분량Hadoop TerminologyHadoop Ecosystem(Cloudera CDP)을 관리하는데 필요한 요소와 용어를 정리하면 다음과 같습니다. YARN(얀) : 분산 클러스터의 처리를 효율적으로 관장하기 위한 리소스 관리자(Hadoop 기본 구성) Mesos(메소스) :...