퓨처소프트가 만들어 가는 새로운 세상을 여러분에게 소개합니다

Cloudera PvC 설치 후에 Cloudera Manager Console에서 초기 설정할 내용을 설명합니다. // Cloudera Manager Admin Console Language 설정 브라우저의 언어 설정에 따름(영어로 설정)...

Cloudera PvC Trial 버전을 설치하고 setup하기 위한 절차와 내용을 설명합니다. // Cloudera CDP Installation Procedure : for CDP PvC trial Install DBMS for CDP Run...

Cloudera CDP PvC(Private Cloud Base)의 Cloudera Manager를 위한 관리용 DBMS를 설치하고 setup하기 위한 내용을 설명합니다. DBMS는 MariaDB를 기준으로 설명합니다. // 기존 OS에 설치된...

Cloudera PvC를 설치하기 위해 사전에 준비해야할 업무에 대해서 설명합니다. // Cloudera CDP Private Cloude Base Trial 관련 자료 CDP Private Cloud Trial Version 다운로드 :...

Cloudera의 Hadoop Ecosystem인 CDP(Cloudera Data Platform)의 PvC(Private Cloud) 시스템 구성과 내용에 대해서 설명합니다.

YARN과 AWS CLI 를 위한 명령어를 설명합니다. YARN Commands yarn application -list yarn application -kill app-id // app-id는 YARN Web UI에서 확인 yarn...

HDFS(Hadoop File System) 명령어 기초를 설명합니다. // hdfs dfs 명령어 기초 hdfs dfs == hadoop fs hdfs dfs -setrep -R 8 /pathway : /pathway 디렉토리의...

Kudu는 Master Server와 Tablet Server로 구성 Tablet은 table의 일부를 저장하는 저장소 Tablet Server는 데이터 저장과 처리를 책임 Master Server는 데이터는 저장하지 않고 메타데이터(스키마)...

용어설명 NameNode : HDFS 파일 시스템의 핵심입니다. 파일 시스템의 모든 파일에 대한 디렉토리 트리를 유지하고 클러스터에서 파일 데이터가 보관되는 위치를 추적합니다. 이 파일 자체의 데이터는 저장하지 않습니다. DataNode :...

Namenode 가동 -> START-UP 메시지(standby), Zookeeper에 Namenode 를 standby 상태로 기록 Load FsImage : 가장 최근 저장된 스냅샷 반영 Journalnode의 Edit Log로...

Hadoop Ecosystem(Cloudera CDP)을 관리하는데 필요한 요소와 용어를 정리하면 다음과 같습니다. YARN(얀) : 분산 클러스터의 처리를 효율적으로 관장하기 위한 리소스 관리자(Hadoop 기본 구성) Mesos(메소스) :...