김영찬
CDP PvC Install #4 - After Installation
Cloudera PvC 설치 후에 Cloudera Manager Console에서 초기 설정할 내용을 설명합니다. // Cloudera Manager Admin Console Language 설정 브라우저의 언어 설정에 따름(영어로 설정)...
top of page
Welcome to Futuresoft
퓨처소프트가 만들어 가는 새로운 세상을 여러분에게 소개합니다
검색
김영찬
2022년 3월 24일2분 분량
CDP PvC Install #3 - CDP PvC Trial Install
Cloudera PvC Trial 버전을 설치하고 setup하기 위한 절차와 내용을 설명합니다. // Cloudera CDP Installation Procedure : for CDP PvC trial Install DBMS for CDP Run...
조회수 77회댓글 0개
김영찬
2022년 3월 24일2분 분량
CDP PvC Install #2 - DBMS Install & Setup
Cloudera CDP PvC(Private Cloud Base)의 Cloudera Manager를 위한 관리용 DBMS를 설치하고 setup하기 위한 내용을 설명합니다. DBMS는 MariaDB를 기준으로 설명합니다. // 기존 OS에 설치된...
조회수 28회댓글 0개
김영찬
2022년 3월 24일4분 분량
CDP PvC Install #1 - Server Prerequsite
Cloudera PvC를 설치하기 위해 사전에 준비해야할 업무에 대해서 설명합니다. // Cloudera CDP Private Cloude Base Trial 관련 자료 CDP Private Cloud Trial Version 다운로드 :...
조회수 78회댓글 0개
김영찬
2022년 3월 24일1분 분량
Cloudera Hadoop Platform
Cloudera의 Hadoop Ecosystem인 CDP(Cloudera Data Platform)의 PvC(Private Cloud) 시스템 구성과 내용에 대해서 설명합니다.
조회수 9회댓글 0개
김영찬
2022년 3월 24일1분 분량
YARN & AWS Commands
YARN과 AWS CLI 를 위한 명령어를 설명합니다. YARN Commands yarn application -list yarn application -kill app-id // app-id는 YARN Web UI에서 확인 yarn...
조회수 10회댓글 0개
김영찬
2022년 3월 24일2분 분량
HDFS Commands
HDFS(Hadoop File System) 명령어 기초를 설명합니다. // hdfs dfs 명령어 기초 hdfs dfs == hadoop fs hdfs dfs -setrep -R 8 /pathway : /pathway 디렉토리의...
조회수 11회댓글 0개
김영찬
2022년 3월 23일1분 분량
Kudu Failover Architecture
Kudu는 Master Server와 Tablet Server로 구성 Tablet은 table의 일부를 저장하는 저장소 Tablet Server는 데이터 저장과 처리를 책임 Master Server는 데이터는 저장하지 않고 메타데이터(스키마)...
조회수 8회댓글 0개
김영찬
2022년 3월 23일2분 분량
HDFS Failover Process
용어설명 NameNode : HDFS 파일 시스템의 핵심입니다. 파일 시스템의 모든 파일에 대한 디렉토리 트리를 유지하고 클러스터에서 파일 데이터가 보관되는 위치를 추적합니다. 이 파일 자체의 데이터는 저장하지 않습니다. DataNode :...
조회수 16회댓글 0개
김영찬
2022년 3월 23일1분 분량
Hadoop Daemon 기동 과정
Namenode 가동 -> START-UP 메시지(standby), Zookeeper에 Namenode 를 standby 상태로 기록 Load FsImage : 가장 최근 저장된 스냅샷 반영 Journalnode의 Edit Log로...
조회수 9회댓글 0개
김영찬
2022년 3월 23일3분 분량
Hadoop Terminology
Hadoop Ecosystem(Cloudera CDP)을 관리하는데 필요한 요소와 용어를 정리하면 다음과 같습니다. YARN(얀) : 분산 클러스터의 처리를 효율적으로 관장하기 위한 리소스 관리자(Hadoop 기본 구성) Mesos(메소스) :...
조회수 19회댓글 0개
bottom of page