전문인력양성

강좌명 [SK 플래닛] 빅데이터 분석 및 분산처리를 위한 하둡
교육기간 2015-11-11 ~ 2015-11-13 (3일, 24시간)
교육시간 09시 00분 ~ 18시 00분
신청기간 2015-11-03 ~ 2015-11-10
난이도 초급
신청자격 하둡, NoSQL을 통한 빅데이터 처리를 학습하고자 하시는 분 누구나
수강정원 20
태그 빅데이터 하둡 NoSQL 맵리듀스
교육장소 부산모바일앱센터 교육실
교육목표 빅데이터 개념 및 구성요소 및 빅데이터 처리방법을 단계별로 습득한다. 빅데이터 출현 원인 - 스마트 기기의 출현 / SNS 일반화 왜 하둡인가 - 오픈소스 / 분산 데이터 저장 / 처리 / 장애발생 해결 하둡 시스템 구축 - 클라우드 컴퓨팅 / 빅데이터와 하둡 / 아키텍처 / 클러스터 하둡 분산 파일 시스템 - 설계 / HDFS개념 / 네임노드 / 메타 데이터 구조 / 관리
교육내용

 일 정

 세 부 내 용

 비 고

11/11()

1일차 

 

 빅데이터 개념 및 구성요소

빅데이터 출현 원인
- 스마트 기기의 출현 / SNS 일반화

왜 하둡인가
- 오픈소스 / 분산 데이터 저장 / 처리 / 장애발생 해결

하둡 시스템 구축
- 클라우드 컴퓨팅 / 빅데이터와 하둡 / 아키텍처 / 클러스터

하둡 분산 파일 시스템 

- 설계 / HDFS개념 / 네임노드 / 메타 데이터 구조 / 관리

 

11/12()

2일차 

 

 빅데이터 처리과정 4단계

- 획득 / 구조화 / 분석 / 결정과정

맵리듀스
- 개념 / 아키텍처 / 개발환경설정 / 맵퍼 및 리듀서 구현

맵리듀스 작동과정
- 잡 제출 / 잡트래커 / 잡스케줄러 / 태스크트래커 수행

하둡 버전별 특징 이해
- 버전별 구성요소 / 보안기능 / 분산파일 시스템 변경

하둡 클러스터 설정
- 네트워크 / 클러스터 설정 / 벤치마킹

클라우드 컴퓨팅과 하둡 

- 대규모 하둡 클러스터 구축 기법 / 인프라 구축 / 운영

 

11/13()

3일차

 

 

 하둡 에코 시스템1

- Zookeeper / HBase / Pig / Hive / Mahout

하둡 에코 시스템2
- Oozie / HCatalog / Avro / Chukwa / Flume / Scribe

NoSQL 연동
- CAP 이론 / NoSQL 종류와 특징 / 데이터 모델 / 비교분석

고급 분석 기술 소개
- HDFS 영속 데이터 관리 / 안전모드 / 검사로깅 / 도구 / 모니터링

프로그래밍 방법 및 실습 

- 맵 사이드 정렬 / 리듀스 사이드 정렬 / 맵 리듀스 튜닝

 

부산모바일앱센터 이용약관 | 개인정보처리방침
부산광역시 해운대구 센텀동로 41(우2동 1475번지)
센텀벤처타운 301호 부산모바일앱센터
 Tel. 051.749.9453~4 FAX. 051.743.0616


(c)Copyright BMAC All rights reserved
한국정보보호산업협회