공지사항
빅데이터 처리 2
등록일: 2024-11-01 15:19:19
|
작성자: 관리자
기간:
2024-11-01~2024-11-30
장소:
온라인
○ 교육목적
- 수집 데이터의 크기, 생성 속도, 빈도에 따른 빅데이터 처리 전략, 방침과 수집 데이터의 크기, 생성 속도, 종류에 따라 분산병렬처리 모델을 정의
- 분산병렬처리 모델에 따라 데이터의 분산 저장 구조를 정의하고, 분산파일시스템에 블록단위로 데이터를 저장
- 정제한 데이터를 저장소에 저장하여 목적하는 응용시스템을 구축하거나, 응용 뷰(View)를 작성
○ 교육내용
1차시
1.맵리듀스 프레임워크
2차시
2.빅데이터 분산 저장 구조
3차시
3.HDFS에 파일 저장하기
4차시
4.맵리듀스
5차시
5.맵리듀스 소스코드 분석하기
6차시
6.맵리듀스 작업 실행하기
7차시
7.피그를 이용한 데이터 처리
8차시
8.피그를 활용한 데이터 분석
9차시
9.하이브를 이용한 데이터 처리
10차시
10.하이브를 활용한 데이터 분석
11차시
11.스트림 데이터 분석을 위한 분산 시스템 처리
12차시
12.스파크 대화용 프로그램 실행하기
13차시
13.스파크 응용 프로그램 실행하기
14차시
14.스파크 스트리밍
15차시
15.스파크 스트리밍 작업 실행하기
신청하기 : https://kacademy.kisti.re.kr/eduappl/eduappl/eduActiveViewInfo.do?crsOprtnSeq=427
