참여기관 목록
강좌소개
[수업내용]
날이 갈수록 데이터의 규모가 커지면서 빅데이터 처리의 방법도 다양해지고 있다.
대용량의 데이터를 처리하기 위해서는 규모가 큰 컴퓨팅 리소스를 다루는 기술이 수반되어야 한다.
본 과목에서는 규모가 큰 컴퓨팅 리소스를 다루는 기술을 기반으로, 빅데이터를수집,저장,처리,시각화하기 위해 필요한 분산 처리 기술을 배우고, 그 기술에 기반이 되는 오픈소스 프레임 워크들을 실습해본다.
1. 빅데이터 수집, 저장, 처리, 분석, 시각화의 프레임워크를 활용할 수 있다.
2. 빅데이터 처리 용도로 가장 많이 사용되고 있는 하둡과 맵리듀스의 원리를 이해할 수 있다.
3. 실시간 처리 및 배치 처리에 관해 이해할 수 있다.
[연계과목]
머신러닝 빅데이터 분석
홍보/예시 영상
[강의계획서]
1주차 빅데이터 처리 기술의 개요
빅데이터 처리의 개념과 프레임워크를 통한 빅데이터 처리 방법을 이해 할 수 있다.
l 1차시: 빅데이터 처리 개요
l 2차시: 빅데이터 프레임워크의 개요
l 3차시: 빅데이터 프레임워크의 활용 분야
l 학습활동 : 퀴즈
2주차 빅데이터 기반 기술 - OS 및 가상화기술
빅데이터 처리의 기반 기술이 되는 OS 및 가상화 기술의 원리를 이해하고도커 기반의 실습환경을 만들 수 있다.
l 1차시: 분산 시스템과 리눅스 운영 체제
l 2차시: 가상화 기술
l 3차시: 도커 기반의 실습 환경 만들기
l 학습활동 : 퀴즈
3주차 빅데이터수집 기술
빅데이터 수집 기술에 필요한 기술적 조건을 이해하고, 데이터 수집을 수행할수 있다.
l 1차시: 데이터 수집의 개요
l 2차시: Flume - 데이터 수집 프레임워크
l 3차시: Flume 실습
l 학습활동 : 퀴즈
4주차 빅데이터저장 기술
빅데이터 저장 기술의 개념과 원리를 파악하고 분산파일 시스템(HDFS)을활용할 수 있다
l 1차시: 분산 파일 시스템의 개념
l 2차시: HDFS 개요
l 3차시: HDFS 실습
l 학습활동 : 퀴즈
5주차 빅데이터 처리 기술 1
Hadoop의기본 개념과 특징을 이해하고, Mapreduce 프로그래밍을 수행할 수있다.
l 1차시: Hadoop의 개요
l 2차시: MapReduce 프로그래밍 모델
l 3차시: Hadoop 실습
l 학습활동 : 퀴즈
6주차 빅데이터 처리 기술 2
인메모리 기반의 데이터 처리 기술을 이해하고, Spark를 활용한 데이터처리를 수행할 수 있다.
l 1차시: Spark 개요
l 2차시: Spark 데이터 처리 모델
l 3차시: Spark 실습
l 학습활동 : 퀴즈 / 토론
7주차 빅데이터 처리 기술 3 (실시간 처리)
실시간 데이터의 개념을 이해하고 실시간 데이터 처리 기법을 활용할 수 있다.
l 1차시: 실시간 처리 개요
l 2차시: Kafka : 실시간 처리를 위한 메시지 시스템
l 3차시: Kafka를 활용한 실시간 데이터 처리 실습(실습 시뮬레이션형)
l 학습활동 : 퀴즈 / 과제
8주차 총괄평가(시험)
[이수/평가정보]
l 퀴즈: 20%
l 과제 :30%
l 총괄평가(시험) : 50%
※ 60점 충족 시 이수증 발부
강좌 수준 및 선수요건
- 특별한 선수 요건 없음
교재 및 참고문헌
[교재]
강의자료를 PDF파일로 제공합니다.
강좌운영진
-
김윤기 교수■ 소속 : 고려사이버대학교 미래학부 빅데이터 전공 교수
■ 학력 : 고려대학교 컴퓨터공학 박사
■ 현) 고려사이버대학교 전임교수
■ 전) SK 주식회사 C&C 빅데이터·AI 플랫폼 기술 연구 개발
■ E-mail : ykkim77@cuk.edu
-
이진 튜터■ 고려사이버대학교 매치업 기초과정 튜터
■ 성균관대학교 통계학과 석사과정
■ E-mail : jeweljin99@naver.com
추천강좌
-
컴퓨터 네트워크 진행중 이수증컴퓨터 네트워크
장한승 외 2 명
전남대학교
2026.03.27 ~ 2026.05.18차세대통신 컴퓨터 네트워크 7계층모델-
운영기관
운영기관 전남대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 30시간 00분 (15시간 29분)
-
운영기관
-
바이오헬스 SAS 기초 실습 진행중 이수증바이오헬스 SAS 기초 실습
백종환
대전대학교
2026.03.23 ~ 2026.06.14-
운영기관
운영기관 대전대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 15시간 26분 (13시간 39분)
-
운영기관
-
반도체 공정 입문 진행중 이수증반도체 공정 입문
김재균
한양대학교(ERICA)
2026.04.01 ~ 2026.07.31-
운영기관
운영기관 한양대학교(ERICA)
-
주차
주차 16 주
-
학습인정시간
학습인정시간 (총 동영상시간) 16시간 00분 (05시간 14분)
-
운영기관
-
고급 파이썬과 데이터 분석 진행중 이수증고급 파이썬과 데이터 분석
최기환
한양대학교(ERICA)
2026.04.01 ~ 2026.07.31파이썬 컴퓨터 공학-
운영기관
운영기관 한양대학교(ERICA)
-
주차
주차 16 주
-
학습인정시간
학습인정시간 (총 동영상시간) 16시간 00분 (12시간 47분)
-
운영기관
-
인공지능기술응용 진행중 이수증인공지능기술응용
구영현
세종대학교
2026.03.17 ~ 2026.12.31파이썬 아나콘다 강화학습 인공지능 AI 딥러닝 인공_신경망-
운영기관
운영기관 세종대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 26시간 08분 (18시간 49분)
-
운영기관
-
강화학습 진행중 이수증강화학습
김정현
세종대학교
2026.03.17 ~ 2026.12.31강화학습 인공지능 슬롯머신 알고리즘-
운영기관
운영기관 세종대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 23시간 34분 (18시간 16분)
-
운영기관
-
강화학습 기반 스마트팩토리 운영방법 진행중 이수증강화학습 기반 스마트팩토리 운영방법
김장겸
세종대학교
2026.03.17 ~ 2026.12.31강화학습 인공지능 스마트팩토리 에너지 에너지관리시스템-
운영기관
운영기관 세종대학교
-
주차
주차 8 주
-
학습인정시간
학습인정시간 (총 동영상시간) 12시간 30분 (08시간 46분)
-
운영기관
-
설명 가능한 인공지능 진행중 이수증설명 가능한 인공지능
신승협
세종대학교
2026.03.17 ~ 2026.12.31-
운영기관
운영기관 세종대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 24시간 30분 (16시간 41분)
-
운영기관
-
산업응용을 위한 인공지능 진행중 이수증산업응용을 위한 인공지능
류승형
세종대학교
2026.03.17 ~ 2026.12.31인공지능 산업_데이터 에너지_데이터 딥러닝 지능_시스템_개발-
운영기관
운영기관 세종대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 24시간 30분 (16시간 45분)
-
운영기관
-
3D 그래픽스 고급 진행중 이수증3D 그래픽스 고급
김화선
동의대학교
2026.03.23 ~ 2026.06.14-
운영기관
운영기관 동의대학교
-
주차
주차 15 주
-
학습인정시간
학습인정시간 (총 동영상시간) 00분 (19시간 21분)
-
운영기관
같은기관강좌
-
대용량 데이터 처리 종료대용량 데이터 처리
김현철
고려사이버대학교(매치업)
2024.07.22 ~ 2024.09.15-
운영기관
운영기관 고려사이버대학교(매치업)
-
주차
주차 8주
-
학습인정시간
학습인정시간 (총 동영상시간) 14시간 40분 (09시간 44분)
-
운영기관
-
비정형 데이터 분석 종료비정형 데이터 분석
김민철
고려사이버대학교(매치업)
2024.07.22 ~ 2024.09.15-
운영기관
운영기관 고려사이버대학교(매치업)
-
주차
주차 8주
-
학습인정시간
학습인정시간 (총 동영상시간) 14시간 25분 (09시간 29분)
-
운영기관
-
빅데이터 플랫폼 종료빅데이터 플랫폼
김윤기
고려사이버대학교(매치업)
2024.07.22 ~ 2024.09.15-
운영기관
운영기관 고려사이버대학교(매치업)
-
주차
주차 8주
-
학습인정시간
학습인정시간 (총 동영상시간) 15시간 00분 (09시간 59분)
-
운영기관