채널톡 아이콘
BEST
데이터 사이언스

/

데이터 엔지니어링

15일간의 빅데이터 파일럿 프로젝트

"빅데이터+AI 풀스택 개발" - AI에 생명력을 불어 넣는 빅데이터 구축 과정을 파일럿 프로젝트 형식으로 진행합니다. 요구사항을 파악해 단계별로 플랫폼을 구성하고, 스마트카 데이터 탐색과 분석을 수행 합니다.

(4.9) 수강평 110개

수강생 1,137명

빅데이터HadoopKafkaZooKeeperFlume
Thumbnail

초급자를 위해 준비한
[데이터 엔지니어링, 데이터 분석] 강의입니다.

이런 걸 배울 수 있어요

  • 입문자/초보자도 따라만 하면 빅데이터•AI 프로젝트를 완성

  • 빅데이터•AI 프로젝트의 분석>설계>개발>적용 과정을 이해

  • 대용량 + 실시간 데이터를 처리하면서 분석에 활용하는 방법

  • 스마트카 미니 프로젝트로 빅데이터~AI로의 가치 창출 과정

  • 오픈소스를 프로젝트에 적용하고 아키텍처를 구성하는 방법

15일에 끝장내는 빅데이터+AI 학습!
실전 프로젝트로 재밌게 만들어보세요.

📣 수강 전 확인해주세요!

  • 본 강의는 VirtualBox 기반으로 가상머신 서버 환경을 구성합니다. 맥 M1, M2 모델은 VirtualBox 미지원으로 실습이 불가능하므로 수강 전 실습을 위한 PC 환경을 확인해 주시길 바랍니다.

4차 산업혁명의 핵심기술
빅데이터와 AI를 모두 이해한다!

이 강의는 빅데이터와 AI의 기술 장벽을 넘기 위한 하나의 훈련 도구로 쓰이길 바라며 시작합니다. 특히 대규모 인프라에서 동작하는 복잡한 분산 소프트웨어와 분석 기법이 만들어낸 빅데이터/AI 구현 기술과 동작 원리에 좀 더 비중을 두고 있습니다.

우리 일상에서 이미 흔하게 볼 수 있는 스마트카를 예로 들어볼까요? 똑똑한 스마트카 안에 있는 전장 기술은 주행 거리부터 운행 패턴, 위치나 속도 등 차량과 운전자의 상태를 모니터링하는 다양한 IoT 센서들로 수많은 데이터를 만들어내고 있습니다. 이 정보가 보험이나 마케팅, 광고, 자동차, 교통 등 다양한 비즈니스 분야로 활용되고, 그렇게 활용된 정보는 다시 운전자에게로 전달되죠.

이렇듯 빅데이터 기술은 어느덧 우리의 삶에서 빠트릴 수 없는 필연적인 요소로 자리를 잡았습니다. 하지만 방대한 데이터의 양만큼이나 빅데이터 기술은 어렵고 막연하게만 느껴지죠. 그런데 누구나 약간의 기술만으로 빅데이터 및 AI 기술을 연동하고, 가치를 창출할 수 있다면 어떨까요?

숲과 나무를 동시에 보는
빅데이터 시스템의 모든 것!

이 강의에서는 빅데이터 시스템을 구축하는 데 필요한 실무 요건들을 도출하고, 이를 해결하기 위한 빅데이터의 핵심 기술 요소들을 설명합니다. 뒤이어 가상의 스마트카 파일럿 프로젝트를 통해 실전과 같은 빅데이터 및 AI 시스템을 구축하고 활용하는 방법을 경험하게 됩니다.

누구라도 좋습니다! 데이터를 수집하고, 적재하고, 탐색하고, 분석하는 네 가지 단계를 거쳐 머신러닝/딥러닝으로 이어지는 인사이트와 가치를 창출해보세요. 이번 강의를 통해 이제 막 빅데이터 분야에 뛰어든 IT 전문가들이 빅데이터의 숲과 나무를 동시에 볼 수 있는 통찰력을 기를 수 있기를 바랍니다.

스마트카 파일럿 프로젝트로 
쉽고 빠른 실전 학습.

가상의 스마트카 파일럿 프로젝트로 ‘수집 → 적재 → 탐색 → 분석’ 의 네 단계를 직접 따라해 보면서 실전과 같은 빅데이터 및 AI 시스템을 구축해 봅니다. 20여 종의 오픈소스 + 하둡(Hadoop) 에코시스템을 이용한 프로젝트를 통해 빅데이터와 AI 원리를 한층 더 쉽게 이해하고, 실전에 빠르게 적응할 수 있도록 돕습니다.

15일간의 파일럿 프로젝트로 
개념과 실전을 동시에.

프로젝트 일정은 총 15일+α 로, 빅데이터에 대한 기본적인 개념을 이해한 뒤 시스템 구축에 필요한 파일럿 프로젝트의 전 단계를 직접 실습을 통해 따라할 수 있도록 구성되어 있습니다. 

누가 배우면 좋을까요?

 

빅데이터 학습을
시작한 학생/취준생

AI, 빅데이터 기술
적용해볼 개발자

데이터 활용/분석을
고민하는 기획자

빅데이터 관심있는
누구나 OK

학생, 취업 준비생, 개발자/엔지니어, 분석가, 기획자 등등 빅데이터와 AI 기술, 오픈소스 및 아키텍처링을 통한 프로젝트를 준비하는 분들이라면 간단한 SW 지식만 가지고 프로젝트의 처음부터 끝까지 도전할 수 있도록 구성했습니다.

복잡한 빅데이터 + AI 환경,
나날이 중요해지는 커뮤니케이션 + 협업 역량.

다양한 이해관계자의 역할과 포지션을 직접 경험 함으로써, 실전 현장에서 빠르게 적응하며 좋은 성과로 이어질수 있도록 도움을 드립니다.

학습을 위한 필수 요구 환경.

아래 저사양 or 고사양 수준의 PC 1대가 반드시 필요합니다.

🖥️ 실습 관련 PC 환경을 꼭! 참고해주세요.

  • 실습 시작 전 메모리와 디스크의 여유공간 확보가 반드시 필요합니다.
  • 18GB 분량 실습 자료 및 2대의 가상 서버를 제공합니다.
  • VirtualBox 기반으로 가상머신 서버 환경을 구성해봅니다.
  • 맥 M1, M2 모델은 VirtualBox 미지원으로 실습이 불가능합니다.

지식공유자의 저서가
궁금하다면?

『실무로 배우는 빅데이터 기술』 (위키북스, 개정2판)

『실무로 배우는 빅데이터 기술: 데이터 수집, 적재, 처리, 탐색, 분석, 머신러닝까지』
 (위키북스, 책 소개 바로가기)

이런 분들께
추천드려요!

학습 대상은
누구일까요?

  • 빅데이터/AI 분야의 실전과 같은 프로젝트 경험이 필요한 분들

  • 빅데이터/AI의 숲과 나무를 동시에 보는 통찰력이 필요한 분들

  • 빅데이터/AI의 기술장벽을 넘기 위한 훈련 도구가 필요한 분들

  • 아키텍트로 성장하기 위해 오픈소스 활용 역량이 필요한 분들

선수 지식,
필요할까요?

  • print("Hello World!") 코드를 이해

  • 간단한 리눅스 명령어를 Copy & Paste

안녕하세요
Big.D입니다.

1,137

명

수강생

110

개

수강평

367

개

답변

4.9

점

강의 평점

1

개

강의

금융과 통신 등 다양한 분야에서 빅데이터와 AI 관련 전문가로 활동하고 있으며, 기술&경험의 채우기와 비우기를 반복하며 소소한 행복을 찾는 Big.D(빅디) 입니다. 

커리큘럼

전체

128개 ∙ (22시간 48분)

해당 강의에서 제공:

수업자료
강의 게시일: 
마지막 업데이트일: 

수강평

전체

110개

4.9

110개의 수강평

  • 남기범

    ∙

    수강평 2

    ∙

    평균 평점 5.0

    5

    98% 수강 후 작성

    빅데이터 환경을 어떻게 구성하고 어떻게 사용하는지 전반적인 흐름에 대해 이해하기 쉽게 알려주시네요. 비록 빅데이터 쪽으로 가지 않으시는 분들도 꼭 들었으면 하는 좋은 강의였습니다. 감사합니다!

    • Big.D
      지식공유자

      안녕하세요! 남기범님! 파일럿 프로젝트 핵심은 전반적인 흐름을 이해 하는건데요.. 이를 끝까지 잘 마무리해 주셔서 감사합니다. - 빅디 드림

  • leehb

    ∙

    수강평 1

    ∙

    평균 평점 5.0

    5

    47% 수강 후 작성

    강의너무 잘들었습니다. 참유용했어요 다시 관련부서에서 일하게되어 다시 공부하고 싶은데 기간이 만료되었어요.ㅠㅠ 혹시 재수강 할인같은건 없을까요? 감사합니다.

    • Big.D
      지식공유자

      leehb님! 좋은 강의로 평가해 주셔서 감사합니다! 강의 기간을 좀 더 연장 했습니다. 관련 업무에 많은 도움이 되었으면 합니다. - 빅디 드림

  • Seonggil

    ∙

    수강평 1

    ∙

    평균 평점 5.0

    5

    90% 수강 후 작성

    안녕하세요. 전반적인 시스템을 배울 수 있어서 좋은 강의인 것 같습니다.

    • Big.D
      지식공유자

      안녕하세요! Seonggil님! 좋은 강의평 너~무 감사 합니다. ^^* -빅디 드림

  • 둥굴이

    ∙

    수강평 11

    ∙

    평균 평점 5.0

    5

    100% 수강 후 작성

    빅데이터 실무 프로젝트를 따라할 수 있는 몇 안되는 강의였습니다. 직접 따라하기 많이 버겁지만, 개념적으로 많은 도움을 받았습니다. 남은 수강기간이 얼마 남지 않았는데, 다시 한번 복습 해려고 합니다.

    • Big.D
      지식공유자

      둥굴이님! 파일럿 프로젝트 수행에 수고 많으셨습니다! 빅데이터의 다소 많은 것을 다루다 보니 강의가 좀 무겁습니다. ^^;; 꼭 한번 더 복습하세요~! -빅디 드림

    • Seonggil

      빅디님 환경구성을 직접 클라우드데라를 설치를 해보느라 수강을 다 못했습니다 ㅠ 혹시 수강기간 한달만 연장가능할까요? 죄송합니다ㅠ

  • hyunjungio

    ∙

    수강평 1

    ∙

    평균 평점 5.0

    5

    9% 수강 후 작성

    빅데이터 AI 프로젝트를 따라해 볼 수 있어서 좋습니다. 강의 냉도 이해가 잘되고..프로젝트 끝까지 달립니다! 파일럿프로젝트 완료 했어요~

    • Big.D
      지식공유자

      안녕하세요! 빅디입니다! 파일럿 프로젝트의 어려운 과정들을 많이 완수 하셨네요! 끝까지 화이팅 입니다. - 빅디 올림

비슷한 강의

같은 분야의 다른 강의를 만나보세요!

빅데이터분석기사 실기대비 (R 활용)강의 썸네일

빅데이터분석기사 실기대비 (R 활용)

companionclub

₩60,500

30%

₩42,350

초급 / 빅데이터, 빅데이터분석기사

5.0

(34)

200+

R로 빅데이터 분석기사 실기를 준비하는 분들이 시험을 대비할 수 있도록 도와드립니다. 빅데이터 분석기사 실기 시험에 출제되었던 문제들을 바탕으로 꼭 필요한 부분들만 선별해서 알려드립니다. 과정을 완료하시면 빅데이터 분석기사 실기 합격에 한 걸음 다가가실 수 있습니다. 최근 시험 기출 문제를 리뷰하고 관련 스크립트와 데이터를 업로드 해두었습니다. 최근 시험에 대한 내용도 확인하세요.

초급

초급

빅데이터, 빅데이터분석기사

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!강의 썸네일

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

데브원영 DVWY

₩165,000

30%

₩115,500

초급 / Kafka, 데이터 엔지니어링

4.9

(103)

2,200+

실전 환경에서 사용하는 아파치 카프카 애플리케이션 프로그래밍 지식들을 모았습니다! 데이터 파이프라인을 구축하는데 핵심이 되는 아파치 카프카의 각종 기능들을 살펴보고 실습하는 시간을 가집니다.

초급

초급

Kafka, 데이터 엔지니어링

실리콘밸리 리더가 알려주는 빅데이터 처리 (Spark)강의 썸네일

실리콘밸리 리더가 알려주는 빅데이터 처리 (Spark)

한기용

₩108,900

30%

₩76,230

초급 / Apache Spark, pyspark, Pandas, 빅데이터, SQL

New
New

빅데이터를 처리한다는 것은 Pandas로 데이터를 처리하는 것과 무엇이 다를까요? 빅데이터 처리의 필수 프레임워크인 Spark에 대해서 배워볼까요?

초급

초급

Apache Spark, pyspark, Pandas

비전공자를 위한 수학 통계 기초(실습)강의 썸네일

비전공자를 위한 수학 통계 기초(실습)

SW School

₩33,000

30%

₩23,100

초급 / 선형대수학, 확률과 통계, Python, 머신러닝, 딥러닝, 빅데이터

본 과정은 파이썬을 이용한 머신러닝 수학 및 통계의 기본 내용을 실습하는 과정입니다. 기계 학습과 딥러닝은 프로그래밍 역량도 필요하지만 원리를 파악히기 위해서 수학적 배경을 필요로 합니다. 본 과정을 통해 인공지능에 필요한 기초 수학을 차근차근 익힐 수 있습니다.

초급

초급

선형대수학, 확률과 통계, Python

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)강의 썸네일

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

퇴근후딴짓

₩99,000

30%

₩69,300

입문 / 빅데이터분석기사, 빅데이터, Python, Pandas, 머신러닝

4.9

(287)

3,000+
Update
Update

비전공자, 입문자가 빅데이터 분석기사 실기를 빠르게 취득할 수 있도록 안내해드려요! 이론은 가볍게, 실전은 확실하게 복잡한 배경지식 없이도, 기출문제를 중심으로 시험에 꼭 나오는 포인트만 집중 학습합니다.

입문

입문

빅데이터분석기사, 빅데이터, Python

한 방에 끝! 빅데이터분석기사 실기 작업형강의 썸네일

한 방에 끝! 빅데이터분석기사 실기 작업형

DQ K

₩55,000

30%

₩38,500

입문 / 빅데이터

4.5

(8)

이 강의는 빅데이터 분석기사 실기를 준비하는 코.알.못들을 위해 제작되었습니다. 최대한 압축적으로 학습해 시험에 합격할 수 있게 도와드릴 뿐만 아니라, 진로 등을 고민하는 사람에게 가볍게 코딩 및 머신러닝 등에 대해 접해볼 수 있는 기회를 제공해드립니다.

입문

입문

빅데이터

확률과 통계 101강의 썸네일

확률과 통계 101

루비네 코딩

₩77,000

30%

₩53,900

초급 / 확률과 통계, 빅데이터, Python

4.9

(7)

100+

드디어 모두를 위한 확률과 통계 강의가 왔습니다! 이론과 코딩 실습을 통해서 차근차근 확률과 통계의 원리에 대해서 배워봅니다.

초급

초급

확률과 통계, 빅데이터, Python

[2025] SQLD 문제가 어려운 당신을 위한 노랭이 176 문제 풀이강의 썸네일

[2025] SQLD 문제가 어려운 당신을 위한 노랭이 176 문제 풀이

데이터코드랩

₩39,600

30%

₩27,720

초급 / SQL, SQLD, 빅데이터, Oracle, MSSQL

Update
Update

공부는 했지만 문제를 풀지 못하는 당신을 위한 SQLD 노랭이 176 문제 풀이 강의. 완강 후 합격을 넘어 전문가가 됩니다. SQLD 올인원패스!

초급

초급

SQL, SQLD, 빅데이터

실무자가 알려주는 데이터 분석가 취업 준비 완벽 가이드 [월간 데이터리안 세미나 다시보기 | 2023년 9월]강의 썸네일

실무자가 알려주는 데이터 분석가 취업 준비 완벽 가이드 [월간 데이터리안 세미나 다시보기 | 2023년 9월]

데이터리안

₩33,000

30%

₩23,100

입문 / 포트폴리오, 이력서, 빅데이터

5.0

(1)

데이터 분석가 취업 준비, 어디서부터 시작해야 할지 막막하시다면 이번 9월 세미나에서 힌트를 얻어가세요!

입문

입문

포트폴리오, 이력서, 빅데이터

모르면 퇴사각? 데이터 엔지니어링 정석강의 썸네일

모르면 퇴사각? 데이터 엔지니어링 정석

미쿡엔지니어

₩110,000

30%

₩77,000

초급 / 빅데이터, 데이터 엔지니어링, 아키텍처

5.0

(2)

Update
Update

데이터 시대, 진정한 가치를 발견하라! 📊 데이터에 집중된 어플리케이션 설계는 이제 필수가 되었습니다. 최신 트렌드와 실무 중심의 사례로 회사가 원하는 인사이트와 실력을 키워보세요. 효율적인 데이터 처리와 설계 비법, 지금 바로 시작하세요! 당신의 다음 스텝, 데이터 중심의 세계로 도약하세요!

초급

초급

빅데이터, 데이터 엔지니어링, 아키텍처

[무료]기초 텍스트마이닝: 앱 리뷰 분석 with 파이썬(40분 완성)강의 썸네일

[무료]기초 텍스트마이닝: 앱 리뷰 분석 with 파이썬(40분 완성)

이진규

무료

초급 / 텍스트마이닝, 빅데이터, NLP, 데이터 리터러시

4.7

(13)

500+

이 강의는 파이썬을 활용한 텍스트마이닝 분석에 관한 기초 이론과 실습을 배울 수 있습니다. 실무나 논문 작성 시 필요한 기초적인 텍스트마이닝 데이터 분석 기법을 설명합니다.

초급

초급

텍스트마이닝, 빅데이터, NLP

대용랑 채팅 TPS에 대한 stateful 서비스 구축하기강의 썸네일

대용랑 채팅 TPS에 대한 stateful 서비스 구축하기

July

₩47,300

30%

₩33,110

초급 / Go, Kafka, Node.js, MySQL, websockets

4.4

(14)

300+

치지직, 아프리카TV 등 stateful 서비스에 대해서 어떻게 서버를 구축하고, 무중단 배포가 진행이 되는지 모든것을 알려드립니다.

초급

초급

Go, Kafka, Node.js

이공계열 전공자를 위한 컴퓨팅사고와 인공지능강의 썸네일

이공계열 전공자를 위한 컴퓨팅사고와 인공지능

부산대학교 소프트웨어융합교육원

무료

입문 / 문제해결능력, 알고리즘, Entry, 빅데이터

4.8

(4)

300+

논리적 사고 능력을 향상시키며, 프로그래밍을 위한 도구 사용법을 이해하고 문제해결을 위한 알고리즘을 설계할 수 있는 역량을 배양합니다.

입문

입문

문제해결능력, 알고리즘, Entry

자격취득과 실무! 한 방에 경영정보시각화(실기) 태블로강의 썸네일

자격취득과 실무! 한 방에 경영정보시각화(실기) 태블로

주식회사한시경

₩99,000

30%

₩69,300

초급 / 빅데이터, Tableau

New
New

이 강의는 주관 기관의 출제 가이드를 바탕으로 경영정보시각화 실기 시험(태블로)에 꼭 필요한 핵심 개념과 기능을 체계적으로 익히는 것을 목표로 합니다. 실전에서 자주 출제되는 기능들을 자유롭게 활용할 수 있도록 실습 중심으로 구성하였으며, 모의고사 A, B형 문제 풀이를 통해 출제 유형에 대한 이해와 문제 해결 능력을 함께 향상시킬 수 있습니다.

초급

초급

빅데이터, Tableau

시계열 분석과 예측강의 썸네일

시계열 분석과 예측

루비네 코딩

₩44,000

30%

₩30,800

중급이상 / 확률과 통계, Python, 빅데이터, 인공지능(AI), arima, kalman-filter

4.5

(2)

데이터 분석 전문가로 거듭나기 위한 시계열 강의! 이론과 실기에 강한 분석가가 되어 봅시다!

중급이상

중급이상

확률과 통계, Python, 빅데이터

R언어 프로그래밍과 데이터분석강의 썸네일

R언어 프로그래밍과 데이터분석

부산대학교 소프트웨어융합교육원

무료

입문 / R, Web API, 웹 스크래핑, 빅데이터, 머신러닝

5.0

(1)

200+

쉽고 편리하게 자료를 처리하는 R언어로, 컴퓨터 비전공자도 자신의 전공분야와 관련해 컴퓨터 프로그램 활용 역량을 키워보자!

입문

입문

R, Web API, 웹 스크래핑

아두이노를 이용한 기상정보 수집과 빅데이터 분석강의 썸네일

아두이노를 이용한 기상정보 수집과 빅데이터 분석

노마드크리에이터

무료

입문 / C, 빅데이터, Arduino

4.7

(26)

1,500+

아두이노와 풍력센서를 이용하여 데이터를 수집하고 빅데이터를 분석하는 실전 프로젝트 강의입니다.

입문

입문

C, 빅데이터, Arduino

데이터 분석가, 어떤 회사로 가야할까? [데이터리안 세미나 다시보기 | 2024년 7월]강의 썸네일

데이터 분석가, 어떤 회사로 가야할까? [데이터리안 세미나 다시보기 | 2024년 7월]

데이터리안

무료

입문 / 빅데이터

5.0

(1)

200+

데이터 분석가에도 종류가 있다는 거 알고 계신가요? 인하우스 데이터 분석가와 컨설팅 데이터 분석가의 모든 것이 궁금하다면 이번 세미나를 들어보세요!

입문

입문

빅데이터

월 ₩18,480

5개월 할부 시

30%

₩132,000

₩92,400