인프런 영문 브랜드 로고
인프런 영문 브랜드 로고
BEST

빅데이터 파이프라인 마스터; 성공을 위한 도구와 기술

여러분들은 빅데이터 프로세싱의 4단계에 해당하는 [데이터 수집 ▶ 데이터 저장 ▶ 데이터 분석 ▶ 표현] 에 대한 내용을 이론 30% + 실습 70%으로 이루어진 코드랩 방식으로 보다 재밌고 체계적으로 학습합니다 🧑🏻‍🏫

Thumbnail

초급자를 위해 준비한
[데이터 엔지니어링] 강의입니다.

이런 걸 배울 수 있어요

  • Bigdata Processing Pipeline

  • Data Acquisition

  • Data Storage

  • Data Visualization

  • Data Analysis

  • Hadoop Distributed Filesystem

  • Spark Apache

  • ELK Stack (Elasticsearch)

실습 중심으로 알차게 배우는 
빅데이터 파이프라인 마스터! 

special thanks to my lovely students 👨🏻‍🎓appreciate it, believe you'll do well anywhere 👩🏻‍🎓



데이터 처리 이론 및 실습 
빅데이터 파이프라인의 핵심!

안녕하세요, J.PHIL 입니다 🙇🏻
좋은 기회를 맞이하여 인프런에서 첫 강의로 빅데이터 시스템 구축 및 분석에 관심있는 입문자를 위해 ‘데이터 처리 이론 및 실습’ 강의를 진행하게 되었습니다. 

한눈에 보는 핵심 키워드

Mastering Big Data Processing: Tools and Techniques for Success

Distributed System
Apache Spark
HDFS
Elasticsearch
Logstash
Kibana
Crawler
Scraping
Selenium
AWS S3
Node.js
Docker

우리는 왜 이 강의를 
들어야 할까요? 📚

최근 약 10년 동안의 급진적인 기술 발전으로 인해 다양한 플랫폼과 서비스가 생겨나고, 다양한 고객들이 그 위에서 질 높은 삶을 영위하고 있습니다. 이에 우후죽순으로 발생하는 데이터 가운데 많은 기업들이 그 중에서 가치 있는 데이터를 발굴하고 추출하여 BM(Business Model)을 설계함으로써 좀 더 우리에게 가치있는 삶을 제공하고 있습니다.

이런 환경에서 저희 엔지니어들👷🏻이 “감히 미래를 예측하고 대응한다면” What and How 준비해야 할까요? 바로 데이터를 관리하고 다루는 능력을 길러야 합니다. 역으로 여러분이 데이터를 잘 다루게 되고 더불어 잘 표현까지 할 수 있다면, 산업에 어떤 점들을 기여할 수 있을까요?

Data-driven decision-making

💡 빅데이터 분석을 통해 조직은 데이터 중심 의사 결정을 내릴 수 있으며, 이를 통해 비즈니스 결과를 개선할 수 있습니다. 

Increased efficiency and productivity

💡 빅데이터 분석을 통해 조직은 운영을 간소화하고, 비용을 절감하며, 생산성을 높일 수 있습니다. 

Innovation

💡 빅데이터 분석은 기업이 새로운 제품과 서비스를 개발하고, 기존 제품과 서비스를 개선하고, 새로운 비즈니스 모델을 만들 수 있도록 함으로써 혁신을 촉진할 수 있습니다. 


그래서 이 강의는 어떻게 
구성되어 있나요? 📑

📝

Data Top-Tier Conference 논문을 땀흘려 쓴 경험

👨🏻‍💼

현업에서 얻은 값진 빅데이터 시스템 구축 및 분석 경험

🧑🏻‍🏫

오랫동안 대학교에서 좋은 제자들을 양성한 경험

이처럼 값진 경험을 바탕으로, “이 분야에 관심있는 어느 누구에게나” 좋은 출발점이 될 수 있도록 빅데이터 프로세스의 4가지 단계에 대해 14주차 이상의 폭넓으면서도 알찬 과정으로 강의를 구성하였습니다 📚

여러분들은 위에 소개된 기술들을 이용하여 데이터 수집 ▶ 데이터 저장 ▶ 데이터 분석 ▶ 표현에 대하여 이론 30% 및 실습 70%의 코드랩 형식으로 학습합니다. 약 6년 동안 훌륭한 제자들의 소중한 피드백들 💌 회고하고 반영해, 최대한 쉽고 질 좋은 컨텐츠로 강의를 구성한 만큼 입문자 분들에게 반드시 큰 도움이 되실 겁니다.

아! 참고로 강의 자료는 추후 다양한 Reference를 찾거나 이 기회를 통해 Research 분야나 더 좋은 기업으로 가실때 도움을 드리기 위해 최대한 영문으로 작성했습니다 🧗🏻‍♀️


저희는 무엇을 배우나요? 🧑🏻‍🏫

Big Data Processing 4 Steps을 기반으로, 아래와 같이 커리큘럼을 구성하였습니다. (1주차 무료영상 참고)

빅데이터 파이프라인에 관심 있는 
누구나 수강하실 수 있습니다 🧑🏻‍🎓

Python 및 Linux 명령어, 데이터베이스에 대한 기초 지식만 알고 있다면 누구나 수강할 수 있습니다.

[프로모션] 학생, 취준생분들께 강의 금액을 지원해드립니다 💪

수입이 없는 학생분 또는 취준생분에게 약 20% 할인을 제공합니다. 아래 링크로 신청해주시고 원활한 comm. 위해, 꼭 수강전 문의 탭에 " ${자기소개} 학생/취준생 [프로모션] 신청했습니다" 와 같이 로그 남겨주세요 :) 

신청 링크수강전 문의

[프로모션] +200 수강생 기념, 기간 연장 프로모션💪

+100명 프로모션 혜택을 받은 수강생분을 제외한, 신규 수강생분들에게 강의 3개월 무료 연장 프로모션을 진행합니다. 아래 링크를 통해 신청해주세요 :)

신청 링크

실습 환경은 어떻게 되나요? 💻

아래와 같이 부담없는 환경을 준비하셔도 충분히 수업을 따라오실 수 있습니다.
(실제 Cluster 구성은 현재 제작 중인 [초보] 이론 강의에서 진행할 예정입니다 🙏🏻)

  • OS: Ubuntu or Linux
  • Machine 사양
    • Aws t2.medium 2 Core 4GB // ec2 free.tier 참석은 가능
    • Virtualbox 이용하여 위 OS로 참석 가능

[입문자 DOCKER 강의] 프로모션 이벤트 😄

Docker 대하여 자세히 공부하고 싶은 분들은 [입문자를 위한 Docker 및 Dockerizing 마스터하기] 적극 추천합니다. [빅데이터 파이프라인 마스터] 수강하신 분들에게 프로모션* 적용해드립니다.

[빅데이터 클러스터 구축패키지] 런칭 프로모션 이벤트 🎓

탄탄한 코드랩으로 고가용성이 보장되는 빅데이터 클러스터 직접 구축하고 싶은 분에게 추천합니다. 옆 강의링크를 클릭후 [수강전 문의] 란에 "아이디 / 이메일 / 프로모션 신청합니다" 라고 남겨주세요.


이 강의를 만든 사람 
J.PHIL을 소개합니다 ✒️

이런 분들께
추천드려요!

학습 대상은
누구일까요?

  • 빅데이터 처리 시스템 수업을 듣고 싶은 대학교 3,4학년 학생

  • 데이터 분야 커리어에 관심있는 비전공 개발자

  • 데이터 수집, 저장, 분석, 표현 관심있는 주니어 개발자

  • 빅데이터 직무 면접을 앞둔 취업 준비생

선수 지식,
필요할까요?

  • Python 기초 코딩

  • Linux 명령어 기초 지식

  • Database 기초 지식

안녕하세요
J.PHIL입니다.

433

수강생

37

수강평

50

답변

4.9

강의 평점

2

강의

안녕하세요 J.PHIL 입니다 🧑🏻‍🎓

첫번째 강의로 [ 빅데이터 시스템 구축 및 분석에 관심있는 입문자 ] 를 위해
"Mastering Big Data Processing: Tools and Techniques for Success" 강의를 오픈 하였습니다.

'수업 및 프로필' 자세한 사항들은 수업 상세 페이지에 잘 작성했으니 참고 부탁드립니다  🙏🏻

커리큘럼

전체

57개 ∙ (14시간 9분)

해당 강의에서 제공:

수업자료
강의 게시일: 
마지막 업데이트일: 

수강평

전체

19개

5.0

19개의 수강평

  • swmaclee8776님의 프로필 이미지
    swmaclee8776

    수강평 2

    평균 평점 5.0

    5

    91% 수강 후 작성

    chào thầy! Sau khi tốt nghiệp chuyên ngành quản trị kinh doanh, tôi đã học phát triển hơn một năm vì muốn có được kinh nghiệm thực tế. Tôi nghe thấy những từ dữ liệu lớn và xử lý dữ liệu lớn rất nhiều xung quanh tôi mỗi ngày, vì vậy tôi muốn biết về nó, nhưng nó nặng nề... Tôi nghĩ rằng tôi đã học được rất nhiều về ống dữ liệu khi tôi đề cập đến mọi chi tiết của một chu trình thông qua phần này bài giảng. Trước hết, tôi không có nhiều thời gian nên tôi đã nghe nó hết sức tập trung. Tôi sẽ xem lại nó trong thời gian còn lại và thực hiện dự án của riêng mình dựa trên điều này ~~~!!! Cảm ơn bạn~~!!

    • jphil
      지식공유자

      Xin chào Mac, Vì bạn là một nhà phát triển không chuyên nên có thể bạn gặp một số trở ngại lúc ban đầu, nhưng cảm ơn bạn đã tham gia khóa học và dành thời gian tìm hiểu. Nhờ có bạn, tôi sẽ có thêm nguồn cảm hứng và làm việc chăm chỉ hơn để tạo ra những nội dung hay. Tôi hy vọng rằng Mac sẽ trở thành một nhà phát triển tốt hơn trong tương lai và thể hiện được giá trị lớn hơn nữa. Cảm ơn

  • outlier님의 프로필 이미지
    outlier

    수강평 3

    평균 평점 5.0

    5

    100% 수강 후 작성

    Đó là dữ liệu lớn mà tôi chỉ cảm nhận được một cách mơ hồ. Sau khi nghe bài giảng, tôi hiểu khái niệm và bắt đầu tưởng tượng cách sử dụng nó. Người hướng dẫn có cách diễn đạt tốt và chương trình giảng dạy của khóa học diễn ra tuần tự. Cảm ơn bạn vì bài giảng tuyệt vời!

    • jphil
      지식공유자

      Xin chào nhà phát triển nhà phát triển, Tôi đã có một bài giảng tóm tắt nội dung trải nghiệm ý nghĩa của mình và tôi tự hào khi biết rằng nó hữu ích. Khi bạn xem lại sau, vui lòng lắng nghe và cho tôi biết nếu bạn có bất kỳ câu hỏi nào.

  • snu님의 프로필 이미지
    snu

    수강평 1

    평균 평점 5.0

    5

    28% 수강 후 작성

    Chúng tôi hiện đang điều hành một công ty khởi nghiệp về thiết kế nội thất! Trước đây, bạn không cần biết cách vận hành máy chủ và phân tích dữ liệu, nhưng gần đây, tôi cảm thấy mình cần biết quan điểm và phương hướng vận hành dữ liệu nên tình cờ nghe được qua lời giới thiệu của một bạn. người bạn xung quanh tôi. Điều giúp ích rất nhiều cho tôi là bạn giảng bài có cân nhắc đến quan điểm của người khác. HDFS có thể vẫn là một trở ngại lớn đối với tôi, vì vậy trước tiên tôi sẽ tham gia các khóa học khác. Tôi cũng nên giới thiệu nó cho bạn bè của tôi. Tôi hy vọng bạn tiếp tục tung ra những bài giảng hay và công việc kinh doanh của bạn diễn ra tốt đẹp!!!!!

    • jphil
      지식공유자

      Xin chào, Giám đốc điều hành của Commania, Cảm ơn các bạn đã đến tận nơi để nghe bài giảng của tôi. Có lẽ bạn có rất nhiều điều phải lo lắng khi điều hành một công ty, nhưng tôi biết rằng việc chú ý đến thiết kế đường ống và bắt tay vào thực hiện không phải là một việc dễ dàng. Tôi hy vọng chúng ta sẽ cùng nhau vượt qua thời điểm khó khăn này trên thị trường. Nếu có bất cứ điều gì tôi có thể giúp bạn, xin vui lòng liên hệ với tôi hoặc gửi câu hỏi của bạn ở đây. Chúc may mắn.

  • ntying7520님의 프로필 이미지
    ntying7520

    수강평 1

    평균 평점 5.0

    5

    12% 수강 후 작성

    Khi đang làm nhà phát triển, tôi tham gia khóa học vì tò mò mơ hồ về dữ liệu lớn. Khi tham gia lớp học, tôi có thể hiểu bài dễ dàng hơn vì các bài giảng bao gồm kiến ​​thức tổng quát chứ không chỉ là giải thích lý thuyết. Thật tuyệt vời khi bạn đã hướng dẫn chi tiết buổi đào tạo thực tế!! Nếu bạn chưa biết dữ liệu lớn là gì và đang bắt đầu với sự tò mò mơ hồ với tư cách là một nhà phát triển, tôi nghĩ bài giảng này sẽ rất hữu ích!

    • jphil
      지식공유자

      Xin chào TY, Cảm ơn phản hồi có giá trị của bạn. Tôi hy vọng bạn chăm chỉ học các bài giảng còn lại và thu được nhiều điều từ chúng! Chúng tôi mong được gặp bạn theo cách tốt hơn trong tương lai.

  • jasonking님의 프로필 이미지
    jasonking

    수강평 2

    평균 평점 5.0

    5

    65% 수강 후 작성

    Người hướng dẫn. Cảm ơn bạn vì bài giảng thú vị. Gần đây tôi không xem các bài giảng của Infron nhiều, nhưng tôi thích các bài giảng hiện tại hơn là xem phim truyền hình Mỹ. Tôi nghĩ đó là một bài giảng giúp tối đa hóa bí quyết trong một khoảng thời gian ngắn. Tôi nghĩ sẽ thật hoàn hảo nếu lần sau bạn tạo một bài giảng chuyên sâu hơn (khả năng dự án, HDFS / Spark, thực hiện các dự án với phân tích dữ liệu aws, v.v.). Bài giảng hiện tại cũng rất hữu ích. Tôi nghĩ nó sẽ nhàm chán, nhưng nó rất vui. Tôi khuyên các nhà phát triển muốn biết cách sử dụng nền tảng dữ liệu tổng thể nên nghe bài giảng này. Tôi viết bài này vì nó giúp tôi tránh phải viết những thứ như thế này trong hầu hết thời gian. Cá nhân tôi hơi thất vọng một chút là nó chỉ tồn tại được 4 tháng... Thật tiếc khi tôi không thể xem lại khi muốn. (Có cái gì gọi là sự kiện kéo dài không? -_-;;;) Tôi nhìn kỹ nó và sau đó nhìn lại nó vài tháng sau. Bằng cách đó, nó sẽ khắc sâu vào tâm trí bạn và bạn sẽ không quên nó.

    • jphil
      지식공유자

      Xin chào jason.king, Cảm ơn bạn đã đánh giá có giá trị và chi tiết của bạn. Người ta nói nó vui hơn phim truyền hình Mỹ nên tôi nhớ mình đã tự học tiếng Anh cách đây mười năm bằng cách xem How I Met Your Mother. Khoảng thời gian 4 tháng ban đầu được ấn định để cho phép sinh viên tập trung và lắng nghe bằng cách giới hạn khoảng thời gian trong một học kỳ tại thời điểm sản xuất. Chúng tôi đang thực hiện chương trình khuyến mãi gia hạn một phần chỉ dành cho những người chăm chỉ tham gia bài giảng, vì vậy vui lòng cho chúng tôi biết khi thời hạn đến gần hoặc vượt quá thời hạn đó. Tôi tự hào rằng bài giảng sẽ được biết đến rộng rãi hơn nhờ những đánh giá đầy cảm kích, và tôi chúc các bạn có một ngày cuối tuần ấm áp và thú vị.

비슷한 강의

같은 분야의 다른 강의를 만나보세요!

월 ₩412,753

5개월 할부 시

₩99,000