special thanks to my lovely students 👨🏻🎓* appreciate it, believe you'll do well anywhere 👩🏻🎓
데이터 처리 이론 및 실습 빅데이터 파이프라인의 핵심!
안녕하세요, J.PHIL 입니다 🙇🏻 좋은 기회를 맞이하여 인프런에서 첫 강의로 빅데이터 시스템 구축 및 분석에 관심있는 입문자를 위해 ‘데이터 처리 이론 및 실습’ 강의를 진행하게 되었습니다.
한눈에 보는 핵심 키워드
Mastering Big Data Processing: Tools and Techniques for Success
Distributed System
Apache Spark
HDFS
Elasticsearch
Logstash
Kibana
Crawler
Scraping
Selenium
AWS S3
Node.js
Docker
우리는 왜 이 강의를 들어야 할까요? 📚
최근 약 10년 동안의 급진적인 기술 발전으로 인해 다양한 플랫폼과 서비스가 생겨나고, 다양한 고객들이 그 위에서 질 높은 삶을 영위하고 있습니다. 이에 우후죽순으로 발생하는 데이터 가운데 많은 기업들이 그 중에서 가치 있는 데이터를 발굴하고 추출하여 BM(Business Model)을 설계함으로써 좀 더 우리에게 가치있는 삶을 제공하고 있습니다.
이런 환경에서 저희 엔지니어들👷🏻이 “감히 미래를 예측하고 대응한다면” What and How 준비해야 할까요? 바로 데이터를 관리하고 다루는 능력을 길러야 합니다. 역으로 여러분이 데이터를 잘 다루게 되고 더불어 잘 표현까지 할 수 있다면, 산업에 어떤 점들을 기여할 수 있을까요?
Data-driven decision-making
💡 빅데이터 분석을 통해 조직은 데이터 중심 의사 결정을 내릴 수 있으며, 이를 통해 비즈니스 결과를 개선할 수 있습니다.
Increased efficiency and productivity
💡 빅데이터 분석을 통해 조직은 운영을 간소화하고, 비용을 절감하며, 생산성을 높일 수 있습니다.
Innovation
💡 빅데이터 분석은 기업이 새로운 제품과 서비스를 개발하고, 기존 제품과 서비스를 개선하고, 새로운 비즈니스 모델을 만들 수 있도록 함으로써 혁신을 촉진할 수 있습니다.
그래서 이 강의는 어떻게 구성되어 있나요? 📑
📝
Data Top-Tier Conference 논문을 땀흘려 쓴 경험
👨🏻💼
현업에서 얻은 값진 빅데이터 시스템 구축 및 분석 경험
🧑🏻🏫
오랫동안 대학교에서 좋은 제자들을 양성한 경험
이처럼 값진 경험을 바탕으로, “이 분야에 관심있는 어느 누구에게나” 좋은 출발점이 될 수 있도록 빅데이터 프로세스의 4가지 단계에 대해 14주차 이상의 폭넓으면서도 알찬 과정으로 강의를 구성하였습니다 📚
여러분들은 위에 소개된 기술들을 이용하여 데이터 수집 ▶ 데이터 저장 ▶ 데이터 분석 ▶ 표현에 대하여 이론 30% 및 실습 70%의 코드랩 형식으로 학습합니다. 약 6년 동안 훌륭한 제자들의 소중한 피드백들 💌 회고하고 반영해, 최대한 쉽고 질 좋은 컨텐츠로 강의를 구성한 만큼 입문자 분들에게 반드시 큰 도움이 되실 겁니다.
아! 참고로 강의 자료는 추후 다양한 Reference를 찾거나 이 기회를 통해 Research 분야나 더 좋은 기업으로 가실때 도움을 드리기 위해 최대한 영문으로 작성했습니다 🧗🏻♀️
저희는 무엇을 배우나요? 🧑🏻🏫
위 Big Data Processing 4 Steps을 기반으로, 아래와 같이 커리큘럼을 구성하였습니다. (1주차 무료영상 참고)
빅데이터 파이프라인에 관심 있는 누구나 수강하실 수 있습니다 🧑🏻🎓
Python 및 Linux 명령어, 데이터베이스에 대한 기초 지식만 알고 있다면 누구나 수강할 수 있습니다.
[프로모션] 학생, 취준생분들께 강의 금액을 지원해드립니다 💪
수입이 없는 학생분 또는 취준생분에게약 20%할인을 제공합니다. 아래 링크로 신청해주시고 원활한 comm. 위해, 꼭 수강전 문의 탭에 " ${자기소개} 학생/취준생 [프로모션] 신청했습니다" 와 같이 로그 남겨주세요 :)
안녕하세요 선생님!
경영학을 나오고 실무를 다뤄보고 싶어 1년 넘게 개발에 대해 공부하고 있습니다. 주위에서 매일 빅데이터 빅데이터처리라는 단어를 많이 듣다보니 알고 싶지만 부담스럽고...본 강의를 통해 한 사이클을 구석구석 잘 다루다보니 데이터 파이프라에 대해서 잘 학습한 것 같습니다.
일단 주어진 시간이 많지 않아 최대로 집중해서 들었는데 남은 기간동안 복습하면서 이를 기반으로 자체 프로젝트도 진행해 보겠습니다~~~!!!많은 조언 부탁드립니다. 감사합니다~~!!
안녕하세요 Mac 님,
비전공자 개발자이셔서 초반에 Hurdle 있으셨을텐데 고진감래하며 수강해주셔서 감사합니다. 저도 덕분에 또 다른 영감을 받아 더욱더 열심히 좋은 컨텐츠를 만들도록 노력하겠습니다. Mac 님도 나중에 더 멋진 개발자가 되셔서 더욱더 좋은 가치를 발휘하시길 기대하겠습니다.
감사합니다.
현재 인테리어 스타트업 운영중입니다! 예전에는 직접 서버 운영 및 데이터 분석을 몰라도 됐지만 근래 데이터를 운영하는 관점 및 방향성에 대해 알아야 된다는 생각이 들어서 우연히 주위 지인 추천으로 듣고 있습니다. 상대방의 관점을 배려해서 강의해주시니 큰 도움이되고 있습니다. 아직 HDFS 까지는 저에게 큰 벽일 수 있어 먼저 그 외 강의들을 수강중인데. 저희 지인한테도 추천해봐야겠네요. 앞으로도 좋은 강의 런칭해주시고 및 사업도 잘 되시길 바랍니다!!!!!
안녕하세요 컴매니아 대표님,
먼길 찾아와주셔서 제 강의를 들어주셔서 감사합니다. 회사를 운영하시느라 이곳저곳 신경쓰실일 많으실텐데 직접 파이프라인까지 설계에 대해서 관심을 갖고 실무에 들어간다는 것이 쉽지 않은 action인거를 알고 있습니다. 같이 시장이 어려운 시기 잘 헤쳐나갔으면 좋겠네요. 혹여나 도움될 일이 있으면 편하게 저에게 연락주시거나 여기 질문 등록해주세요 화이팅입니다.
개발자로 근무하면서 빅데이터에 대한 막연한 궁금증으로 수강하게 되었습니다.
수강하면서 단순히 이론 설명이 아니라 전반적인 배경을 같이 강의해주셔서 보다 쉽게 이해할 수 있었습니다. 중간중간 실습도 자세하게 리드해주셔서 너무 좋았고요!!
아직 빅데이터가 무엇인지 모르고, 개발자로써 막연한 궁금증으로 시작한다면 지금 강의가 매우 유익할 거라고 생각됩니다!
강사님. 재미난 강의 감사합니다.
최근에 인프런 강의 잘 안보다가 미드 보다 재미있게 현재강의를 보고 있어요.
작은 양의 시간에 정말 꽉꽉 눌러 담은 노하우를 최대한 집약한 강의라 생각됩니다.
좀 더 심화한 강의를 다음에 만들어주시면 (프로젝트성 , HDFS / Spark , aws data analitics 같은 것으로 프로젝트를 하는...... ) 정말 완벽할 것 같습니다.
지금 강의도 큰 도움되었습니다. 지루 할 줄 알았는데 재미있습니다.
전체적인 데이터 플랫폼의 활용하는 방식들을 알고 싶은 개발자 분들은 이 강의 함 들어보시길 추천 드려요.
어지간하면 이런 글 안쓰는데 도움되어서 써봅니다.
개인적으로 좀 아쉬운 점은 기간이 4개월이라... 또 보고 싶을 때 못보는 것이 많이 아쉽습니다. (혹시 연장 이벤트 같은 것은 없는지요 강사남. -_-;;;)
저는 자세히 한번 보고 몇개월 있다가 한번 더 보거든요.
그래야 머리에 각인되어서 안 잊혀져서요.
안녕하세요 jason.king 님,
소중하고 세세한 수강평 감사합니다. 미드보다 재밌다고 하니 십년전에 혼자 how I met your mother 를 보면서 영어독학을 했던게 생각납니다.
4개월 기간으로 설정한 것은 초반에 제작당시 한학기 기준으로 기한 제한을 통해 수강생분들이 집중해서 들어주시길 위함으로 설정하였습니다. 강의를 열심히 들으분들에 한하여 부분연장 프로모션 진행하고 있으니, 기한이 다가오거나 넘을때 편하게 알려주세요.
감사한 수강평 덕분에 강의가 보다 널리 알려질 것 같아 뿌듯하고, 따뜻한 즐거운 주말 되시길 바랍니다.
* appreciate it, believe you'll do well anywhere 👩🏻🎓
Mac
![[2025] SQLD問題が難しいあなたのためのノランイ176問題解説강의 썸네일](https://cdn.inflearn.com/public/files/courses/336270/cover/01jr03fxecqc2z7spwsjxhpc80?w=420)
![[無料]基礎 テキストマイニング: アプリレビュー分析 with Python(40分完成)강의 썸네일](https://cdn.inflearn.com/public/courses/331163/cover/74cc657a-a8f9-4a78-8edb-0d5fcd4c4c75/331163.png?w=420)
![[管理コース＃3] DE、DBA（SSIS、SSAS、MachineLearning、BI、ETL）강의 썸네일](https://cdn.inflearn.com/public/courses/329784/cover/c5e6543b-72c3-4471-b43f-15b9002e65ed/329784-eng.png?w=420)