이야기를 나눠요
141만명의 커뮤니티!! 함께 토론해봐요.
인프런 TOP Writers
-
15일간의 빅데이터 파일럿 프로젝트
맥북 사용
맥북 사용에 따라 vmware-fusion을 통해 실습 진행하려고 하는데 가상머신 구성해주신게 버츄얼박스에만 적용되나요???
-
15일간의 빅데이터 파일럿 프로젝트
학습 방향에 대한 조언을 듣고 싶습니다.
안녕하세요. "실무로 배우는 빅데이터 기술" 교재와 15일간의 빅데이터 파일럿 프로젝트 강의에 열정을 쏟고 있는 학생입니다. 커뮤니티 게시판에 '고민있어요' 배너를 보고, 제 학습과 관련된 고민을 나누고자 글을 쓰게 되었습니다.제 경험을 간단히 소개하자면, 약 2년간 직장에서 파이썬을 활용하여 크롤링, 분산 처리, API, DB 관리 등을 통해 데이터 수집 및 모델링 업무를 해왔습니다. 이후 데이터 엔지니어로 전환하면서, 본격적으로 이 분야를 공부하기 시작했습니다. Hadoop 생태계나 리눅스는 이전에는 이름만 들어본 적이 있었는데, 이번 강의를 통해 직접 프레임워크를 구축하고 설정하며, 데이터를 쌓아보는 경험은 정말 뜻깊습니다. 특히 Cloudera나 Git에서 'bigdata2nd-master' tar 파일을 받아 시스템을 구축하는 과정을 통해 전체적인 워크플로우와 업무에 대한 이해를 넓힐 수 있었던 점은 다른 어떤 강의보다 만족스러웠습니다. 처음 프레임워크를 하나하나 구축하고 설정하는 과정이 매우 어렵게 느껴졌는데, 이번 강의를 통해 크게 성장할 수 있었습니다.강의 중 강사님께서는 프레임워크 자체에 집착하기보다는, 요구사항을 통해 세부적인 요구사항을 도출하고, 이를 해결하는 방법에 중점을 두라는 조언을 주셨습니다. 프레임워크가 어떻게 활용되는지를 이해하고, 실제 문제 해결에 적용하는 방향으로 학습하라는 조언은 매우 감사했습니다.하지만, 저의 고민은 여기서 시작됩니다. 저만의 공부와 업무를 진행할 때, 대부분의 경우 도커 컨테이너 내에서 conf, yaml, Dockerfile 등을 직접 구성하거나 수정해야 할 것으로 압니다. Cloudera를 사용하지 않고 직접 프레임워크를 설계하며 공부를 해보고 싶은데, 이에 관련된 다른 강의나 학습 방향에 대한 조언을 구할 수 있을까요? 긴 글 읽어주셔서 감사합니다.
-
[핵집] 2024 빅데이터 분석기사(필기)_과목 1~2
강의, 교재 학습 방법 문의
수강평 보니까 커리큘럼과 교재 순서를 일부러 다르게 했다고 하던데그러면 강의는 교안을 받아서 학습하고 책은 따로 공부하면 될까요
-
15일간의 빅데이터 파일럿 프로젝트
수간 기한 연장 부탁드립니다 ㅠ
안녕하세요 선생님! 🙂 수강기간 연장 부탁드립니다 ㅠㅠ
-
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
빠르게 코딩하기 위한 단축기 문의 (팁)
코딩을 시작하지 얼마 안되어서 주로 코딩하실때 자주 사용하시는 단축기 팁이 있을지 문의드립니다. 현재 알고 있는건 아래가 전부인데요. Tap (줄 들여쓰기) shift + tap (줄 들여쓰기 반대로) 혹시 몇가지 조언해주실 수 있으신지요? (#이나 ''' ~ ''' 를 통해 한번에 주석처리 하는 단축기도 궁금하고.. 이밖에 코딩 속도를 높이기 위한 단축기가 있을지 궁금합니다)
-
[실전]텍스톰 TEXTOM 실전 강의: 빅데이터 논문 작성을 위한 텍스트 분석/텍스트마이닝
샘플로 제시해주신 참고문헌 출처 부탁드리겠습니다!
N-gram 분석은 N개 단어의 연쇄를 확률적인 수치를 산출하고 시각화하는 방법으로 대용량의 문서에서 특정 단어 뒤에 위치하는 단어나 음절의 빈도를 정량적인 수치로 나타낼 수 있다(Kang & Lee, 20019). 단어 간 연결방향이 화살표를 통해 시각화되며 화살표의 굵기 크기를 통해 연결강도가 결정된다(Yoo et al., 2019). 또한 연관 단어 간 관계성을 분석하면 단어간 관계 파악에 용이다하다(Kim, 2020). 본 연구에서는 Textom에서 제공하는 N-gram 텍스트마이닝 기법 시 데이터의 흐름과 이해를 하기 위해 가장 먼저 기초 분석 자료로 활용되는 기법이기도 하다. 단어빈도에 기반한 분석은 전체 문서 내에서 특정 단어의 풀현 빈도를 나타낸다. 문서 내에 특정 단어가 등장하는 횟수를 나타내며 이수치값이 클수록 문서에서 자주 사용하는 단어임을 의미한다(Jang et al.,2018). 높은 출현 빈도를 나타내는 단어는 대체로 연구주제와 관련된 함축된 의미를 내재하고 핵심 단어로 작용 할 수도 있다(Lee,2022).
-
15일간의 빅데이터 파일럿 프로젝트
VirtualBox 6.1 MacOS 버전 질문입니다.
안녕하세요VirtualBox 6.1 설치 했는데요. 아래와같이 호스트 전용 네트워크 탭에 어댑터 설정이 없는데요..찾아도 안보이네요 ㅠ
-
실리콘밸리 엔지니어와 함께하는 Apache Airflow
컴퓨터 비전 airflow
안녕하세요 딥러닝 컴퓨터비전 엔지니어로 근무 중인 수강생입니다 :) 최근에 mlops에 대해 관심을 가지고 있는 도중에 airflow라는 도구를 알게되었습니다.딥러닝분야에서도 airflow를 통해 mlops를 하는지 궁금합니다.
-
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
빅분기6회
오늘 빅분기 실기 6회 저만어려웠나요..?
-
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
오겜 Discord 차단 된것 같은데 ,, ㅠㅠ
삭제된 글입니다
-
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
구름환경 문의
함수에 대해 정의내릴 때예를 들어코랩 에서는scaler = minmax_scale() 이렇게 정의를 내리고scaler(data) 하는데#코랩은 정의내릴 때 괄호를 빼면 동작안함 구름에서 테스트해보니까scaler = minmax_scale()하고 scaler(data)하면 에러가 발생하고괄호없이 scaler = minmax_scale 만해야 에러가 발생하지 않더라구요. 이게 구름 환경만의 특성이라서 그렇다고 보면 될까요?
-
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
파이썬 1 노트북에 항목에 액세스할 수 없음이라는 창이 나와요
노트북 링크 복사 붙여넣기 후 열면, 해당 팝업이 뜹니다
-
쉽게 처음하는 파이썬 고급 크롤링 [Scrapy, Selenium, Headless Chrome]
GUI 를 배우는것도 있나요? 풀스택 + 고급크롤링 강의수강생입니다.
안녕하세요 저는 비전공자이고풀스택 전과정 + 고급 크롤링 강의를 듣고있는 수강생입니다.우선 너무 좋은 강의 정말 잘 듣고 있습니다.저는 코딩을 아예처음 접하고있어서 어느쪽으로 가고싶은지 전혀 갈피가 없었는데요.하다보니 데이터과학이 제가 하고싶었던 분야라는것을 알게되었습니다.항상 외주로 개발자를 구해서 돈을 주고 프로그램을 제작하는것을 자주해왔는데요.개발비로도 2000만원이상을 쓴것 같습니다.그런데 제가직접 해보고자 이곳을 찾아왔고, 데이터 과학이 제가 생각한 분야라는것을고급크롤링 강의들으면서 알게되었습니다.그런데 궁금한점은 개발자에게 외주를 맡기면서 항상 GUI 방식의 프로그램을받아서 그것으로 크롤링 및 자동화 프로그램들을 주로 외주를 맡겨왔었는데요.강의 내용을 계속보고있는데 GUI 에 관한건 없더라구요.제가 못찾는건지 별도 다른강의가 있는건지 알고싶습니다.저는 GUI에 자동화 소스를 버튼처럼만드는 그런 프로그램을 만들고 싶거든요 !강의내용의 질문은 아니지만, 그 강의가있다면 추가로 구매해서 수강하고싶습니다.답변 부탁드립니다
-
[핵집] 2024 빅데이터 분석기사(필기)_과목 1~2
통합 강의교안 요청드립니다.
안녕하세요, 이번에 빅데이터 분석기사 필기(1~4강)을 모두 수강신청 하였습니다.따라서 통합 교안을 이메일로 받아보고 싶어 이렇게 문의 남겨드립니다.이메일 주소 : hyungmin997@gmail.com감사합니다.
-
[전액무료,온라인진행] 블록체인 고급 프로젝트 과정_지역ICT이노베이션스퀘어 확산사업
안녕하세요. 과학기술정보통신부 주관 지역ICT이노베이션스퀘어 확산사업으로 블록체인 고급 프로젝트 과정 개발 교육 진행중입니다. 수강혜택으로 수료증발급, 블록체인 자격증 응시 기회까지 제공해드리고온라인수강, 전액무료, 누구나 과정을 이수할 수 있으니 신청해보세요. 학생, 취업준비생, 재직자, 이직자 예정자분들 병행 추천드립니다! https://blog.naver.com/kjc_sh/222852299901
-
(채용 특전) 제7회 롯데멤버스 빅데이터 경진대회를 소개합니다. ✨
안녕하세요 인공지능팩토리 커뮤니티매니저입니다. 여름은 일 년 중 가장 뜨겁고 무더운 계절이기도 하지만 가장 화창하고 푸르른 계절 중 하나이기도 합니다. 시원한 바다와 음료가 생각나기도 하구요 여러분은 어떻게 여름을 보내실 지 계획을 세우셨나요? 이번 여름을 저희 AIFactroy와 함께 보내실 수 있도록 경진대회 소식을 준비해봤습니다 이번 대회는 바로 롯데멤버스 채용특전과 더불어 총 상금 1,000만원이 걸린 "(채용 특전) 제7회 롯데멤버스 빅데이터 경진대회"입니다! 주제는 고객 구매 데이터에 기반한 예측 모델 개발 및 개인화 마케팅 전략을 제안하는 것입니다. 여러분의 역량을 펼치어 좋은 결과로 이어지길 응원하겠습니다~ 롯데멤버스 경진대회1634×336 132 KB 공모 주제 : 고객 구매 데이터에 기반한 예측 모델 개발 및 개인화 마케팅 전략 제안 기간 및 일정 (UTC+ 9(한국) 기준) 참가신청 : 2022. 6. 2. (목) ~ 2022. 7. 3. (일) 24:00 데이터 다운로드 및 분석결과물 제출 : 2022. 6. 20. (월) ~ 2022. 8. 12. (금) 24:00 사전설명회 : 2022. 6. 29. (수) 16:00 참가신청서 https://forms.gle/9zDNGE1rhKfEFmrH7 상금 및 채용특전 (총 상금 1,000만원 + 채용특전) 대상 1팀 : 500만원 최우수상 1팀 : 200만원 우수상 3팀 : 각 100만원 장려상 3팀 : 각 L.POINT 30만 P ※ 우수상 이상 수상팀 참여인원 대상, 22~23년 데이터 유관 직무 신입/인턴 지원 시 서류전형 1회 면제 참가대상 엘포인트 회원 : 국내/해외 대학생 및 대학원생, 대학교 졸업 후 2년 이내의 미취업자 개인 또는 팀 (최대 3인) 문의 : 인공지능팩토리: cs@aifactory.page 대회 상세 보기 [AIFactory] AF_포스터 618 1070×1511 146 KB 하는 문화를 만들어가요. - 잠깐! 인프런 서비스 운영 관련 문의는 1:1 문의하기를 이용해주세요.
-
[데이콘] 2021년(제2회) NH투자증권 빅데이터 경진대회
대회 링크 1:1 문의하기를 이용해주세요.