[신규 개정판] 이것이 진짜 크롤링이다 - 실전편 (인공지능 수익화)

각 영상마다 추가 자막이 추가되었고,

크몽 서비스 운영 팁 영상이 추가 되었습니다.

학습에 참고해 주세요 ㅎㅎ

GUI 프로그램 제작 파트가 추가되었습니다.

원래 조금 더 빨리 제작하려고 했는데, 여러분들이 최대한 쉽게 따라할 수 있도록 만들려다보니

시간이 오래 걸렸습니다. 기대하셔도 좋습니다 ☺

그리고 강의 소개 섹션에 수강전 주의사항이 추가되었습니다.

해당 영상은 필수 시청해주세요.

또한 마지막 챕터에 특별 이벤트도 있으니,

학습에 참고해 주시기 바랍니다

2021년부터 현재까지

제 강의를 들어주신 모든 실전편 수강생 여러분

강의를 신청해주시고,

제 강의를 사랑해 주셔서 정말 감사합니다.

여러분들에게 보답하는 심정으로,

2024년 5월 16일

실전편 1차 대폭 리뉴얼 되었습니다.

기존 강의에서 180도 달라진

모습으로 찾아왔습니다.

현재시점 가장 잘 동작하는 예제와

소스코드가 준비되어 있으니,

강의를 따라했는데 안돼서 짜증나는 일은 없을 겁니다.

18가지의 크롤링 실전 테크닉과

6가지 실전 예제를 만들고 나면,

완전히 새로운 크롤링 실력을 가지게 되실겁니다.

다시한번 감사드립니다.

스타트코딩 드림.

사이트 업데이트로 인해 제대로 동작하지 않는

예제들로 인해 강의를 따라하기 힘드셨죠?

문제를 해결하고자 기존 강의는 모두 내리고

2024년 5월 완전히 새롭게 탄생합니다.

어려워서 중간에 포기하셨던분들,

똑같이 따라했는데 잘안되셨던분들

이번엔 다를겁니다.

제가 수백번 고민하고 또 고민하면서 만든 컨텐츠니깐

따라만 오시면 무조건 코딩을 잘하게 되실겁니다

2024년 5월 8일

'이것이 진짜 크롤링이다 - 기본편' 전체 리뉴얼 예정입니다.

강의 수강에 참고하시기 바랍니다.

<기본편 - 신규 커리큘럼>

• 웹크롤링 개념과 활용사례

• 준비물1 : 10분 만에 끝내는 HTML 기초

• 준비물2: 웹크롤링의 핵심! CSS 선택자 집중학습

• 라이브러리 사용법 알아보기 (requests, beautifulsoup4)

• 실전 크롤링

  • 1단계 : 한개의 상품 크롤링 하는 법

  • 2단계 : 여러개의 상품 크롤링 하는 법 <포레스트 이론>

  • 3단계 : 여러개의 페이지 크롤링 하는 법 <URL 조작자>

  • 4단계 : 크롤링한 데이터 엑셀에 저장하는 법

2024년 5월 15일

'이것이 진짜 크롤링이다 실전편' 1차 대폭 리뉴얼 예정입니다.

강의 수강에 참고하시기 바랍니다.

<신규 커리큘럼>

• CSS 선택자 고급 실전 테크닉

  • 형제 선택자

  • nth-of-type 선택자

  • 속성 선택자

• 특정 텍스트를 포함하는 태그 찾는 방법

  • find, find_all 사용법

  • 정규표현식 기초

• 정적 페이지 크롤링 실전 예제

  • 네이버 증권 뉴스 크롤링

  • 네이버 지식인 크롤링

  • RISS 논문 크롤링

• 셀레니움 기본 사용법

  • 셀레니움 환경설정

  • 웹브라우저 기능 조작 한방에 끝내기

  • 원하는 태그 찾고 제어하기

• 셀레니움 실전 테크닉

  • 여러 태그 동시 제어

  • 동적 대기 기법

  • 고급 입력 컨트롤

  • 셀렉트박스 조작 방법

  • 여러 페이지 관리

    • 페이지 안에 다른 페이지가 있는 경우 (iframe 제어방법) - 네이버 메일 자동화

    • 새로운 창 제어 방법 - 네이버 페이 증권 자동화

  • 스크롤 처리 방법

• 동적 페이지 크롤링 쉽게 하는 방법

• 동적 페이지 크롤링 실전 예제

  • 네이버 쇼핑 크롤링

  • 네이버 카페 크롤링

• pyside6, qt-designer 를 이용한 GUI 개발

  • qt-designer 기본 사용법

  • pyside6 위젯 다루기

  • pyside6 이벤트 처리방법

  • GUI 개발 실전 예제

• 모든 컴퓨터에서 실행하게 만들기 (exe 파일 만들기)

3년동안 수백번의 강의를 하며,

추가로 습득한 크롤링 노하우를 모두 나누어 드리겠습니다.

기존 강의보다 더 쉽고,

기존 강의보다 더 빠르고,

기존 강의보다 더 알차게 준비했습니다.

다시 한번 크롤링 고수로 향하는 길을 저와 함께 떠나 보시죠.

끝까지 읽어주셔서 감사합니다.

-스타트코딩 드림.

안녕하세요!

코딩을 가장 쉽게 알려주는 크리에이터 스타트코딩입니다.

저의 근황을 먼저 말씀 드리면,

매달 직장인들 대상으로 파이썬 오프라인 강의를 진행하고

여러분들에게 드릴 이벤트, 신규 강의를 만들며 바쁘게 지내고 있습니다 :)

<삼성전자 파이썬자동화 강의>

<수강생 후기>

오프라인 강의를 진행할 때도 스타트코딩은

모든 수강생들이 이해하고 따라 올 수 있도록 쉽고 친절하게 수업합니다.

2023년 봄 맞이 이벤트를 준비했습니다.

🎁이벤트 혜택 1.

1. 이것이 진짜 크롤링이다 - 실전편

2. 파이썬 자동화 프로그램 만들며 월 100만원 벌기

두 강의의 수강기간을 기존 6개월, 12개월에서 무제한으로 변경하였습니다.

• 직장을 다니며 원하는 시간에 수강하기 힘든 분

• 완강 후에 다시 필요한 부분을 듣고 싶은 분

• 강의 업데이트 시 추가된 클립을 듣고 싶은 분

   

모두 날짜 걱정하지 않고 강의를 수강 하실 수 있을 겁니다 ^^

🎁이벤트 혜택 2.

이것이 진짜 크롤링이다 - 실전편

수강 후 간단한 후기를 SNS에 올려주시면

<네이버 부동산 매물확인 자동화> 강의를 제공해 드릴 예정입니다.

네이버 부동산 매물확인?

최근에 오피스텔을 찾다가 월세가 매우 빠르게 나가고 있는 현상을 봤습니다.

싼 매물을 놓치지 않기 위해 사람이 매번 확인하는 것은 불편하더군요.

그래서 자동화 프로그램을 돌려 원하는 조건의 매물이 발생했을 때 휴대폰으로 알림이 오도록 만들었습니다.

프로그램만 돌려 놓으면 매물이 올라왔는지 신경을 쓰지 않아도 됩니다.

또한 내 마음대로 커스터마이징까지 할 수 있습니다.

강의는 다소 심화된 내용입니다. 다음 기술을 알려 드립니다.

• 네트워크 분석을 통한 크롤링

• 새로운 매물이 올라왔는지 확인하는 로직

• 특정 시간 마다 프로그램 동작하게 만들기

• 슬랙 알림 보내기

해당 기술을 배우면 네이버 부동산 뿐만 아니라 다양한 사이트에 적용할 수 있게 됩니다.

SNS 후기는 네이버 블로그, 티스토리, 인스타그램, 카페 등에

#파이썬강의 #크롤링 #스타트코딩 키워드와 함께에 간단하게 올려주시면 됩니다.

kkj6369@nate.com 메일로 후기를 포스팅한 URL, 구글계정을 보내주시면

구글 드라이브 접속 권한을 드립니다. (확인하는 데 시간이 걸릴 수 있는 점 양해 부탁 드립니다)

🎁이벤트 혜택 3.

이것이 진짜 크롤링이다 - 실전편

강의가 77,000원 -> 59,400원으로

2023-03-25 ~ 2023-04-01 (7일) 간 할인이 들어갑니다.

구매를 미루셨던 분들은 이번 기회에 수강 하시고

후기 작성 후 <네이버 부동산 매물확인 자동화> 강의 혜택까지 가져가세요 ^^

+ 개발자가 되고 싶은분들을 위한

프론트엔드 HTMl/CSS 강의도 준비중이니 조만간 새로운 소식으로 찾아 뵙겠습니다!!

<강의자료 - 실습과제>

<Pricing page 카드 만들기 실습>

기존 강의대로

헤더에 User-Agent 만 추가 시 오류로, 멈춤 현상이 나타나고 있습니다.

추가 옵션을 부여해서 크롤링이 가능함을 확인했으니,

해결방법은 "쿠팡크롤링 - 첫번째 페이지 크롤링하기" 강의노트를 확인해 주세요 ^^ 

https://www.inflearn.com/course/%ED%8C%8C%EC%9D%B4%EC%8D%AC-%ED%81%AC%EB%A1%A4%EB%A7%81-%EC%8B%A4%EC%A0%84/lecture/97373?tab=curriculum&volume=1.00

pyautogui message box 명령어 아래 코드는 회색깔로 나타나고, 

마우스를 올려놓을 시 Code is not reachable 메시지가 나타납니다.

이 현상은 Pylance라는 vscode 확장프로그램에서 pyautogui message box 명령어를 

탐지하지 못해 발생합니다. 

Pylance를 업데이트 하면서 일시적으로 나타나는 버그로 판단이 됩니다.

확장프로그램 아이콘(네모4개) 클릭한 후 pylance 의 다시로드필요 부분을 선택 해 주세요.

다시 로드가 없다면, pylance 를 제거 후 다시 설치해 보세요.

- 스타트코딩 드림.

셀레니움 4버전으로 업데이트 되면서

Deprecated(더 이상 사용되지 않는) 메시지가 발생하고 있습니다.

영상을 통해 업그레이드된 셀레니움 사용법을 숙지해 주세요.

그리고, 크롬 드라이버도 자동으로 다운받는 webdriver-manager도 같이 설치해 주세요.

이어지는 수업은 셀레니움 3버전으로 촬영이 되었습니다.

Deprecated 메시지가 불편한 분들은, 업데이트된 소스코드를 사용해서 실습을 따라해 주시기 바랍니다. 

소스코드가 복잡하고 길어 보이는데, 외우지 마시고 복사 붙여넣기 해서 사용하면 편합니다 ^^