안녕하세요 선생님
빅데이터 분석에 관심이 있어 파이썬을 1도 모르는 상태에서 시작해 현재 선생님의 강의를 통해 많은 도움을 받고 있습니다.
현재 텍스트 마이닝 분석 방법으로 쓴 논문들을 보면 쇼핑몰 댓글 부터 해서 각종 SNS(페이스북, 인스타그램 등)의 댓글을 분석한 논문들을 많이 살펴볼 수 있는데 현재 파이썬 초보로서 데이터를 수집하는 과정(웹크롤링)이 제일 중요하고도 어려운 것 같습니다.
현재 텍스톰이나 빅카인즈 같은 웹사이트를 이용하는 것 말고 파이썬 으로 다양한 데이터를 직접 웹크롤링 해서 데이터를 수집하는 방법을 집중적으로 다룬 강의는 거의 찾아보기 어렵더라구요..ㅠㅠ
블로그 등에 검색해보면 코드가 공개된 것도 있지만 여기저기 코드 방식이 다 다양하고 막상 적용해서 실행해보면 또 에러 생기고 이유는 모르겠고 답답하더라구요.
SNS 채널 및 쇼핑몰 댓글 등을 웹크롤링 하는 과정을 하나하나 다 보여주는 강의가 있으면 좋겠다고 생각하고 있는데 혹시 이렇게 여러 채널의 웹크롤링 과정만 다룬 강의를 올려주실 계획은 없으신지요?
네 안녕하세요 크롤링 강의도 어느정도 구상을 하고 있고 검토중에 있습니다^^;;
일단 고객님의 요청에 따라 구글플레이스토어 리뷰 크롤링 하는 강의는
제가 추가 제작하서 무료강의로 올려놓았습니다.
확인부탁드립니다.
감사합니다.
(추가로 후기를 남겨주시면 제가 힘이 될것 같습니다!)
답글
우아한 북극곰
2024.03.20넵 유익한 강의 너무 감사드립니다!
추후 웹크롤링 유료강의도 나오면 꼭 챙겨 보겠습니다^^
참고로 말씀드리자면 아마존 댓글 웹크롤링 경우 제가 여러 블로그에 오픈된 코드를 참조해서 시도해본 결과 아마존 사이트가 로봇 접속을 감지해서 캡차를 거는 바람에 크롤링을 실패했거든요. 유튜브에 찾아보면 이런 부분에 대해서 해결방법을 설명해주는 강의도 몇 개 있긴 한것 같은데 현재 나의 상황과 맞는 부분은 아니라서 초보가 듣기에는 조금 어렵더라구요.
이런 현실적인 부분도 강의에 반영해서 자세히 알려주시면 너무 좋을 것 같습니다!
감사합니다!!