Thumbnail
BEST
데이터 사이언스데이터 분석

Node.js로 웹 크롤링하기대시보드

(4.9)
34개의 수강평 ∙ 922명의 수강생

55,000원

지식공유자: 제로초(조현영)
총 75개 수업 (13시간 36분)
수강기한: 
무제한
수료증: 발급
난이도: 
입문
-
초급
-
중급이상
지식공유자 답변이 제공되는 강의입니다
폴더에 추가공유
  • dduckyee 프로필dduckyee
    2025-06-051609467

    계속해서 질문드려 죄송합니다. 제 목적은 페이스북과 인스타그램 강의를 크롤링하는 것인데, 강의를 들으면 기술적으로 크롤링이 가능할지 여부만 확인하고 싶습니다..! 만약 인스타, 페이스북 크롤링이 안된다면 제가 크롤링하는 이유가 없어 문의 드립니다..! 그리고 빠른 답변 정말로 감사드립니다.

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2025-06-05420225

    페이스북, 인스타그램에서 방어 기술을 쓰지 않았다면 크롤링 가능합니다. 방어 기술을 썼다면(캡챠나 봇 차단) 방어 기술을 뚫는 해킹을 공부하셔야 해서 분야가 좀 달라집니다. 이건 일반적인 "웹"을 크롤링하는 강의라서요. 방어 기술을 쓰는지 아닌지는 저도 지금은 모릅니다. 저도 크롤링을 손 뗀지 오래돼서요. 지금은 AI한테 크롤링을 대신 시키고 있습니다.

  • dduckyee 프로필dduckyee
    2025-06-051609457

    강의 구매 이후에 안되는 것 있으면 계속 질문&답변이 가능할까요? 그리고 인스타그램, 페이스북이 크롤링이 막혔다는 이야기가 있던데 해당 부분은 문제 없을지 궁금합니다...!

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2025-06-05420222

    질문 답변은 항상 가능합니다만 저에게 대신 구현해달라고 말씀하시는 것은 어렵습니다. 크롤링이 막힌 경우에는 공식적으로 제가 뚫어드리기 어렵습니다. 그 자체가 도덕적, 법적 문제가 있을 수 있어서 그렇습니다.

  • dduckyee 프로필dduckyee
    2025-06-051609443

    안녕하세요, 페이스북, 인스타그램을 비롯한 크롤링은 현재도 그대로 작동되나요? 페이스북과 인스타그램 등 사이트가 많은 시간이 지나 바뀐만큼 강의도 최신화 되어 있을지 궁금합니다.

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2025-06-05420221

    그대로 작동하지 않아서 강의를 들으신다면 직접 응용을 해서 수정해서 하셔야 합니다

  • Mark Gon Lee 프로필Mark Gon Lee
    2024-05-091261546

    네이버, 구글에서 키워드를 검색하여 우리 홈페이지 순위를 알아볼 수 있는 어플리케이션을 제작할 수 있는 강의 내용인가요?

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2024-05-09338601

    그냥 전반적으로 웹사이트의 컨텐츠를 긁어가는(크롤링)하는 방법에 대한 내용입니다. 응용하시면 키워드 검색해서 홈페이지가 몇 등으로 뜨는지 순위 파악도 가능합니다.

  • hanafos0114 프로필hanafos0114
    2023-03-20819611

    안녕하세요?? node(javascript)로 크롤링 할 수 있는 예제를 찾아보다 강사님이 올려두신 강의를 보고 관심이 생겼지만 문의하고 싶은 점이 생겨 남깁니다. 제가 지금 문의를 올리는 시점이 2023년 3월입니다. 강의 업로드 시점 보니 최소 2019년 즈음인 것 같은데 그 때랑 지금이랑 바뀐게 혹시 있을까요??

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2023-03-20249490

    크롤링 대상 웹사이트들이 많이 바뀌어서 강의내용을 응용해서 크롤링해야 합니다.

  • 김효민 프로필김효민
    2022-09-17653969

    안녕하세요~ 혹시 인스타나 페북같은 강의에 소개되어있는 웹들이 현재도 크롤링이 가능한가요? 인스타의경우에 크롤링이 막혔다는 얘기를 들은적이 있어서요!

  • qudrb209 프로필qudrb209
    2022-09-10647830

    안녕하세요 javascript게임제작 - react 게임제작 - 노드버드 강의까지 들었는데요 웹 크롤링을 통해 데이터를 받아 노드버드 sns에 받아온 데이터로 게시글이 작성되도록 구현해 보고 싶은데 웹 크롤링 강의 수강 하면 가능할까요?

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2022-09-10211481

    네 이 강의로 크롤링하는 법 배우신 뒤 라우터에서 크롤링해서 디비에 넣으시면 됩니다.

  • 집중하기 매우 어려움 프로필집중하기 매우 어려움
    2022-04-05498601

    안녕하세요. 취업 포트폴리오에 유튜브 크롤링 기능을 넣고 싶어 수강하려고 합니다. 현재 시점으로 코드가 많이 변경되었을 텐데 강의 내용과 검색을 활용하면 충분히 가능하겠죠? 참고사항에 남겨주셨지만 초보자 입장에서 걱정되어 문의드립니다~

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2022-04-05181024

    네네 기본적인 원리만 알고 계시면 가능합니다. 보통은 원하는 태그 선택->반복적으로 데이터 가져오기 -> 가져온 것을 DB나 파일에 저장입니다. 강좌에서는 이러한 것을 반복학습합니다.

  • sangho26262626 프로필sangho26262626
    2022-02-24455619

    유튜브 실시간 채팅 내용도 가져오는게 가능한가요? 그리고 동적으로 생기는 내용들도 가져올 수 있나요?

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2022-02-24170830

    사람이 할 수 있는 일이라면 크롤러도 기술적으로는 다 가능합니다. (유튜브가 크롤링을 막기 위해 특별한 장치를 하지만 않았다면요)

  • YoungJin Cho 프로필YoungJin Cho
    2021-11-13349053

    데이터베이스는 mysql을 사용하여 강의가 진행되나요?

    제로초(조현영)
    제로초(조현영)
    제로초(조현영)
    2021-11-13148573

    데이터베이스를 사용 안 합니다. JSON으로 추출한 뒤에 엑셀로 변환합니다.

채널톡 아이콘