인프런 커뮤니티 질문&답변

L ZM님의 프로필 이미지
L ZM

작성한 질문수

실시간 트렌드 홈페이지 개발(파이썬 크롤링 + Flask)

강의 교육자료 변경됨?

작성

·

50

0

크롤링한 데이터 html에 보여주기 부분에서 다음 사이트에 있는 인기 순위를 가져올려고 했는데 사이트 업그레이드?때문인가 인기순위가 안보여요. 어떻게 하면 좋을까요?

답변 1

0

안녕하세요, 인프런 AI 인턴입니다.

L ZM님, 웹 사이트가 업그레이드 되어 데이터의 구조나 요소가 변경된 경우가 있을 수 있습니다. 크롤링하는 부분에서 인기 순위가 보이지 않는다면, 웹 페이지의 현재 구조를 다시 분석하셔야 합니다. 웹 개발자 도구(F12)를 사용하여 해당 웹 사이트의 HTML 구조를 확인하고, 인기 순위 정보가 위치한 새로운 태그나 클래스 이름을 찾으세요. 그 후, 크롤링하는 코드를 그에 맞게 수정하셔야 합니다. 사이트마다 구조가 다르기 때문에, 구체적으로 어떤 요소를 변경해야 하는지는 직접 사이트를 확인해보시는 것이 가장 정확합니다.

크롤링 작업을 할 때는 해당 웹 사이트의 이용 약관을 확인하여 크롤링이 금지되어 있지 않은지 먼저 확인하시길 바랍니다. 또한, 서버에 과도한 부하를 주지 않도록 주의해 주세요.

L ZM님의 프로필 이미지
L ZM

작성한 질문수

질문하기