import requests
from bs4 import BeautifulSoup
import time
response = requests.get(
"https://search.naver.com/search.naver?where=news&sm=tab_jum&query=%EC%82%BC%EC%84%B1%EC%A0%84%EC%9E%90")
html = response.text
soup = BeautifulSoup(html, 'html.parser')
articles = soup.select("div.info_group") # 뉴스 기사 div 10개 추출
for article in articles:
links = article.select("a.info") # 리스트
if len(links) >= 2: # 링크가 2개 이상이면
url = links[1].attrs['href'] # 두번째 링크의 href를 추출
response = requests.get(url, headers={'User-agent': 'Mozila/5.0'})
html = response.text
soup = BeautifulSoup(html, 'html.parser')
content = soup.select_one("#content")
if content is not None: # content가 None이 아닌 경우에만 출력
print(content.text)
time.sleep(0.3)
아래 코드입니다.
https://search.naver.com/search.naver?where=news&sm=tab_jum&query=%EC%82%BC%EC%84%B1%EC%A0%84%EC%9E%90
이 사이트에서는 출력이안되고 오류가발생하고
https://search.naver.com/search.naver?where=news&sm=tab_jum&query=%EB%86%8D%EA%B5%AC
이사이트에서는 글씨가 출력됩니다.
저는 영상 예제처럼 위사이트에서 나오게하고싶은데, 개발자모드에서 id값을 못찾는거같아요 제가.
꼭 해결하고 넘어가고 싶은 성격이라 계속 이곳에서 해매고있네요.