인프런 커뮤니티 질문&답변

오류의 내용은 json.loads 에 넘어온 res.text 가 json 형태의 데이터가 아니라서 생기는 오류 입니다.

url = "http://www.lottecinema.co.kr/LCHS/Contents/Cinema/Cinema-Detail.aspx?divisionCode=1&detailDivisionCode=1&cinemaID=1013"

res.text 는 위 주소의 HTML 문서 내용이기 때문에 json 형태 "키": "값" 의 형태가 아니라서 당연히 json 형태로 변환이 불가능해서 생기는 오류가 맞습니다. xhr 방식으로 동작하는 주소는 스샷에서 처럼 TicketingData.aspx 혹은 CinemaData.aspx 로 시작하는 주소가 실제 xhr 로 동작하는 페이지로 보입니다. 그리고 ajax로 호출되는 해당 TicketingData.aspx 페이지로 데이터가 넘어가는걸 보시면

코드에서 작성하셨던 MethodName:... 등의 데이터가 그대로 전송되는게 아니라 해당 데이터가 paramList 라는 큰 변수안에 모두 속해 있는걸 볼 수 있습니다. 그러니까 

dic =  {
    "MethodName": "GetMoviePlayDates",
    "channelType": "HO",
    "osType": "Chrome",
    "osVersion": "Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36",
    "multiLanguageID": "KR"
}

위의 데이터를 다시 paramList 라는 변수로 모두 등록해야 합니다.

data = {"paramList": dic}

제가 위의 dic 데이터를 paramList 라는 변수로 다시 data 라는 변수에 모두 적용해서 해당 페이지를 호출 해봤더니 인코딩 오류가 또 발생했습니다. 서버쪽으로 POST 형태로 데이터를 전송하니 UTF-8 Bytes 형태로 보내기 위해서 encode() 함수를 사용했습니다.(꼭 해보셔서 어떤 오류가 나는지 확인하세요)

따라서 전체적으로 정리해보면

import requests
from bs4 import BeautifulSoup
import json
import pprint

dic =  {
    "MethodName": "GetMoviePlayDates",
    "channelType": "HO",
    "osType": "Chrome",
    "osVersion": "Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36",
    "multiLanguageID": "KR"
}

# 위의 dic 변수의 내용을 paramList 라는 변수명으로 다시 설정합니다.
# encode() 를 하지 않으면 해당 페이지를 접속했을경우 인코딩 오류가 발생합니다.
data = {"paramList": str(dic).encode()}

# 실제 ajax로 호출되는 주소는 아래 주소 입니다.
url = "http://www.lottecinema.co.kr/LCWS/Ticketing/TicketingData.aspx?nocashe=0.1769098203549624"

# 해당 주소로 paramList 변수의 데이터를 POST 형태로 전송합니다.
r = requests.post(url, data=data)

result = json.loads(r.text)

print(result)

위의 코드가 정상 동작 합니다.

넵 화이팅 하십시요~~~!!! 

궁금한점 생기시면 언제든 질문주시기 바랍니다 ^^

감사합니다. 어디서 문제가 생기는지 확실히 이해 했습니다.

크롤링 성공해서 flask 강의 올려주신 걸로 페이지 만드는 것 까지 꼭 성공하고 싶네요 ㅎ

제가 답변을 수정하는 사이에 다시 질문을 주셨네요. 제가 질문을 잘못 이해해서 다시 답변을 수정했습니다. 코드 짜고 테스트 해보느라 시간이 걸리는 와중에 다시 질문을 주신거 같습니다. ㅎㅎㅎ 원래 답변 다시 확인 부탁드립니다.

{'IsOK': 'false', 'ResultMessage': 'ParamList가 존재하지 않습니다.', 'ResultCode': None, 'EventResultYn': None}

import requests
from bs4 import BeautifulSoup
import json

url = "http://www.lottecinema.co.kr/LCWS/Ticketing/TicketingData.aspx?nocashe=0.9677176967145242"
dic = {
    "MethodName":"GetMoviePlayDates",
    "channelType":"HO","osType":"Chrome",
    "osVersion":"Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.108 Safari/537.36",
    "multiLanguageID":"KR"
}
res =requests.post(url, data=dic).json()
print(res)

위와 같이 요청을 보내면

다음과 같이

{'IsOK': 'false', 'ResultMessage': 'ParamList가 존재하지 않습니다.', 'ResultCode': None, 'EventResultYn': None}

이런 형태로 반환이 되는데 

이런 식으로 받으려고 하는데 어디가 문제인지 알 수 있을까요 ?