Google Authenticator, QR, Cron을 활용하여 자동화 만들기

웹 스크래핑이 무엇이고, 왜 해야 할까요?? 🤔

Scraping이라는 단어에 익숙하실 수 도 있고, Crawling이라는 단어에 좀 더 익숙하실 수 있습니다.
Scraping이라는 방식이 실제 서비스를 구축하는데에 사용이 되는 일반적인 방식이 아닙니다.

법적으로도 이슈가 많은 방법이고, 여차하면 Denial-of-service attack을 유발하는 방법이기 떄문입니다. 그럼에도 저희는 왜 Scraping을 진행을 해야 할까요??

Scraping을 활용하면 마켓팅, 개인 사업등 내가 관리하지 못한 다양한 정보들을 긁어 올 수 있기 때문입니다.

이러한 데이터는 주로 어디에 사용이 될까요?? 🤔

데이터는 정말 다양한 방법으로 활용 가능합니다.

내가 필요한 데이터를 수집하는 방법이기 때문에, 원하는 데이터를 수집하고 원하는 비즈니스를 구성하시면 됩니다.

대표적이며, 가장 일반적인 방법은

크롤링을 통해 데이터를 수집 후 쿠팡, 네이버 등등 eCommerce 플랫폼에 해당 데이터를 제공해 수수료 거래를 지원하는 방법이 가장 대표적으로 사용이 되고 있습니다.

법적으로는 문제가 없을까요?? 🤔

Scrapping 방법이 법적으로 문제가 있는 방법이 아닙니다. 왜냐하면 이미 플랫폼에서 외부에 노출을 하는 정보이기 떄문입니다.

하지만 기본적으로 외부 플랫폼의 정보를 가져오기 위해 서버에 접근을하기 때문에
앞서 말씀드렸듯이 무분별하게 정보를 가져오는 행위를 시도하시면, 일반적으로 말하는 디도스 공격이라는 형태로 트래픽이 가게 됩니다.

이러한 상황에서 만약 해당 플랫폼에 만약 손실이 발생을 하게 된다면, 문제가 될 수 있습니다.
따라서 트래픽양을 조절을 해야한다는 것을 명심해 주세요!!

일반적으로 wrk와 같은 테스트툴을 사용해서 트래픽을 전송한다고 해도, Gateway, Throttling, FronDoor 등 다양한 방지책을 구성해두기 때문에, 두려워하지 않으셔도 됩니다.

추가로 무엇을 배울 수 있을까요?? 🤔

제가 만든 대부분의 강의는 항상 제가 실무에서 사용하고 적용하고 있거나, 수강생분들이 일반적으로 알고 계시는 부분보다는 잘 모르실것 같은 부분을 제공해드리는 것에 중점을 두고 있습니다.

1. 이번 강의에서는 여러분들이 일반적으로 알고 있는 JWT Token인증 방식이 아닌!! QR코드를 통한 인증방식을 알려드리려고 합니다.

2. 이번 강의에서는 추가로 대용량 데이터를 백그라운드로 서비스 로직으로 관리하는 방법에 대해 알려드리고 있습니다.

강의를 듣고 나면 이런 결과물을 만들 수 있어요

학습 내용

💁 저는 이런 개발자 입니다. 💁

개발자라는 직업은 참 매력적이고 가능성이 많은 직업이라고 생각을 합니다.

내가 원하는 작업을 하며, 원한다면 그 작업을 통해서 수익을 창출해 낼 수도 있습니다.

회사에 종사를 하거나, 아니면 프리랜서로써도 생활이 가능합니다.

수강 전 참고 사항