초록색 보물상자

지난 글에서는 뉴스 검색 결과를 가져오는 API에 대해서 알아보았습니다.  구글 검색결과를 활용할 때 SerpAPI를 활용해야 하는 이유인터넷에서 정보를 찾을 때, 우리는 대부분 구글 검색을 이용합니다. 하지만 수동 검색이 아니라 프로그래밍을 통한 자동화된 방식으로 구글 검색 결과를 활용해야 할 때는 어떻게 해야 할까요?greentresure.com 위 글에서 다뤘던 API들은 검색의 결과를 가져오는데는 유용하지만, 세부 본문 내용을 가져오지 못한다는 단점이 있습니다. News를 가져온다고 했을때 확인할 수 있는 항목은 title, link, snippet, data, source, imageUrl 정도로 제한됩니다.  RapidAPI위와 같이 제한된 API에서 조금더 확장성 있는 API들이 모여있는 R..

인터넷에서 정보를 찾을 때, 우리는 대부분 구글 검색을 이용합니다. 하지만 수동 검색이 아니라 프로그래밍을 통한 자동화된 방식으로 구글 검색 결과를 활용해야 할 때는 어떻게 해야 할까요? 직접 웹 스크래핑을 시도할 수도 있지만, 구글의 보안 정책 때문에 쉽지 않습니다. 이럴 때 가장 효과적인 방법이 바로 SerpAPI 같은 SERP Scraper API를 활용하는 것입니다.  * Serp : Search Engine Results Page 이번 글에서는 구글 검색 결과를 자동으로 가져와야 할 때 SerpAPI를 활용해야 하는 이유에 대해 알아보겠습니다. 이유 1. 구글 검색 크롤링은 쉽지 않다구글은 웹 스크래핑을 막기 위해 여러 가지 보안 장치를 운영하고 있습니다.IP 차단: 일정 횟수 이상 검색하면 r..