크롤링 프로젝트 자료 준비

1 분 소요

마지막 학기에 들을 크롤링 과목은 총 2회 협업 프로젝트를 달성해야 한다.

떄문에 미리 프로젝트의 요구사항을 말씀하진 않았으나 미리 주제를 찾아서 대비를 해야겠다고 생각했다.

크롤링의 주제를 어떻게 찾아야 하는가

파이썬 크롤링은 중간고사 및 기말고사 두가지의 프로젝트를 진행해야 합니다.

또한 현재 프로젝트를 어떻게 진행할 것인지 교수님께서 따로 특이사항을 이야기 하지 않으셨습니다.

따라서 이번 미팅에서는 중간고사에 있을 프로젝트를 주제로 자료를 준비했습니다.

중간고사 프로젝트의 계획서를 제출하는 날짜를 기준으로 프로젝트의 주제를 정해야 할것으로 짐작됩니다.

따라서 이번 자료는

에서 주제로 하기에 괜찮은 API 를 찾아왔습니다.

단 네이버 API 는 유료 및 무료가 존재하기 때문에 무료 API 를 기준으로 자료를 준비했습니다.

네이버 오픈 API 목록

아래의 사이트에서 API 의 동작 상태를 확인 가능한데 API 의 기능을 알기 쉽게 목차화 해놓았습니다.

위의 API 를 종합했을 경우

등이 중간고사 기간에 사용하기 좋을 것 같습니다.

공공 데이터는 네이버 API 와 달리 다양한 카테고리 중에 원하는 주제별로 JSON 혹은 XML 형식으로 가져오는 것이 가능하다는 장점이 존재합니다.

공공 데이터와 같은 경우 파일 형식과 Open API 형식이 있기 때문에 Open API 를 제공하는 자료만 가져왔습니다.

위의 링크는 크롤링 주제로 괜찮은 것들을 테이블 형식으로 만든 페이지입니다.