나라장터 공고 크롤링
나라장터 입찰공고,발주계획 추출
요약
나라장터의 입찰공고, 발주계획 데이터를 자동추출하는 크롤링 프로그램입니다. 원하는 키워드와 날짜로 검색 가능하도록 설계되어있으며, 3000개의 데이터를 5초 이내로 추출합니다. 추출된 데이터는 엑셀파일에 저장됩니다.
도입배경
고객님은 나라장터의 입찰공고와 발주계획 페이지의 데이터를 원할 때 자동으로 추출하고 싶어하셨습니다. 그리고 여러 키워드에 대해서 원하는 기간의 데이터를 수집하고 싶어하셨습니다. 수작업으로 진행하면 3시간이 넘게 걸릴 수 있는 업무를 저희의 프로그램으로 5초내로 진행되게 도와드렸습니다.
솔루션
1) 키워드 입력 및 프로그램 실행
조사할 키워드를 텍스트파일에 저장해둡니다. 프로그램을 실행시키고, 원하는 기간을 선택한 뒤, 조사 버튼을 누릅니다. 기다리면, 모든 키워드들을 조사하면서 데이터를 추출합니다.
2) 나라장터 데이터 추출
프로그램을 실행시키면, 나라장터에 자동으로 접속 후, 선택한 기간과 키워드들을 돌아가면서 추출합니다. 3000개 이상의 데이터를 5초 이내로 모두 수집합니다.
3) 데이터 저장
추출된 데이터는 엑셀파일의 원하는 양식에 맞게 저장할 수 있습니다. 저장하는 과정에서 데이터를 연산하거나 파일이름을 원하는 형식으로 지정할 수 있습니다.
성과
- 3000개의 데이터 5초 이내 자동추출
- 원하는 기간, 검색어로 추출 가능