공공데이터포털에서 가지고 놀만한 데이터 뭔가 없나 싶어서 카테고리 기준으로 좀 찾아보니 별로 땡기는 게 없고
인기순으로 보니까 사업자등록번호 상태 조회하는 api가 1위던데...

데이터포털에서 다른 데이터 api 쓸 때 이용했던 requests.get 과는 사용법이 좀 다른 거 같아서 구글링도 해보고 했는데

구글링 해서 나오는 결과가 죄다 예전 내용인지 에러가 자꾸 떴는데 뭐 어찌어찌 하다 보니까 "아니 이게 왜 돼? 이렇게 간단한거였다고?" 라는 말이 절로 나오면서 되긴 되더라고요

예시코드를 친절하게 보여주는 데이터도 있었는데 이번 건은 그렇지는 않아서 파이썬으로 이걸 어떻게 구현해야 되는지 감이 잘 안 와서 이상한 데서 헤맨 듯
그래도 이참에 post 형식 데이터 어떤 식으로 불러오는지 대강은 감 잡은 데에 의의를 두겠습니다.
대충 url 쓰라는 거 그대로 url로 쓰고 body에 넣어라 하는 건 딕셔너리 형태로 양식 참조해서 만든 다음에 requests.post(url, json=data) 이런 식으로 넣으면 되는 듯...

어쨌든 이게 한 번 호출할 때마다 100개씩 리스트 형태로 사업자등록번호 넣으면 100개씩 결과 띄워준다고 해서
100개 초과하는 개수를 인풋 값으로 넣으면
코드 내에서 알아서 100개씩으로 쪼개면서 호출하는 식으로 작업하도록 for문이랑 list.append, if문 조합해서 코드 짜봤는데 가지고 있는 사업자등록번호 리스트 15000개 정도 한 번에 넣어보니까 pandas로 최종 산출파일을 엑셀파일로 잘 말아서 저장하는 것까지 되는 걸 확인하였습니다.

잘라서 넣는 건 대강

lst = 전체 사업자등록번호 리스트
lst2 = []

for i in lst:
    lst2.append(i)
    if len(lst2) == 100:
        requests 데이터 불러와서 빈 리스트에 추가하는 함수 실행
        lst2 = []
requests 데이터 불러와서 빈 리스트에 추가하는 함수 실행

이런 식으로 짜보긴 했는데
솔직히 훨씬 더 좋은 방법도 있을 것 같긴 함
맨 처음 전체 사업자등록번호 리스트는 당연히 엑셀 파일로 된 거 판다스로 불러와서 해당 컬럼을 리스트로 만든거고...

일단은 14000개 정도 기준으로 전체 코드가 돌아가는 시간이 30초 정도 걸렸으니 보수적으로 다른 환경에서 돌린다 해도 1분 내에는 돌아간다 치면 나름 쓸만하긴 한 듯. (크게 쓸 데는 없지만)

회사에서 제공해주는 rpa 서비스 중에서도 유사한 서비스 있는데 그건 조회 캡처화면까지 떠주는 걸로 봐서 셀레니움 같은 웹자동화 툴을 이용해서 조회하는 거 같은데 그거 땜에 2000~3000개 정도 조회하는데도 5분 이상은 걸렸던 걸 감안한다면 나중에 혹시 이런 거 쓸일 있을 땐 걍 내꺼 쓰는 게 더 나을 듯 ㅋㅋㅋ

데이터 분석이나 머신러닝 쪽이 하고 싶은데 어찌된 게 자꾸 데이터 수집하는 쪽으로 재미 붙어서 자꾸 모아놓을만큼 흥미로운 데이터 뭐 없을까? 하는 고민만 하게 됨...