CS & Growth

Code today, Lead tomorrow

2024/06/30 2

#C3. 기존의 웹크롤러들은 쓸만한가?

1. 생각보다 더 많지만 생각보다 더 쓸 게 없다.  이제와서 '나같은 초보가 만들어봐야지 할 정도라면 이미 시중에 제법 있겠구나' 싶어서 뭐 어떤 것들이 있는지 찾아보았다. 몇 개 들어가서 시범적으로 진행해보고 답답해서 1달 결제도 해봤는데 내가 원하는 방식으로 원하는 정보를 딱 가져오지 않더라. ㅠㅠ 웹 크롤링 찾아보고 작동해보고 필요한 내용을 어떻게 내가 다룰 수 있을지 확인해보는 걸로 하루를 다 썼다. 그리고 나서 드는 생각은 '아오,, 내가 결국에는 어떻게든 만들어내는 수 밖에 없겠구나' 였다.   1) 데이터를 한눈에 볼 수 있는 무료 웹 크롤링 프로그램 탑 10https://www.i-boss.co.kr/ab-6141-58333 데이터를 한눈에 볼 수 있는 무료 웹 크롤링 프로그램 탑 10오..

C. IT Work 2024.06.30

#C2. 웹 크롤러 서비스를 확인해보고 직접 만들기로 결심하다.

1. 웹 크롤링을 내가 직접 해보겠다며 덤비기 시작했다. 이전에 서울 전역의 쉐어하우스 정보를 전부 다 수집했었다. 그 때가 코로나가 막 시작했을 때였으니 학문적인 가치가 있을 거라고 생각했다. 코로나로 인한 공유경제 주거 부분에서의 비포 애프터 금액 비교랄까? 그 때 내가 알고 있는 쉐어하우스 중개 서비스를 다 개발자에게 알려주고, 개발자가 매일 금액 변동과 공실 변동 사항을 정리해서 알려줬다. 아쉽게도 사업을 마무리하면서 더 이상 해당 프로그램을 사용하지 않게 된 바람에 까마득히 잊어버리고 있었다.  이제는 그 업무를 내가 직접 해보려고 하는 것이다. 과아연..이제 막 파이썬에 입문한 병아리 단계에서 이런 작업에 어느 정도로 접근이 가능할지부터 궁금해지기 시작했다. 자, 그렇다면 웹 크롤링은 대체 무..

C. IT Work 2024.06.30