데이터분석과 개발

* 경험한 것을 정리한 글이므로 틀린 내용이 있을 수 있습니다. * 더 좋은 방법 또는 틀린부분이 발견될 시 계속 수정하며 업데이트 할 예정입니다. 안녕하세요 오늘은 크롤링 자동화 프로그램을 만들었던 경험을 포스팅 해볼까 합니다. 소요된 시간은 1달~ 1달 반 정도 걸렸고 15개 정도의 데이터를 크롤링하여 DB에 넣는 것을 자동화한 프로그램을 만들었습니다. 어려운 작업은 아니었지만 배운점이 많아서 한번 기록해보려 합니다! 1. 크롤링 크롤링을 꾸준히 하다보니 이제 크롤링은 저에게 단순 작업이 되어서 가볍게 넘어가도록 하겠습니다 ! 2. 코드 Class화 많은 데이터를 수집하고 또 같은 페이지에서 다른 데이터를 수집하다보니 겹치는 코드가 많아져 쓸데없이 길어져서 보기가 안 좋았습니다. 그래서 저의 경우 크..