Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- stl
- 빈 데이터프레임 #pandas #데이터전처리
- 시간형식
- 시계열데이터셋
- 응용이 보이는 선형대수
- 시계열시각화
- 시계열모듈
- Python
- timeseries decomposition
- seaborn # kdeplot # 데이터분석
- loess
- 시간형식변환
- 확률
- 오제이튜브
- 파이프라인전처리
- 이수역 양식집
- 시계열
- 시계열 #reindex #인덱스 확장 #datetime index #index extention # 데이터전처리
- pandas # 월말 날짜 # 마지막 주 # 날짜계산 # 시계열 # 마지막 주 금요일
- adf_test
- 짧은 시계열 # 금융시계열
- 리눅스개념
- 음수값 #전처리 #선형보간 #pandas #데이터 #데이터분석
- 날짜파싱
- 크롤링자동화
- 시계열분해
- 플로틀리
- pandas
- np.split
- 년월일 데이터
Archives
- Today
- Total
목록셀레늄 (1)
먼지뭉치 Data Analysis
[시계열 데이터수집] 크롤링 다음페이지 넘기기
예전에 프로젝트를 하다가 전염병 관련 데이터를 모았던 일이 있습니다. url 이 변하지 않아 selenium을 써야 했고 직접 한페이지 한페이지 넘기면서 데이터를 가져왔어야 했습니다. 다음페이지 버튼을 클릭해가며 끝까지 크롤링하는 부분이 생각보다 쉽지 않아 정리해보려 합니다. 가져왔던 페이지는 국가가축방역통합시스템이고 가축전염병이 발생했던 날짜와 장소를 나타낸 데이터입니다. https://home.kahis.go.kr/home/lkntscrinfo/selectLkntsOccrrncList.do 국가가축방역통합시스템 > 가축전염병 발생정보 > 국내현황 > 법정가축전염병 발생현황 법정가축전염병 발생현황 home.kahis.go.kr 크롤링을 하기 위해 셀레늄 드라이버를 부르고 import pandas as ..
데이터분석/시계열분석
2022. 12. 27. 21:47