RUBY
[WebData][Oil] 3. 데이터 확보하기 본문
웹 데이터 수집하고 정리하기
Oil Price Analysis and Green construction
3. 데이터 확보하기
1. 대한민국 주유 가격을 알아보는 사이트이다.
목표 데이터는 브랜드, 가격, 셀프 주유 여부, 위치 이다.
https://www.opinet.co.kr/user/main/mainView.do
2. 싼 주유소 찾기 - 지역별
3. 지역에서 광역시도와 시구 정보를 입력한다.
- 지도가 바뀌고, 또 잠시 후 주유소 정보가 로딩된다.
4. 셀프 여부를 알려주고 있고 휘발유 가격도 나온다.
- 상표와 주소 정보를 다루기가 약간 까다로워 보인다.
- 엑셀 파일에는 원하는 모든 정보가 존재한다.
5. 마우스를 클릭하며 지역을 선택해야한다.
- 지역을 선택해도 드러난 웹 주소가 변경되지 않는다..
지금까지 내용을 정리하면
- 목표 : 서울시 주유소를 대상으로 셀프 주유소가 저렴한지 확인하는 것
- 서울시 등록된 주유소 전체의 주유 가격을 확인할 수 있는 사이트 발견
- 하지만, Beautiful Soup으로 바로 접근하기는 어려워 보인다.
- 일단, Selenium으로 접근해보자
'데이터 분석 > EDA_웹크롤링_파이썬프로그래밍' 카테고리의 다른 글
[WebData][Schools]전국 고등학교 목록/엑셀 (1) | 2023.12.28 |
---|---|
[WebData][Oil] 4. 데이터 접근하기 (0) | 2023.02.06 |
[WebData][Oil] 2. Selenium 기초 (0) | 2023.02.06 |
[WebData][Oil] 1. Selenium 설치 (0) | 2023.02.05 |
[WebData][Movie] 3. 영화 평점 데이터 정리 (0) | 2023.02.05 |
Comments