웹사이트 크롤링한 결과 드립니다.
서비스 배경- 개인적으로 파이썬을 접하게 된 후 크롤링의 경험이 있어서, 필요하신 분들에게 서비스를 제공하고자 합니다.개발 사례- 골프존 웹사이트에서 코스 정보를 Excel 파일로 저장- 원하는 유튜브 영상들의 공유 소스를 Html 파일로 저장- 한국 증권 거래소의 상장 법인 리스트를 Excel 파일로 저장- COS Store 품목별/옵션별 재고 파악하여 알림- 네이버 인플루언서 수집하여 Excel 파일로 저장- U p b i t 암호화폐별 기간별 특정 시간대 종가 자료를 Excel 파일로 저장- 스팸 이메일 차단 솔루션에 로그인 후 특정 통계를 Excel 파일로 저장- 스마트스토어, 11번가, G마켓, 옥션, 인터파크, G9, 위메프, 티몬, 쿠팡, 롯데ON 각 사이트 별로 판매자 정보를 Excel 파일로 저장- 네이버 쇼핑 파트너 센터에서 상품ID 입력 후 상품명, 클릭수, 노출수, 클릭율 가져와서 Excel 파일로 저장- CoinGecko API 활용하여 상장일 가져와서 Excel 파일로 저장- 4개의 홈페이지 내 특정 데이터를 가져와서 Excel 파일로 저장- 적은 건수의 URL로 알리익스프레스 내 상품명, 상품금액, 배송금액, 옵션 가져와서 Excel 파일로 저장 - 유튜브 정보 제공 사이트의 API 활용하여 JSON 자료를 Excel 파일로 저장- 오늘 이전 근무일의 하나은행 환율, KITCO 귀금속 시세, 한국비철금속협회 비철 금속 시세 가져와서 Excel 파일로 저장- 어학 학습 사이트의 내용을 가져와서 HTML 파일로 저장- 건강 기능 식품 쇼핑몰에서 정한 항목들을 가져와서 내용은 Excel 파일로 저장, 이미지들은 파일로 저장- ISSEY MIYAKE Store 품목별/옵션별 재고 파악하여 알림- 네이버 증권 종목토론실 글, 댓글을 가져와서 Excel 파일로 저장- 의류 회사 관리 사이트에 로그인 하여 품목별 사이즈별 색상별 재고를 Excel 파일로 저장- 시간이 좀 소요되지만 웨일 브라우저 통해서 이미지 번역 후 파일로 저장※소스 코드 실행 위해서 원격 제어(팀뷰어12 퀵서포트 아이디/비밀번호, https://download.teamviewer.com/download/version_12x/TeamViewerQS.exe)로 윈도우 파이썬과 Visual Studio Code를 설치하고, 관련 파이썬 패키지 설치해드립니다. 1. 웹사이트 URL 및 양식 접수2. 파이썬으로 크롤링 진행3. 샘플 데이타 전달 후 진행 확정4. 최종 데이타 전달5. 수정 사항 확인6. 수정 데이타 전달 준비하셔야 될 것들- 크롤링 원하는 URL (예시 - http://kind.krx.co.kr)- 저장을 원하는 문서 양식/슬랙 웹사이트 가입 후 워크스페이스 생성 (예시 - 종목 코드, 회사명 / Excel 파일)
