Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- 웹 해킹
- Monitoring
- argocd
- opentelemetry
- CI
- Kubernetes
- gitlab cd
- linkerd
- Crawling
- deploy
- Service Mesh
- Grafana
- docker
- gitlab ci
- 웹 취약점
- 모의해킹
- ECR
- Prometheus
- CD
- scraping
- 스크레이핑
- eks
- helm
- Jenkins
- CI/CD
- GitLab
- 크롤링
- Resource
- DevOps
- sonarqube
Archives
- Today
- Total
ㅡ.ㅡ
[Python/Crawling] 크롤링 및 스크레이핑 본문
※ 웹 크롤링이란?
웹 페이지의 하이퍼링크를 정기적으로 순회하며 웹 페이지를 다운로드 작업을 의미한다. 그 결과로 최신 정보를 유지 할 수 있다.
※ 웹 스크레이핑이란?
웹 페이지의 구조를 분석하여 특정 데이터를 추출하는 작업을 의미한다.
※ 크롤링 및 스크레이핑 흐름
'Coding' 카테고리의 다른 글
[Python/Crawling] requests - 요청과 응답 (0) | 2018.05.04 |
---|---|
[Python/Crawling] urllib - 특정 데이터 추출 및 파일 저장(DB) (0) | 2018.05.04 |
[Python/Crawling] urllib - 특정 데이터 추출 및 파일 저장(JSON) (0) | 2018.05.04 |
[Python/Crawling] urllib - 특정 데이터 추출 및 파일 저장(CSV) (0) | 2018.04.30 |
[Python/Crawling] Urillib - 웹 페이지 요청 (0) | 2018.04.30 |