[파이썬] selenium 또는 requests를 이용한 동적 크롤링 python crawling
안녕하세요 종백이 입니다😎 올해부터 사업을 시작하면서 여러 사이트의 정보를 갖고 와야 했고 그 과정에서 얻은 경험을 공유해 보려고 합니다ㅎㅎ 우선 전공자가 아니기 때문에 장점이나 단점은 제가 직접 겪은 사실 위주로 작성하겠습니다 ㅎㅎ 혹시 제가 말한 정보가 틀리거나 어떤 방식으로 하면 더 좋은지 팁이 있으면 꼭좀 댓글로 알려주시면 감사드리겠습니다 ㅎㅎ 보통 크롤링을 동적크롤링과 정적 크롤링으로 나누던데 저는 동적 크롤링 안에 정적 크롤링이 있는 것으로 보고 동적 크롤링에 대해서만 이야기하겠습니다. 요즘 사이트의 기능도 복잡해지고 다양해서 자바스크립트나 외부 API의 데이터를 받아오는 사이트들이 늘어났더라고요 ㅎㅎ 파이썬으로 크롤링을 할때는 크게 세 가지의 모듈을 사용합니다. 첫째는 selenium, 둘째..
독학/python
2022. 11. 12. 23:37
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 주식시장거품
- 경매참고자료
- JS독학
- 경매동향
- 수부지추천
- 눈시림없는선크림
- 그림독학
- 인플레이션
- 네이버커머스api
- 자바스크립트독학
- 주식분석
- 웹앱독학
- 파이썬
- javascript독학
- javascript
- GRBL
- 주식종목
- 파이썬실전
- selenium
- 제로이드
- 프로그래밍독학
- flutter네이버커머스api
- 브리타정수기
- 책추천
- 파이썬독학
- 책리뷰
- CNC업그레이드
- 주식독학
- 상위노출프로그램
- 파이썬셀레니움
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
글 보관함