[파이썬] selenium 또는 requests를 이용한 동적 크롤링 python crawling
안녕하세요 종백이 입니다😎 올해부터 사업을 시작하면서 여러 사이트의 정보를 갖고 와야 했고 그 과정에서 얻은 경험을 공유해 보려고 합니다ㅎㅎ 우선 전공자가 아니기 때문에 장점이나 단점은 제가 직접 겪은 사실 위주로 작성하겠습니다 ㅎㅎ 혹시 제가 말한 정보가 틀리거나 어떤 방식으로 하면 더 좋은지 팁이 있으면 꼭좀 댓글로 알려주시면 감사드리겠습니다 ㅎㅎ 보통 크롤링을 동적크롤링과 정적 크롤링으로 나누던데 저는 동적 크롤링 안에 정적 크롤링이 있는 것으로 보고 동적 크롤링에 대해서만 이야기하겠습니다. 요즘 사이트의 기능도 복잡해지고 다양해서 자바스크립트나 외부 API의 데이터를 받아오는 사이트들이 늘어났더라고요 ㅎㅎ 파이썬으로 크롤링을 할때는 크게 세 가지의 모듈을 사용합니다. 첫째는 selenium, 둘째..
독학/python
2022. 11. 12. 23:37
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 인플레이션
- 주식분석
- CNC업그레이드
- 그림독학
- 제로이드
- GRBL
- 경매참고자료
- 주식독학
- 책추천
- 네이버커머스api
- 파이썬
- 브리타정수기
- javascript
- 주식시장거품
- 프로그래밍독학
- javascript독학
- 파이썬독학
- 눈시림없는선크림
- 파이썬셀레니움
- 자바스크립트독학
- 주식종목
- 웹앱독학
- 수부지추천
- selenium
- 책리뷰
- flutter네이버커머스api
- 상위노출프로그램
- 경매동향
- JS독학
- 파이썬실전
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
글 보관함