목록동적크롤링 (1)
On the journey of
[AWS 사전공인교육] 10-1.Crawling 기본코드 정리
사실 AWS 사전공인교육이 아니더라도 크롤링은 데이터 수집의 가장 대표적인 방법론으로 언급되는 만큼, 내가 보기 위해서라도 정리할 필요가 있다고 생각해 노션에 올려만 뒀던 것들과 결합해 작성해본다. 시험 끝나고 왔더니 죽을맛이다... BeautifulSoup 정적 페이지 크롤링 library !pip install beautifulsoup4 !pip install requests [BS4 기본 코드] import requests from bs4 import BeautifulSoup url = 'https://naver.com' response = requests.get(url) if response.status_code == 200: soup = BeautifulSoup(response.text, 'ht..
Experiences & Study/AWS
2023. 9. 28. 05:33