목록Data Analysis/크롤링 (2)

민듀키티

따라하며 익히는 크롤링 마스터 2 (넷플릭스 크롤링)

넷플릭스에서 카테고리별 프로그램 리스트를 찾는 크롤링 코드 1. 라이브러리 호출 -> URL 접속 -> HTML 받아오기 from selenium import webdriver browser = webdriver.Chrome('./chromedriver.exe') url = 'https://www.netflix.com/kr/browse/genre/839338' browser.get(url) html = browser.page_source from bs4 import BeautifulSoup soup = BeautifulSoup(html, 'html.parser') 2. 필요한 정보 찾기 section_list=soup.select('section') len(section_list) >>>19 3. 카테고..
Data Analysis/크롤링 2022. 2. 2. 18:07
따라하며 익히는 크롤링 마스터 1 (크롤링 기초)

1. 크롤링 기법 소개 (1) 크롤링 프로세스 이해 라이브러리 호출 -> URL 접속 -> HTML 받아오기 -> 정보찾기 -> 저장하기 Requests, BeautifulSoup Selnium, BeautifulSoup Selenium (Only) import requests import bs4 import BeautifulSoup from selunium import webdriver import bs4 import BeautifulSoup from selunium import webdriver req = requests.get(url) browser = webdriver.Chrome() brower.get(url) browser = webdriver.Chrome() brower.get(url) ht..
Data Analysis/크롤링 2022. 2. 2. 17:54
이전 Prev 1 Next 다음