목록WEB (1)
isPowerfulBlog
[Python] Web Crawling: Selenium, BeautifulSoup4
작년에 처음으로 크롤링이란걸 해보고 일년만에 다시 해보는 웹 크롤링... 코드 짜면서 있었던 이슈들 정리 1. WebDriver 설치 크롬 브라우저와 크롬 웹드라이버의 버전을 꼬옥 맞춰줘야한다. 크롬 설정에서 버전 체크 후 고대로 복사해서 웹드라이버 서치해보면 나온다. 2. WebDriver 옵션들 # webdrivier options option = webdriver.ChromeOptions() option.add_argument("--start-maximized") option.add_experimental_option("useAutomationExtension", False) option.add_experimental_option("excludeSwitches", ['enable-automation..
Data Engineering
2022. 8. 19. 05:33