지금 이 순간을 살아라

from selenium import webdriver options = webdriver.ChromeOptions() options.headless = True options.add_argument("windows-size=1920, 1080") options.add_argument("user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36") browser = webdriver.Chrome(options = options) browser.maximize_window() url = "https://www.whatismybrowser.co..

프로그래밍 언어/웹 스크래핑 2020. 9. 11. 07:00

from selenium import webdriver browser = webdriver.Chrome() browser.maximize_window() # 페이지 이동 url = "https://play.google.com/store/movies/top" browser.get(url) # 스크롤 내리기 # 모니터(해상도) 높이인 1440 위치로 스크롤 내리기 # browser.execute_script("window.scrollTo(0, 1440)") # 2560 X 1440 # browser.execute_script("window.scrollTo(0, 2880)") # 2560 X 1440 # 화면 가장 아래로 스크롤 내리기 browser.execute_script("window.scrollTo(0..

프로그래밍 언어/웹 스크래핑 2020. 9. 10. 07:00

import requests from bs4 import BeautifulSoup url = "https://play.google.com/store/movies/top" # 구글 무비 접속 시 해당 국가에 따라 다른 정보가 보여지므로 아래와 같이 헤더 정보에 국가 정보를 넣어 준다. headers = { "User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36" ,"Accept-Language":"ko-KR,ko" } res = requests.get(url, headers = headers) res.raise_for_status(..

프로그래밍 언어/웹 스크래핑 2020. 9. 9. 07:00

from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC browser = webdriver.Chrome() browser.maximize_window() # 윈도우 창 최대화 url = "https://flight.naver.com/flights/" browser.get(url) # url 로 이동 # 가는 날 선택 클릭 browser.find_element_by_link_text("가는날 선택").click() ..

프로그래밍 언어/웹 스크래핑 2020. 9. 8. 07:00

import time from selenium import webdriver # chromedriver 경로를 인자값으로 넘겨줌 # 같은 경로에 chromedriver.exe 있을 경우 경로 입력 필요 없음. browser = webdriver.Chrome() # "./chromedriver.exe" # 1. 네이버 이동 browser.get("https://www.naver.com/") # 2. 로그인 버튼 클릭 elem = browser.find_element_by_class_name("link_login") elem.click() # 3. id, pw 입력 browser.find_element_by_id("id").send_keys("naver-id") browser.find_element_by_i..

프로그래밍 언어/웹 스크래핑 2020. 9. 7. 15:56

visual studion code 의 TERMINAL 창에서도 selenium 명령어를 실해할 수 있다. 명령어 실행 시 대소문자에 유의 해야 한다. >>>python >>> from seleium import webdriver >>> browser = webdriver.Chrome() browser.get("http://naver.com") >>> elem = browser.find_element_by_class_name("link_login") >>> elem >>> elem.click() >>> browser.back() >>> browser.forward() >>> browser.refresh() >>> browser.back() >>> elem = browser.find_element_by_i..

프로그래밍 언어/웹 스크래핑 2020. 9. 6. 07:00

설치 항목 - selenium visual studio code의 TERMINAL 창에서 pip install selenium 입력 후 설치 - google webdriver 구글 버전 확인 : chrome://version 혹은 구글 브라우저 설정 -> 도움말 -> Chrome 정보(G) 에서 확인 구글 검색 창에 google webdriver 입력 후 다운로드 페이지로 이동 후 chrome 브라우저 버전에 맞는 webdriver 선택 후 클릭 OS에 맞는 webdriver 다운로드. 다운 로드 받은 파일을 visual studio code의 workspace 에 이동 후 다음 코드를 실행. # pip install selenium from selenium import webdriver # chrome..

프로그래밍 언어/웹 스크래핑 2020. 9. 5. 07:00

import requests import re # 정규식 관련 패키지 from bs4 import BeautifulSoup headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36"} for i in range(1, 6): print("페이지 :", i) url = "https://www.coupang.com/np/search?q=%EB%85%B8%ED%8A%B8%EB%B6%81&channel=user&component=&eventCategory=SRP&trcid=&traid=&sorter=scoreDesc&mi..

프로그래밍 언어/웹 스크래핑 2020. 9. 4. 18:25