지금 이 순간을 살아라

from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC browser = webdriver.Chrome() browser.maximize_window() # 윈도우 창 최대화 url = "https://flight.naver.com/flights/" browser.get(url) # url 로 이동 # 가는 날 선택 클릭 browser.find_element_by_link_text("가는날 선택").click() ..

프로그래밍 언어/웹 스크래핑 2020. 9. 8. 07:00

import time from selenium import webdriver # chromedriver 경로를 인자값으로 넘겨줌 # 같은 경로에 chromedriver.exe 있을 경우 경로 입력 필요 없음. browser = webdriver.Chrome() # "./chromedriver.exe" # 1. 네이버 이동 browser.get("https://www.naver.com/") # 2. 로그인 버튼 클릭 elem = browser.find_element_by_class_name("link_login") elem.click() # 3. id, pw 입력 browser.find_element_by_id("id").send_keys("naver-id") browser.find_element_by_i..

프로그래밍 언어/웹 스크래핑 2020. 9. 7. 15:56

visual studion code 의 TERMINAL 창에서도 selenium 명령어를 실해할 수 있다. 명령어 실행 시 대소문자에 유의 해야 한다. >>>python >>> from seleium import webdriver >>> browser = webdriver.Chrome() browser.get("http://naver.com") >>> elem = browser.find_element_by_class_name("link_login") >>> elem >>> elem.click() >>> browser.back() >>> browser.forward() >>> browser.refresh() >>> browser.back() >>> elem = browser.find_element_by_i..

프로그래밍 언어/웹 스크래핑 2020. 9. 6. 07:00

설치 항목 - selenium visual studio code의 TERMINAL 창에서 pip install selenium 입력 후 설치 - google webdriver 구글 버전 확인 : chrome://version 혹은 구글 브라우저 설정 -> 도움말 -> Chrome 정보(G) 에서 확인 구글 검색 창에 google webdriver 입력 후 다운로드 페이지로 이동 후 chrome 브라우저 버전에 맞는 webdriver 선택 후 클릭 OS에 맞는 webdriver 다운로드. 다운 로드 받은 파일을 visual studio code의 workspace 에 이동 후 다음 코드를 실행. # pip install selenium from selenium import webdriver # chrome..

프로그래밍 언어/웹 스크래핑 2020. 9. 5. 07:00

import requests import re # 정규식 관련 패키지 from bs4 import BeautifulSoup headers = {"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.135 Safari/537.36"} for i in range(1, 6): print("페이지 :", i) url = "https://www.coupang.com/np/search?q=%EB%85%B8%ED%8A%B8%EB%B6%81&channel=user&component=&eventCategory=SRP&trcid=&traid=&sorter=scoreDesc&mi..

프로그래밍 언어/웹 스크래핑 2020. 9. 4. 18:25

name = item.find("div", attrs={"class":"name"}).get_text() # 제품명 price = item.find("strong", attrs={"class":"price-value"}).get_text() # 가격 rate = item.find("em", attrs={"class":"rating"}) # 평점 rate_cnt = item.find("span", attrs={"class":"rating-total-count"}) #평점 수 ad_badge = item.find("span", attrs={"class":"ad-badge-text"}) # 광고 상품 전체 코드 import requests import re # 정규식 관련 패키지 from bs4 import ..

프로그래밍 언어/웹 스크래핑 2020. 9. 3. 17:47

# beautifulsoup4 설치 : pip install beautifulsoup4 # lxml 설치 : pip install lxml # beautifulsoup 참고 사이트 : https://www.crummy.com/software/BeautifulSoup/bs4/doc.ko/ import requests from bs4 import BeautifulSoup # url = "https://comic.naver.com/webtoon/weekday.nhn" url = "https://comic.naver.com/webtoon/list.nhn?titleId=733766&weekday=mon" res = requests.get(url) res.raise_for_status() soup = Beautif..

프로그래밍 언어/웹 스크래핑 2020. 9. 2. 07:00

# beautifulsoup4 설치 : pip install beautifulsoup4 # lxml 설치 : pip install lxml import requests from bs4 import BeautifulSoup url = "https://comic.naver.com/webtoon/weekday.nhn" res = requests.get(url) res.raise_for_status() soup = BeautifulSoup(res.text, "lxml") # 네이버 웹툰 전체 목록 가져오기 cartoons = soup.find_all("a", attrs={"class":"title"}) # a element 의 class 속성이 title 인 모든 element 를 반환 for cartoon i..

프로그래밍 언어/웹 스크래핑 2020. 9. 1. 07:00