파이썬/크롤링 3

python(vscode)/네이버 쇼핑 가격가져오기#1/BeautifulSoup/select

네이버 쇼핑에서 청바지를 검색하고 가격들을 가져와보자. 1. 코드작성 1 2 3 4 5 6 7 8 9 10 11 12 13 import requests from bs4 import BeautifulSoup URL = 'https://search.shopping.naver.com/search/all?query=' search_item = ['청바지'] # 검색어 입력하기 res = requests.get(URL + str(search_item[0])) #검색어 입력한후 html 가져오기 page_soup = BeautifulSoup(res.text, 'lxml') price = page_soup.select('span[class="price_price__LEGN7"]')[0] # 가격이있는 태그 가져오기 ..

파이썬/크롤링 2023.03.06

python(vscode)/뉴스 기사 제목 날짜 크롤링하기/beautifulsoup/find

크롤링해서 기사 제목 가져오기 해보자 1. 우선 기사를 고른다. 아래 기사를 이용해보자. https://newsis.com/view/?id=NISX20230228_0002208506&cID=13001&pID=13000 bhc치킨, 가맹점주 대상 레시피 공모전 열어 [서울=뉴시스]주동일 기자 = bhc치킨은 가맹점과 함께 신메뉴 아이디어를 공모하는 '제 1회 가맹점주와 함께하는 대국민 치킨 메뉴 콘테스트'를 진행한다고 28일 밝혔다 www.newsis.com 2. 코드작성 1) 기사의 날짜찾기는 두번에 걸쳐 찾아봤다. 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 import requests from bs4 import BeautifulSoup base_url ..

파이썬/크롤링 2023.03.01

파이썬 - selenium/ 크롬 드라이버 설치

크롬 드라이버를 아래 사이트에서 설치해야 selenium 사용할 수 있다. 설치전에 버젼을 확인해줘야한다. 나의 크롬의 현재버전을 먼저확인하고 그에 맞는 버전을 다운로드해준다. *크롬 버전확인 주소 chrome://settings/ 아래와 같이 버전을 확인 할 수 있다. 앞 두자리만 확인하자. 나는 99 *크롬드라이버 설치 사이트 https://chromedriver.chromium.org/downloads *참고 헤드리스 브라우저 phantomjs

파이썬/크롤링 2022.03.29