Selenium에서 요소를 선택 후 드래그 하는 방법입니다. from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC from selenium import webdriver from selenium.webdriver.common.action_chains import ActionChains driver = webdriver.Chrome() driver.get("https://jqueryui.com/droppable/") driver.switch_to.frame(0) # 타..

AttributeError: 'WebDriver' object has no attribute 'find_element_by_id' 위와 같은 에러가 발생했을 경우 해결하는 방법입니다. # 변경 전 driver.find_element_by_id("draggable") # 변경 후 from selenium.webdriver.common.by import By driver.find_element(By.ID, "draggable") 위와 같이 변경하면 되는데요, from selenium.webdriver.common.by import By 해당 모듈을 반드시 추가해주셔야 합니다.

이번에는 아래 메인 페이지에 있는 이미지의 src를 추출해서 직접 파일로 다운로드해볼께요 파이썬 코드 import requests from bs4 import BeautifulSoup from selenium import webdriver import undetected_chromedriver as uc from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC from selenium.webdriver.chrome.service import Service from web..

SELECT FROM SELECT column1, column2, ... FROM table_name WHERE condition; SELECT student_id, name, age FROM students WHERE age >= 20; | student_id | name | age | |------------|---------|-----| | 1 | John | 18 | | 2 | Alice | 21 | | 3 | Michael | 19 | | 4 | Sarah | 22 | | 5 | David | 20 | | student_id | name | age | |------------|-------|-----| | 2 | Alice | 21 | | 4 | Sarah | 22 | | 5 | David | ..

이번에는 FnGuide사이트에 게시되는 오늘의 급상승 검색어를 추출해볼께요 FnGuide 아래 키워드 클라우드 부분을 추출할 예정이에요 추출하면서 단어 크기에 따른 비중도 함께 추출해볼께요 사이트에 접속하면 공지사항 팝업이 뜨는데 이것부터 닫아줄께요 팝업 닫기 버튼을 찾아서 클릭해줍니다 button = driver.find_element(By.ID, "closeBtn2") button.click() 그 다음에는 워드클라우드를 찾아서 키워드를 추출하고 class를 활용하여 각 키워드의 비중 또한 추출합니다 cloud_div = driver.find_element(By.ID, "cloud") span_tags = cloud_div.find_elements(By.TAG_NAME, "span") for span..

이번에는 네이버 카페 인기글 게시판의 제목을 추출해볼께요 네이버 카페 (비머베르크) 먼저 인기글을 클릭해야겠네요 link_text = "인기글" element = driver.find_element(By.LINK_TEXT, link_text) element.click() 게시글 요소를 찾을 수 없데요 네이버 카페 게시판은 동일 페이지에서도 iframe을 쓰나보네요 프레임을 바꿔볼께요 iframe_element = driver.find_element(By.ID, "cafe_main") driver.switch_to.frame(iframe_element) 이제는 잘 되겠죠 tbody안에 모든 tr태그를 크롤링해볼께요 tbody_element = driver.find_element(By.XPATH, "//tb..

이번에는 네이버 스포츠 사이트의 일별 야구 일정/결과 페이지를 크롤링해볼께요 네이버 스포츠 먼저 Selenium을 사용하여 해당 사이트로 접속합니다. import requests from bs4 import BeautifulSoup from selenium import webdriver import undetected_chromedriver as uc from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_cond..

이번에는 네이버 쇼핑 검색 후 결과 페이지의 최하단까지 스크롤하는 방법을 알아볼께요. 네이버 쇼핑 네이버 쇼핑 - 검색결과 페이지 위와 같이 검색결과 페이지는 한번에 모든 내용을 표시해주지 않아요 아래로 스크롤 할때마다 다음 목록을 새로 불러와 보여줍니다 파이썬 셀레니움(Selenium)을 활용해서 특정 키워드 검색 및 최하단까지 스크롤하는 방법을 알아볼께요 import requests from bs4 import BeautifulSoup from selenium import webdriver import undetected_chromedriver as uc from selenium.webdriver.common.by import By from selenium.webdriver.common.keys im..

requests 사용 시 발생하는 SSLError입니다 해결 방법을 알아볼께요 import requests from requests.packages.urllib3.exceptions import InsecureRequestWarning requests.packages.urllib3.disable_warnings(InsecureRequestWarning) url = "url 입력" response = requests.post(url, verify=False) if response.status_code == 200: # You can access the response text or other properties here print(response.text) else: print(f"Error: {respo..

pip으로 Selenium을 설치하는 방법입니다. 파이썬과 pip이 설치되어 있어야 합니다. 커맨드창 실행 후 아래 명령어를 입력해주면 자동으로 최신 버젼의 Selenium이 설치됩니다. pip install selenium