首页 > 其他 > 详细

Selenium 的基本使用【模拟浏览器爬取】

时间:2021-08-04 22:39:10      阅读:30      评论:0      收藏:0      [点我收藏+]

 

 

 

from typing_extensions import Final
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait
browser = webdriver.Chrome()

try:
  browser.get(https://www.baidu.com)
  input = browser.find_element_by_id(kw)
  input.send_keys(Python)
  input.send_keys(Keys.ENTER)
  wait = WebDriverWait(browser, 10)
  wait.until(EC.presence_of_element_located((By.ID, content_left)))

  print(browser.current_url)
  print(browser.get_cookies())
  print(browser.page_source)
finally:
  browser.close()

 

模拟浏览器爬取

有些靠JavaScript渲染的网站,直接requests.get()是获取不到内容的

 

Selenium 的基本使用【模拟浏览器爬取】

原文:https://www.cnblogs.com/zhzhang/p/15100989.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!