-
爬虫之selenium
目录
selenium介绍
由于requests模块不能执行js，有的页面内容，我们在浏览器中可以看到，但是请求下来没有。
selenium模块：模拟操作浏览器，完成人的行为。
selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器。
模块安装：
pip install selenium下载驱动
驱动浏览器需要下载相应的驱动，谷歌要下谷歌的驱动，火狐要下火狐的驱动，并且版本要与当前浏览器对应。
这里我选择谷歌浏览器，首先查看当前谷歌浏览器的版本：
版本：
下载驱动，地址：CNPM Binaries Mirror (npmmirror.com)，一定要下载对应的版本驱动，比如我谷歌浏览器版本为103.0.5060.134，就要下103.0.5060.134的驱动
下载对应操作系统即可。
基本使用
导入模块：
from selenium import webdriver初始化(打开浏览器)：
browser = webdriver.Chrome(executable_path='驱动路径')- # 不写路径，要放到项目路径下或环境变量中
- browser = webdriver.Chrome()
在地址栏输入地址：
browser.get('http://www.baidu.com')关闭标签：
browser.close()关闭浏览器：
browser.quit()selenium用法
元素操作
操作浏览器页面中的标签。
1.搜索标签
新版本：by=根据什么查找，value=查找的值
- find_element(by, value)：找第一个
- find_elements(by, value)：找所有
by的参数 含义 By.ID 根据标签id属性查找 By.LINK_TEXT 根据a标签的文字查找 By.PARTIAL_LINK_TEXT 根据a标签的文字模糊匹配 By.TAG_NAME 根据标签名查找 By.CLASS_NAME 根据标签class属性查找 By.NAME 根据标签name属性查找 -
相关阅读:
做了5年自媒体，总结下自媒体短视频不会内容创造怎么办？
亚马逊创建eks
Datatables插件的使用（从前台到后台完整流程）
众佰诚：抖音网店挣钱吗
XPS就是分一下峰没你想的那么简单!-科学指南针
3D Gaussian Splatting for Real-Time Radiance Field Rendering
Linux 查看内存使用情况的几种方法
小目标检测闲谈
绝对值和hashCode神奇的化学反应
【WALT】调度与负载计算（未更新完）
- 原文地址：https://blog.csdn.net/weixin_67531112/article/details/128207021