码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • python爬虫(数据获取——selenium)


    环境测试

    1. from selenium import webdriver
    2. chromedriver_path = r"C:\Program Files\Google\Chrome\Application\chromedriver.exe"
    3. driver = webdriver.Chrome()
    4. url = "https://www.xinpianchang.com/discover/article?from=navigator"
    5. driver.get(url)
    6. driver.close()

    常用API

    操作页面元素 

    1. from selenium import webdriver
    2. import json
    3. chromedriver_path = r""
    4. driver = webdriver.Chrome()
    5. url = "https://passport.xinpianchang.com/login?redirect_uri=https%3A%2F%2Fwww.xinpianchang.com%2Fuser%2F14226548&mode=quick&type=phone"
    6. driver.get(url)
    7. with open(r"C:\Users\lenovo\Desktop\a.txt", 'r', encoding='utf-8') as rStream:
    8. read = rStream.read()
    9. replace = read.replace("'", '"').replace("True", "true").replace("False", "false").replace("Null", "null")
    10. with open(r"", 'w', encoding='utf-8') as wStream:
    11. write = wStream.write(replace)
    12. with open(r"", 'r', encoding='utf-8') as rStream:
    13. read = rStream.read()
    14. import json
    15. loads = json.loads(read)
    16. print(loads)
    17. for c in loads:
    18. driver.add_cookie(c)
    19. driver.get("https://www.xinpianchang.com/")

  • 相关阅读:
    基于Java+Springboot+Vue+elememt宠物用品商城系统设计实现
    【CI/CD】Rancher CD过程--20230906
    通过内网穿透技术实现USB设备共享(USB Redirector)逆向共享
    java毕业设计球迷信息交流论坛源码+lw文档+mybatis+系统+mysql数据库+调试
    top 修改进程的优先级
    高等数学(第七版)同济大学 习题7-3 个人解答
    Postman的高级使用,傻瓜式学习【上】
    pytorch 1.13.0 windows GPU torch 离线安装
    SpringBoot 框架学习
    PAM从入门到精通(十)
  • 原文地址:https://blog.csdn.net/qq_56127002/article/details/134216180
  • 最新文章
  • C# 内存安全性的重大演进:重新定义 unsafe 关键字
    [Python]标准库argparse解析命令行参数使用介绍
    [开源] 全屏时钟 / Full Clock:放弃 time.is,用 Svelte 5 写了一个极致纯净的全屏时钟,解决秒数焦虑
    三、Linux 文件管理+用户管理
    XGBoost + SHAP 一键生成 10 张出版级模型解释图
    【Azure App Service】应用服务(Web App)里的 SNAT 端口 vs 出站连接数:到底是谁限制了谁?
    WEB-2026DASCTF夏季赛-CorpGate
    为什么你用光模块测试FPGA IBERT不通
    面试官:Workflow 和 Agent 有什么区别?如何选型?
    从失忆到记住一切:Spring AI AutoMemoryTools 与 Session API 实战
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号