草庐IT

selenium-webdriver-Chrome

全部标签

Selenium - Tracy 小笔记2

selenium本身是一个自动化测试工具。它可以让python代码调用浏览器。并获取到浏览器中加们可以利用selenium提供的各项功能。帮助我们完成数据的抓取。它容易被网站识别到,所以有些网站爬不到。它没有逻辑,只有相应的函数,直接搜索即可提纲:1.掌握selenium发送请求,加载网页的方法2.掌握selenium简单的元素定位的方法3.掌握selenium的基础属性和方法4.掌握selenium退出的方法安装pipinstallselenium用chrome浏览器chrome驱动地址:http://chromedriver.storage.googleapis.com/index.htm

selenium还能这么玩:连接已经存在的浏览器

测试和爬虫对selenium并不会陌生,现有的教程已经非常多。但是因为selenium封装的方法比较底层,所以灵活性非常高,我们可以基于这种灵活性来实现非常丰富的定制功能。这篇文章介绍一个操作,可以让selenium连接我们手动打开的浏览器。他的应用场景主要是:你可以通过手工先实现一些自动化难处理的操作,让selenium绕过这些复杂操作,然后再执行自动化。自动化的时候经常头痛的扫码登录,可以通过这种方式绕过,短期无法解决的验证码的识别,也可以通过这种方式绕过。手工打开浏览器可能有的小伙伴不知道,打开浏览器有两种方式:图标点击和命令行运行。图标点击不用多说,我们经常使用这种方式打开浏览器。命令

整理网上关于selenium的反爬机制以及解决办法。

只是收集目前找到的一些关于selenium的反爬问题。未亲自尝试,不保证效果。也会持续跟进相关的内容继续整理。1.window.navigator.webdriver现象:用户正常访问该值为false。使用selenium时该值为true。解决:去除该参数option=ChromeOptions()#设置为开发者模式option.add_experimental_option('excludeSwitches',['enable-automation'])option.add_experimental_option('useAutomationExtension',False)option.a

selenium 选定ul-li下拉选项中某个指定选项

场景:selenium的下拉选项是ul-li模式,选定某个指定的选项。fromselenium.webdriver.support.uiimportWebDriverWaitfromselenium.webdriver.supportimportexpected_conditionsasEC#显示等待defselect_li(self,text,*ul_locator):"""定位ul_li下拉选项中某个指定的下拉选项li:paramtext:预期的输入项:paramul_locator:定位到ul元素:return:"""try:ul_ele=WebDriverWait(self.drive

无法打开Chrome Web Store 安装 vue-devtools的两种解决办法

VueDevtools文档当在Chrome浏览器中按官网这种方式打不开链接,又不想更换浏览器去安装vue-devtools,可采用下面两种方案image.png方法1.在vuejs/devtoolsgithub上下载源码在本地打包编译出谷歌扩展程序image.png这里选择最新tag下载image.png进入目录后,运行yarninstall安装依赖,这里安装会“很慢”。。。image.png注:若遇到安装报错,重新安装npminstall-gyarnyarninstall安装成功后执行yarnrunbuild,成功后如下image.png最后添加到Chrome扩展程序中即可【注意:编译的de

730.离线安装selenium过程中踩的三个大坑

hi~,我是测试人芸芸,一枚北漂女程序员,八小时外玩古筝。有无线网时,使用python第三方库真的是非常便捷,基本都没有去研究过离线安装第三方库怎么做,以及可能会出现的问题。在离线安装selenium的过程中是踩了不少坑的,现在总结一下。坑一:python卸载不干净为了保证环境干净,我是把原来的python重新卸载,完全清理后,又进行安装的python的。当然,在过程中出现了selenium版本的问题,又需要重新卸载python的。为了确保卸载重装干净,注意3个方面的问题:1.在控制面板-程序-卸载程序中,卸载两个程序:Python和pythonlauncher。2.删除系统的环境变量中,用户

爬虫使用Selenium生成Cookie

在爬虫的世界中,有时候我们需要模拟登录来获取特定网站的数据,而使用Selenium登录并生成Cookie是一种常见且有效的方法。本文将为你介绍如何使用Selenium进行登录,并生成Cookie以便后续的爬取操作。让我们一起探索吧!一、Selenium简介1.定义:Selenium是一套自动化测试工具,可以模拟用户在浏览器中的操作。2.安装:使用pip命令安装Selenium库(pipinstallselenium),并下载相应浏览器驱动。二、登录网站的基本步骤1.创建Selenium浏览器实例:在代码中,我们需要创建一个Selenium的浏览器实例,例如Chrome浏览器实例。2.打开登录页

python+selenium自动化测试学习—手动搭建selenium环境

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档python+selenium自动化测试学习—手动搭建selenium环境一、简介二、安装selenium三、下载浏览器驱动四、搭建selenium环境一、简介selenium是一个免费开源的,仅支持用于web应用程序自动化测试的工具。二、安装selenium在Windows系统上使用win+r进入cmd模式下输入pipinstallselenium安装完成之后,可以通过pipshowselenium进行查看三、下载浏览器驱动主要有三种浏览器的驱动,使用不同的浏览器需要下载不同的驱动。此外,浏览器的版本也需要匹配,我们在下载驱动之

Python网络爬虫逆向分析爬取动态网页、使用Selenium库爬取动态网页、​编辑将数据存储入MongoDB数据库

目录逆向分析爬取动态网页了解静态网页和动态网页区别1.判断静态网页 2.判断动态网页 逆向分析爬取动态网页使用Selenium库爬取动态网页安装Selenium库以及下载浏览器补丁页面等待 页面操作1.填充表单2.执行JavaScript元素选取Selenium库的find_element的语法使用格式如下。 1.单个元素查找2.多个元素查找 预期的条件 结果分析了解MongoDB数据库和MySQL数据库的区别​编辑将数据存储入MongoDB数据库1.建立连接 2.获取数据库3.获取一个集合总结        逆向分析爬取动态网页了解静态网页和动态网页区别1.判断静态网页在浏览器中打开网站“h

Python自动化测试实战篇(4)selenium+unttest+ddt实现自动化用例测试,模拟用户登陆点击交互测试,Assert捕获断言多种断言

这些是之前的文章,里面有一些基础的知识点在前面由于前面已经有写过,所以这一篇就不再详细对之前的内容进行描述Python自动化测试实战篇(1)读取xlsx中账户密码,unittest框架实现通过requests接口post登录网站请求,JSON判断登录是否成功Python自动化测试实战篇(2)unittest实现批量接口测试,并用HTMLTestRunner输出测试报告Python自动化测试实战篇(3)优化unittest批量自动化接口测试代码,ddt驱动+yaml实现用例调用,输出HTMLTestRunner测试报告代码已上传有需求可以自行下载Python自动化测试实战篇(4)代码需求我目前的