河北建设执业信息网站,合肥建设局网站官网,pc网站开发成app难度,广东佛山如何制作网站公司Selenium 操作被屏蔽
使用selenium自动化网页时#xff0c;有一定的概率会被目标网站识别#xff0c;一旦被检测到#xff0c;目标网站会拦截该客户端做出的网页操作。
比如淘宝和大众点评的登录页#xff0c;当手工打开浏览器#xff0c;输入用户名和密码时#xff0c…Selenium 操作被屏蔽
使用selenium自动化网页时有一定的概率会被目标网站识别一旦被检测到目标网站会拦截该客户端做出的网页操作。
比如淘宝和大众点评的登录页当手工打开浏览器输入用户名和密码时是能正常进入首页的但是如果是通过selenium打开 会直接提示验证失败点击框体重试。 本文介绍一种办法不需要修改浏览器属性不需要注入JavaScript脚本也能轻松绕过网站检测。 Selenium为何会被检测
每一个浏览器访问网站时都会带上特定的指纹特征网站会解析这些特征从而判断这次访问是不是自动化程序。
一个最广为人知的特征是window.navigator.webdriver该特征直接标明此浏览器是webdriver程序。当一个浏览器通过selenium启动后在开发者工具中输入这个属性会发现被标为 true 而手工打开的浏览器是 false。 实际上浏览器被检测为webdriver程序的特征并不止这一个这意味着就算你通过修改属性也不一定能绕过网站的检测。
我们可以通过 sannysoft 来检测浏览器指纹如果浏览器是通过selenium等自动化程序打开的访问这个网址后会有很多特征暴露这些指纹这些特征的值和手工打开后的值是不一样的因此可以很轻易被别人检测出来。 有人也试图不用selenium换成puppeter和playwright这样的自动化工具但是结局都是一样的。 Selenium避免被检测方法
浏览器在启动时就会带上指纹特征如果使用自动化程序启动时已经被标记那为什么不直接用手工启动然后用Selenium连接已经启动的浏览器呢
那手工打开浏览器要做什么操作才能让Selenium连接呢Selenium又是怎样连接手工打开的浏览器呢概括起来
1、打开浏览器时添加以下参数
--remote-debugging-port9222 --user-data-dirC:\\selenium\\ChromeProfile2、selenium中设置浏览器选项通过上面设置的 9222端口连接浏览器
from selenium.webdriver.chrome.options import Optionschrome_options Options()
chrome_options.add_experimental_option(debuggerAddress, 127.0.0.1:9222)
driver webdriver.Chrome(optionschrome_options)通过 subprocess 运行浏览器
当然做自动化程序一般不会手工点击图标来打开浏览器我们可以用命令行启动浏览器然后再用 selenium 连接。
import subprocess
cmd C:\\Program Files (x86)\\Google\\Chrome\\Application\\chrome.exe \\
--remote-debugging-port9222 \\
--user-data-dirC:\\selenium\\ChromeProfilesubprocess.run(cmd)
END配套学习资源分享
最后 为了回馈铁杆粉丝们我给大家整理了完整的软件测试视频学习教程朋友们如果需要可以自行免费领取 【保证100%免费】 软件测试面试文档
我们学习必然是为了找到高薪的工作下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料并且有字节大佬给出了权威的解答刷完这一套面试资料相信大家都能找到满意的工作。 全套资料获取方式
