Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码
Posted
技术标签:
【中文标题】Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码【英文标题】:Selenium using Python: enter/provide http proxy password for firefox 【发布时间】:2012-02-11 16:43:27 【问题描述】:我想将 selenium 与受密码保护的代理一起使用。代理不是固定的,而是一个变量。所以这必须在代码中完成(只是在这台特定的机器上设置 firefox 来使用代理并不理想)。到目前为止,我有以下代码:
fp = webdriver.FirefoxProfile()
# Direct = 0, Manual = 1, PAC = 2, AUTODETECT = 4, SYSTEM = 5
fp.set_preference("network.proxy.type", 1)
fp.set_preference("network.proxy.http", PROXY_HOST)
fp.set_preference("network.proxy.http_port", PROXY_PORT)
driver = webdriver.Firefox(firefox_profile=fp)
driver.get("http://whatismyip.com")
此时,弹出对话框请求代理用户/通行证。
有没有简单的方法:
-
在对话框中输入用户/密码。
在较早阶段提供用户/通行证。
【问题讨论】:
嘿伙计,你找到解决办法了吗? @Shane 你找到解决方案了吗? @ArsenIbragimov 你找到解决方案了吗? 要使用带有扩展名的Firefox,请参见:***.com/a/39903614/955422 【参考方案1】:Selenium 本身无法做到这一点。我发现有帮助的唯一方法是 here。简而言之,您需要动态添加一个进行身份验证的浏览器扩展。它比看起来要简单得多。
这是 Chrome 的工作原理(以我为例):
-
创建一个包含两个文件的 zip 文件 proxy.zip:
background.js
var config =
mode: "fixed_servers",
rules:
singleProxy:
scheme: "http",
host: "YOU_PROXY_ADDRESS",
port: parseInt(YOUR_PROXY_PORT)
,
bypassList: ["foobar.com"]
;
chrome.proxy.settings.set(value: config, scope: "regular", function() );
function callbackFn(details)
return
authCredentials:
username: "YOUR_PROXY_USERNAME",
password: "YOUR_PROXY_PASSWORD"
;
chrome.webRequest.onAuthRequired.addListener(
callbackFn,
urls: ["<all_urls>"],
['blocking']
);
不要忘记将 YOUR_PROXY_* 替换为您的设置。
manifest.json
"version": "1.0.0",
"manifest_version": 2,
"name": "Chrome Proxy",
"permissions": [
"proxy",
"tabs",
"unlimitedStorage",
"storage",
"<all_urls>",
"webRequest",
"webRequestBlocking"
],
"background":
"scripts": ["background.js"]
,
"minimum_chrome_version":"22.0.0"
将创建的 proxy.zip 添加为扩展
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
chrome_options = Options()
chrome_options.add_extension("proxy.zip")
driver = webdriver.Chrome(executable_path='chromedriver.exe', chrome_options=chrome_options)
driver.get("http://google.com")
driver.close()
就是这样。对我来说,这就像一个魅力。如果您需要动态创建 proxy.zip 或需要 php 示例,请转到 original post
【讨论】:
迈克,它对我不起作用 - joxi.net/LmG3OVNTRbEMam 最后一行是WebDriverException: Message: unknown error: cannot process extension #1 from unknown error: cannot read manifest (Driver info: chromedriver=2.29.461591 (62ebf098771772160f391d75e589dc567915b233),platform=Windows NT 10.0.14393 x86_64)
那么如何与附加扩展通信呢?支持我想动态更改代理
我已经为 SOCKS5 尝试过这个,并将方案:“http”更改为方案:“socks5”,但没有运气。任何想法如何改变 socks5 而不是 HTTP?
@IgorSavinkin 检查清单文件的后缀 -> .json 而不是 .js
成功了!谢谢!【参考方案2】:
代码为我工作
from selenium import webdriver
browser=webdriver.Firefox()
def login(browser):
alert=browser.switch_to_alert()
alert.send_keys("username"+webdriver.common.keys.Keys.TAB+"password")
alert.accept()
【讨论】:
丑陋的方法,但唯一对我有用的方法,只是一种切换到警报的新方法:driver.switch_to.alert.send_keys(user + TAB + pass)
driver.switch_to.alert.accept()
重要的是,将所有文本一起发送而不是调用 send_keys()
三次。
【参考方案3】:
你试过PROXY_HOST = "http://username:password@proxy.host.com"
吗?
Also:
从 Selenium 2.0 beta 1 开始,内置支持 处理弹出对话框。
【讨论】:
PROXY_HOST = "username:password@proxy.host.com"
不工作。至于弹出对话框处理,我如何定位用户/传递元素来输入?
@Shane,你试过PROXY_HOST = "username:password@proxy.host.com"
还是PROXY_HOST = "http://username:password@proxy.host.com"
。第二个应该通过基本身份验证。关于元素位置:如果您可以切换到对话框,则始终可以导航其发送tab
键信号的元素。
这仅适用于过时版本的 chrome 和 selenium以上是关于Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码的主要内容,如果未能解决你的问题,请参考以下文章
python selenium中的NoSuchElementException
python+selenium自动化软件测试(第7章):Page Object模式
Python爬虫 Selenium -- Selenium元素定位Selenium访问元素信息Selenium交互