Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码

Posted

技术标签:

【中文标题】Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码【英文标题】:Selenium using Python: enter/provide http proxy password for firefox 【发布时间】:2012-02-11 16:43:27 【问题描述】:

我想将 selenium 与受密码保护的代理一起使用。代理不是固定的,而是一个变量。所以这必须在代码中完成(只是在这台特定的机器上设置 firefox 来使用代理并不理想)。到目前为止,我有以下代码:

fp = webdriver.FirefoxProfile()
# Direct = 0, Manual = 1, PAC = 2, AUTODETECT = 4, SYSTEM = 5
fp.set_preference("network.proxy.type", 1)

fp.set_preference("network.proxy.http", PROXY_HOST)
fp.set_preference("network.proxy.http_port", PROXY_PORT)

driver = webdriver.Firefox(firefox_profile=fp)
driver.get("http://whatismyip.com")

此时,弹出对话框请求代理用户/通行证。

有没有简单的方法:

    在对话框中输入用户/密码。 在较早阶段提供用户/通行证。

【问题讨论】:

嘿伙计,你找到解决办法了吗? @Shane 你找到解决方案了吗? @ArsenIbragimov 你找到解决方案了吗? 要使用带有扩展名的Firefox,请参见:***.com/a/39903614/955422 【参考方案1】:

Selenium 本身无法做到这一点。我发现有帮助的唯一方法是 here。简而言之,您需要动态添加一个进行身份验证的浏览器扩展。它比看起来要简单得多。

这是 Chrome 的工作原理(以我为例):

    创建一个包含两个文件的 zip 文件 proxy.zip

background.js

var config = 
    mode: "fixed_servers",
    rules: 
      singleProxy: 
        scheme: "http",
        host: "YOU_PROXY_ADDRESS",
        port: parseInt(YOUR_PROXY_PORT)
      ,
      bypassList: ["foobar.com"]
    
  ;

chrome.proxy.settings.set(value: config, scope: "regular", function() );

function callbackFn(details) 
    return 
        authCredentials: 
            username: "YOUR_PROXY_USERNAME",
            password: "YOUR_PROXY_PASSWORD"
        
    ;


chrome.webRequest.onAuthRequired.addListener(
        callbackFn,
        urls: ["<all_urls>"],
        ['blocking']
);

不要忘记将 YOUR_PROXY_* 替换为您的设置。

ma​​nifest.json


    "version": "1.0.0",
    "manifest_version": 2,
    "name": "Chrome Proxy",
    "permissions": [
        "proxy",
        "tabs",
        "unlimitedStorage",
        "storage",
        "<all_urls>",
        "webRequest",
        "webRequestBlocking"
    ],
    "background": 
        "scripts": ["background.js"]
    ,
    "minimum_chrome_version":"22.0.0"

    将创建的 proxy.zip 添加为扩展

    from selenium import webdriver
    from selenium.webdriver.chrome.options import Options
    
    chrome_options = Options()
    chrome_options.add_extension("proxy.zip")
    
    driver = webdriver.Chrome(executable_path='chromedriver.exe', chrome_options=chrome_options)
    driver.get("http://google.com")
    driver.close()
    

就是这样。对我来说,这就像一个魅力。如果您需要动态创建 proxy.zip 或需要 php 示例,请转到 original post

【讨论】:

迈克,它对我不起作用 - joxi.net/LmG3OVNTRbEMam 最后一行是 WebDriverException: Message: unknown error: cannot process extension #1 from unknown error: cannot read manifest (Driver info: chromedriver=2.29.461591 (62ebf098771772160f391d75e589dc567915b233),platform=Windows NT 10.0.14393 x86_64) 那么如何与附加扩展通信呢?支持我想动态更改代理 我已经为 SOCKS5 尝试过这个,并将方案:“http”更改为方案:“socks5”,但没有运气。任何想法如何改变 socks5 而不是 HTTP? @IgorSavinkin 检查清单文件的后缀 -> .json 而不是 .js 成功了!谢谢!【参考方案2】:

代码为我工作

from selenium import webdriver

browser=webdriver.Firefox()

def login(browser):

    alert=browser.switch_to_alert()
    alert.send_keys("username"+webdriver.common.keys.Keys.TAB+"password")
    alert.accept() 

【讨论】:

丑陋的方法,但唯一对我有用的方法,只是一种切换到警报的新方法:driver.switch_to.alert.send_keys(user + TAB + pass)driver.switch_to.alert.accept() 重要的是,将所有文本一起发送而不是调用 send_keys() 三次。 【参考方案3】:

你试过PROXY_HOST = "http://username:password@proxy.host.com"吗?

Also:

从 Selenium 2.0 beta 1 开始,内置支持 处理弹出对话框。

【讨论】:

PROXY_HOST = "username:password@proxy.host.com" 不工作。至于弹出对话框处理,我如何定位用户/传递元素来输入? @Shane,你试过PROXY_HOST = "username:password@proxy.host.com" 还是PROXY_HOST = "http://username:password@proxy.host.com"。第二个应该通过基本身份验证。关于元素位置:如果您可以切换到对话框,则始终可以导航其发送tab 键信号的元素。 这仅适用于过时版本的 chrome 和 selenium

以上是关于Selenium 使用 Python:输入/提供 Firefox 的 http 代理密码的主要内容,如果未能解决你的问题,请参考以下文章

python selenium中的NoSuchElementException

使用 selenium 根据输入单击链接 [python]

python+selenium自动化软件测试(第7章):Page Object模式

Python爬虫 Selenium -- Selenium元素定位Selenium访问元素信息Selenium交互

使用 Selenium 和 python 为 Instagram 提供上传文件路径

python使用selenium执行JS快速完成超长字符串的输入