python爬虫登陆问题

Posted qing0228

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫登陆问题相关的知识,希望对你有一定的参考价值。

 根据腾讯课堂网页登陆问题进行解说(需要安装谷歌浏览器):

1、导入库

import requests
from selenium import webdriver

2、根据腾讯课堂链接,进入页面,获取页面中登陆的xpath,并进行点击操作

技术图片

driver = webdriver.Chrome()
driver.get("https://ke.qq.com/course/403521")
driver.find_element_by_xpath(//*[@id="js_login"]).click()

3、进入登陆页面之后获取登陆方式,本次选择使用qq进行登陆,获取qq登陆的xpath并进行点击操作。

技术图片

driver.find_element_by_xpath(/html/body/div[4]/div/div[2]/div[2]/a[1]).click()

4、点击使用账号密码登陆。在该登陆过程中出现以下错误。

技术图片

  主要原因是无法找到我们定位的xpath,需要先找到定位元素所处的frame,并从frame中寻找该元素。

 

技术图片

 

driver.switch_to_frame("login_frame_qq")//引号中添加frame标签中的name或id值
driver.find_element_by_xpath(//*[@id="switcher_plogin"]).click()

5、获取到输入账号密码以及登陆位置的xpath。当运行时再次出现定位不到xpath的情况,使用第四步的方法依旧没能成功,提示所在框架不对,估计是跟第4步的frame标签的name相同的原因吧。最后的解决方法是:先回到最外层框架,之后进入要定位元素的框架,最后对账号密码进行定位。

技术图片

 

driver.switch_to.default_content()//回到最外层框架
driver.switch_to_frame("login_frame_qq")//进入定位元素的框架
driver.find_element_by_xpath(//*[@id="u"]).clear()
driver.find_element_by_xpath(//*[@id="u"]).send_keys("输入自己的账号")
driver.find_element_by_xpath(//*[@id="p"]).clear()
driver.find_element_by_xpath(//*[@id="p"]).send_keys("输入自己的密码")

6、点击登陆按钮,至此就已经进入网页版的腾讯课堂了。

driver.find_element_by_xpath(//*[@id="login_button"]).click()

 完整代码如下:

import requests
from selenium import webdriver

driver = webdriver.Chrome()
driver.get("https://ke.qq.com/course/403521")
driver.find_element_by_xpath(//*[@id="js_login"]).click()
driver.find_element_by_xpath(/html/body/div[4]/div/div[2]/div[2]/a[1]).click()

driver.switch_to_frame("login_frame_qq")//引号中添加frame标签中的name或id值
driver.find_element_by_xpath(//*[@id="switcher_plogin"]).click()
driver.switch_to.default_content()//回到最外层框架
driver.switch_to_frame("login_frame_qq")//进入定位元素的框架
driver.find_element_by_xpath(//*[@id="u"]).clear()
driver.find_element_by_xpath(//*[@id="u"]‘).send_keys("输入自己的账号")
driver.find_element_by_xpath(//*[@id="p"]).clear()
driver.find_element_by_xpath(//*[@id="p"]‘).send_keys("输入自己的密码")
driver.find_element_by_xpath(//*[@id="login_button"]).click()

 

以上是关于python爬虫登陆问题的主要内容,如果未能解决你的问题,请参考以下文章

python爬虫登陆问题

python爬虫 模拟登陆校园网-初级

python爬虫之获取验证码登陆

Python爬取知乎与我所理解的爬虫与反爬虫

怎样用Python设计一个爬虫模拟登陆知乎

怎样用Python设计一个爬虫模拟登陆知乎