是否可以使用 OpenCV 将视频从 https://（例如 YouTube）流式传输到 python 中？

Posted 2023-02-23

【中文标题】是否可以使用 OpenCV 将视频从 https://（例如 YouTube）流式传输到 python 中？

【英文标题】：Is it possible to stream video from https:// (e.g. YouTube) into python with OpenCV?

【发布时间】：2016-09-30 00:38:22

【问题描述】：

This link 有一个简洁的小示例，说明如何使用 python 的 OpenCV 库 cv2 将数据从相机流式传输到 python shell。我正在做一些实验，并想使用以下 YouTube 视频供稿：https://www.youtube.com/watch?v=oCUqsPLvYBQ。

我已尝试将示例改编如下：

import numpy as np
import cv2

cap = cv2.VideoCapture('https://www.youtube.com/watch?v=oCUqsPLvYBQ')

while(True):
    # Capture frame-by-frame
    ret, frame = cap.read()

    # Display the resulting frame
    cv2.imshow('frame',frame)
    if cv2.waitKey(1) & 0xFF == ord('q'):
        break

产生错误的原因：

WARNING: Couldn't read movie file https://www.youtube.com/watch?v=oCUqsPLvYBQ
OpenCV Error: Assertion failed (size.width>0 && size.height>0) in imshow, file /tmp/opencv20160107-29960-t5glvv/opencv-2.4.12/modules/highgui/src/window.cpp, line 261

是否有一个简单的修复方法可以让我通过cv2 将此视频源流式传输到我的 python shell 中？也不是绝对致力于cv2，如果有其他库可以实现相同的目的。

【问题讨论】：

我认为不可能像这样打开VideoCapture。在videocapture 上的openCV 文档中写道，参数应该是一个文件。但您可以在两者之间使用youtube-dl。

@incBrain：这看起来很有希望，谢谢。会尽快检查并通知您。

@incBrain: youtube-dl 是要走的路。感谢您的提示！

【参考方案1】：

@incBrain 将 youtube 视频下载到本地 mp4 的建议是这里的方法。以下是我用来在 EC2 上设置远程服务器环境的步骤，输出通过 X11 转发传送到我的本地计算机：

ssh -X -i "<ssh_key.pem>" ubuntu@<IP-address>.compute-1.amazonaws.com（注意-X 选项在这里是一个重要的补充。它是我们用来将输出从 EC-2 服务器传递到本地 X11 客户端） sudo pip install --upgrade youtube_dl（我知道，sudo pip 不好。我怪网站说明） 将 youtube 视频下载到本地文件：youtube-dl https://www.youtube.com/watch?v=VUjF1fRw9sA -o motocross.mp4 python demo_cv.py

X11 转发可能很棘手。如果您遇到任何问题，this post 也可能对您有所帮助。

【讨论】：

是否可以将其作为流访问？无需等待文件下载。

此外，我们有法律限制，不允许我们实际下载文件，并要求我们仅使用流媒体。

【参考方案2】：

pafy (https://pypi.python.org/pypi/pafy) 是可能的

import cv2, pafy

url = "https://www.youtube.com/watch?v=aKX8uaoy9c8"
videoPafy = pafy.new(url)
best = videoPafy.getbest(preftype="webm")

video=cv2.VideoCapture(best.url)

【讨论】：

这不起作用（至少对于 OpenCV 3.4.0）。 video.read() 总是返回（假，无）。网址有效，例如wget 会下载视频。

@burny 你找到解决方法了吗？

【参考方案3】：

你需要安装两件东西

pafy (pip install pafy) youtube_dl (sudo pip install --upgrade youtube_dl)

安装这两个软件包后，您可以使用 youtube url 播放来自 youtube 的流媒体视频。 请参考下面的代码

url = 'https://youtu.be/W1yKqFZ34y4'
vPafy = pafy.new(url)
play = vPafy.getbest(preftype="webm")

#start the video
cap = cv2.VideoCapture(play.url)
while (True):
    ret,frame = cap.read()
    """
    your code here
    """
    cv2.imshow('frame',frame)
    if cv2.waitKey(20) & 0xFF == ord('q'):
        break    

cap.release()
cv2.destroyAllWindows()

【讨论】：

好的，谢谢。自从我问这个问题以来已经有很多年了。有人可以对此进行测试并确认它是否有效，以便我选择答案吗？？

它正在工作，因为我从我的脚本中粘贴了工作代码。你也可以试试。

不工作，使用 opencv 3.4.0

@ArjunKava 你找到解决这个问题的方法了吗？

@ArjunKava 解决方案是升级您的 openCV 版本 :-)

【参考方案4】：

我在 VidGear Python 库中添加了 Youtube URL 源支持，该库仅通过提供其 URL 来自动将 YouTube 视频通过管道传输到 OpenCV。这是一个完整的python示例：

以下为 VidGear v0.1.9：

# import libraries
from vidgear.gears import CamGear
import cv2

stream = CamGear(source='https://youtu.be/dQw4w9WgXcQ', y_tube = True, logging=True).start() # YouTube Video URL as input

# infinite loop
while True:
    
    frame = stream.read()
    # read frames

    # check if frame is None
    if frame is None:
        #if True break the infinite loop
        break
    
    # do something with frame here
    
    cv2.imshow("Output Frame", frame)
    # Show output window

    key = cv2.waitKey(1) & 0xFF
    # check for 'q' key-press
    if key == ord("q"):
        #if 'q' key-pressed break out
        break

cv2.destroyAllWindows()
# close output window

# safely close video stream.
stream.stop()

对于 VidGear v0.2.0 及以上：（y_tube 更改为 stream_mode）

# import libraries
from vidgear.gears import CamGear
import cv2

stream = CamGear(source='https://youtu.be/dQw4w9WgXcQ', stream_mode = True, logging=True).start() # YouTube Video URL as input

# infinite loop
while True:
    
    frame = stream.read()
    # read frames

    # check if frame is None
    if frame is None:
        #if True break the infinite loop
        break
    
    # do something with frame here
    
    cv2.imshow("Output Frame", frame)
    # Show output window

    key = cv2.waitKey(1) & 0xFF
    # check for 'q' key-press
    if key == ord("q"):
        #if 'q' key-pressed break out
        break

cv2.destroyAllWindows()
# close output window

# safely close video stream.
stream.stop()

Code Source

【讨论】：

我试过这个并没有框架，就像我用 pafy 得到的一样。

@ruckc 这是不支持https 协议的opencv-python 库的问题，因为它的FFmpeg 构建中缺乏OpenSSL 支持，有关此错误的更多信息是here .好消息是我最近推送了一个PR in opencv-python library，它完全解决了这个问题，并已被其作者合并。因此，请等待几天这些无错误的二进制文件正式在 PyPi 上提供下载。祝你好运。

@ruckc 此错误现已修复。请更新到最新的 opencv-python。

你能把这个代码切换成活...吗？我的意思是，每当我将它用于在 YouTube 上播放了 20 分钟的直播时，这段代码总是从 00.00 开始读取。我希望它从 20 分钟开始

@Mumbaikar007 在我们的 GitHub 存储库上提出这个问题。 here，我们一定会努力的。

【参考方案5】：

#pip install pafy
#sudo pip install --upgrade youtube_dl
import cv2, pafy

url   = "https://www.youtube.com/watch?v=qvyTx01ZcQQ"
video = pafy.new(url)
best  = video.getbest(preftype="mp4")
capture = cv2.VideoCapture(best.url)
while True:
    check, frame = capture.read()
    print (check, frame)

    cv2.imshow('frame',frame)
    cv2.waitKey(10)

capture.release()
cv2.destroyAllWindows()

试试这个，在直播中也很有效