从Twilio视频流读取数据

2024-06-07 04:17:17 发布

您现在位置:Python中文网/ 问答频道 /正文

Tl;dr:我想用python读取来自这个https://tfvideo-5708-dev.twil.io/video.html的所有参与者的视频流

详细信息:我有一个实时辅导网站,它使用Twilio Video API进行视频课程。我想在输入流上运行对象检测和其他计算机视觉模型我被困在如何获取可以运行ml模型的输入视频流上

  • 使用Python。我可以通过OpenCV2.VideoCapture(..)方法阅读,然后使用一些预先训练好的模型或OpenCV内置的计算机视觉模型进行推理。我想了解cv2.VideoCapture()括号下的参数应该是什么
  • 使用Tensorflow.jsAPI——将tf.js代码集成到网站的Javascript中,并在该流上运行推理。可行吗

我很难获取用于我的Ml模型的流数据

为了测试,我创建了一个利用Twilio视频的网络聊天应用程序。这是原页的link,这是github repo。以下是您可以加入视频网络聊天的链接here如果打开此链接,您可以加入聊天室(在加入之前,我必须先部署),然后我的要求是访问所有加入的参与者的流

这里有一些链接,我已经通过

https://github.com/twilio/twilio-video.js/issues/333

https://www.twilio.com/blog/build-video-chat-application-python-javascript-twilio-programmable-video

https://www.infoq.com/articles/video-stream-analytics-opencv/

有人能帮我吗。还有别的办法吗

如果问题不清楚,请告诉我还需要什么。。我可以提供更多细节


Tags: https模型com视频网站链接video计算机