gstreamer appsrc在xvimagesink有效，但在theoraenc和oggmux中无效！

Question

我正在尝试使用gstreamer和icecast来直播一个电脑生成的视频，但我无法让gstreamer的appsrc正常工作。如果我使用xvimagesink作为输出，程序运行得很好（下面的代码有注释）。但是一旦我把它连接到theoraenc，就无法运行了。

我把shout2send换成了filesink，想看看问题是不是出在icecast上，结果是没有数据写入文件。用testvideosrc替代appsrc时，程序运行正常。有什么建议吗？

#!/usr/bin/env python
import sys, os, pygtk, gtk, gobject
import pygst
pygst.require("0.10")
import gst
import numpy as np

class GTK_Main:
    def __init__(self):
        window = gtk.Window(gtk.WINDOW_TOPLEVEL)
        window.connect("destroy", gtk.main_quit, "WM destroy")
        vbox = gtk.VBox()
        window.add(vbox)
        self.button = gtk.Button("Start")
        self.button.connect("clicked", self.start_stop)
        vbox.add(self.button)
        window.show_all()

        self.player = gst.Pipeline("player")
        source = gst.element_factory_make("appsrc", "source")
        caps = gst.Caps("video/x-raw-gray,bpp=16,endianness=1234,width=320,height=240,framerate=(fraction)10/1")
        source.set_property('caps',caps)
        source.set_property('blocksize',320*240*2)
        source.connect('need-data', self.needdata)
        colorspace = gst.element_factory_make('ffmpegcolorspace')
        enc = gst.element_factory_make('theoraenc')
        mux = gst.element_factory_make('oggmux')
        shout = gst.element_factory_make('shout2send')
        shout.set_property("ip","localhost")
        shout.set_property("password","hackme")
        shout.set_property("mount","/stream")
        caps = gst.Caps("video/x-raw-yuv,width=320,height=240,framerate=(fraction)10/1,format=(fourcc)I420")
        enc.caps = caps
        videosink = gst.element_factory_make('xvimagesink')
        videosink.caps = caps

        self.player.add(source, colorspace, enc, mux, shout)
        gst.element_link_many(source, colorspace, enc, mux, shout)
        #self.player.add(source, colorspace, videosink)
        #gst.element_link_many(source, colorspace, videosink)

    def start_stop(self, w):
        if self.button.get_label() == "Start":
            self.button.set_label("Stop")
            self.player.set_state(gst.STATE_PLAYING)
        else:
            self.player.set_state(gst.STATE_NULL)
            self.button.set_label("Start")

    def needdata(self, src, length):
        bytes = np.int16(np.random.rand(length/2)*30000).data
        src.emit('push-buffer', gst.Buffer(bytes))

GTK_Main()
gtk.gdk.threads_init()
gtk.main()

Answer 1

我觉得你的问题很可能和缓冲区的时间戳有关。我做了一些快速测试，使用了那段代码，并把shout元素换成了oggdemux、theoradec、ffmpegcolorspace和ximagesink。开始的时候，我没有任何输出，但当我完全去掉了混合/解混合的部分后，我得到了一个静态图像，还有一些关于时间戳的调试信息。在我把appsrc的is-live和do-timestamp属性都设置为true后，得到了正确的输出。

我认为应该可以直接设置从appsrc推送出去的缓冲区的时间戳，但遗憾的是我还没有找到具体的方法。