c - 如何动态更改 gstreamer 管道的视频亮度

Question

我正在尝试下面的代码来更改视频管道的亮度。我可以看到视频，但亮度从未改变，尽管我尝试每 60 秒更改一次。知道我缺少什么吗？

static gboolean broadcasting_timeout_cb (gpointer user_data)
{
GstElement *vaapipostproc = NULL;
vaapipostproc = gst_bin_get_by_name(GST_BIN(broadcasting_pipeline),  
"postproc");

if (vaapipostproc == NULL) {
    fprintf(stderr, "unable to get vaapipostproc from broadcasting 
pipeline\n");
    return TRUE;
}

g_object_set (G_OBJECT (vaapipostproc), "brightness", -1.0, NULL);
fprintf(stderr, "brightness changed by -1.0\n");
return TRUE;
}


main() {
//pipeline code goes here and  then below code comes //

broadcasting_pipeline = gst_parse_launch (compl_streaming_pipe, &error);
if (!broadcasting_pipeline) {
    fprintf (stderr, "Parse error: %s\n", error->message);
    exit (1);
}
loop_broadcasting = g_main_loop_new (NULL, FALSE);
g_timeout_add_seconds (60, broadcasting_timeout_cb, loop_broadcasting); 

gst_element_set_state (broadcasting_pipeline, GST_STATE_PLAYING);
g_main_loop_run(loop_broadcasting);
// rest of the code for main function comes here
}

Answer 1

似乎 vaapipostproc 属性(如亮度等)无法在运行时动态更改!

但是，我发现 videobalance 元素按照 Millind Deore 的建议工作。但视频平衡导致 CPU 使用率过高，成为流媒体管道的瓶颈。

因此，我尝试使用 glcolorbalance，它与 videobalance 相同，但它使用 GPU 进行亮度转换。

这是我的实验:

如果我使用下面的管道，那么我可以成功广播到 youtube:

gst-launch-1.0 filesrc location=Recorded_live_streaming_on__2018_01_20___13_56_33.219076__-0800.flv ! decodebin name=demux ! queue ! videorate ! video/x-raw,framerate=30/1 ! glupload ! glcolorconvert ! gldownload ! video/x-raw ! vaapih264enc dct8x8=true cabac=true rate-control=cbr bitrate=8192 keyframe-period=60 max-bframes=0 ! flvmux name=mux ! rtmpsink sync=true async=true location="rtmp://x.rtmp.youtube.com/XXXXX live=1" demux. ! queue ! progressreport ! audioconvert ! audiorate ! audioresample ! faac bitrate=128000 ! audio/mpeg,mpegversion=4,stream-format=raw ! mux.

错误:环境中未设置 XDG_RUNTIME_DIR。libva 信息​​:VA-API 版本 0.39.0libva 信息​​:va_getDriverName() 返回 0libva 信息​​:尝试打开/usr/lib/x86_64-linux-gnu/dri/i965_drv_video.solibva 信息​​:找到初始化函数 __vaDriverInit_0_39libva 信息​​:va_openDriver() 返回 0将管道设置为暂停...错误:环境中未设置 XDG_RUNTIME_DIR。libva 信息​​:VA-API 版本 0.39.0libva 信息​​:va_getDriverName() 返回 0libva 信息​​:尝试打开/usr/lib/x86_64-linux-gnu/dri/i965_drv_video.solibva 信息​​:找到初始化函数 __vaDriverInit_0_39libva 信息​​:va_openDriver() 返回 0管道正在预滚...从元素“vaapiencodeh264-0”获取上下文:gst.vaapi.Display=context, gst.vaapi.Display=(GstVaapiDisplay)"(GstVaapiDisplayGLX)\vaapidisplayglx1";从元素 'gldownloadelement0' 获取上下文: gst.gl.GLDisplay=context, gst.gl.GLDisplay=(GstGLDisplay)"(GstGLDisplayX11)\gldisplayx11-0";重新分配延迟...管道已预铺...将管道设置为“播放”...新时钟:GstSystemClock进度报告0 (00:00:05): 4/1984 秒 ( 0.2 %)进度报告0 (00:00:10): 9/1984 秒 ( 0.5 %)进度报告0 (00:00:15): 14/1984 秒 ( 0.7 %)Progressreport0 (00:00:20): 19/1984 秒 ( 1.0 %)

但是，如果我在此管道中使用 glcolorbalance，则会出现以下错误，并且我无法再流式传输到 YouTube:

gst-launch-1.0 filesrc location=Recorded_live_streaming_on__2018_01_20___13_56_33.219076__-0800.flv ! decodebin name=demux ! queue ! videorate ! video/x-raw,framerate=30/1 ! glupload ! glcolorbalance ! glcolorconvert ! gldownload ! video/x-raw ! vaapih264enc dct8x8=true cabac=true rate-control=cbr bitrate=8192 keyframe-period=60 max-bframes=0 ! flvmux name=mux ! rtmpsink sync=true async=true location="rtmp://x.rtmp.youtube.com/XXXXX live=1" demux. ! queue ! progressreport ! audioconvert ! audiorate ! audioresample ! faac bitrate=128000 ! audio/mpeg,mpegversion=4,stream-format=raw ! mux.

错误:环境中未设置 XDG_RUNTIME_DIR。libva 信息​​:VA-API 版本 0.39.0libva 信息​​:va_getDriverName() 返回 0libva 信息​​:尝试打开/usr/lib/x86_64-linux-gnu/dri/i965_drv_video.solibva 信息​​:找到初始化函数 __vaDriverInit_0_39libva 信息​​:va_openDriver() 返回 0将管道设置为暂停...错误:环境中未设置 XDG_RUNTIME_DIR。libva 信息​​:VA-API 版本 0.39.0libva 信息​​:va_getDriverName() 返回 0libva 信息​​:尝试打开/usr/lib/x86_64-linux-gnu/dri/i965_drv_video.solibva 信息​​:找到初始化函数 __vaDriverInit_0_39libva 信息​​:va_openDriver() 返回 0管道正在预滚...从元素“vaapiencodeh264-0”获取上下文:gst.vaapi.Display=context, gst.vaapi.Display=(GstVaapiDisplay)"(GstVaapiDisplayGLX)\vaapidisplayglx1";从元素 'gldownloadelement0' 获取上下文: gst.gl.GLDisplay=context, gst.gl.GLDisplay=(GstGLDisplay)"(GstGLDisplayX11)\gldisplayx11-0";重新分配延迟...警告:来自元素/GstPipeline:pipeline0/GstDecodeBin:demux:延迟链接失败。附加调试信息:./grammar.y(510): gst_parse_no_more_pads ():/GstPipeline:pipeline0/GstDecodeBin:demux:将 GstDecodeBin 中名为 demux 的某些 pad 延迟链接到 GstQueue 中名为queue0 的某些 pad 失败^处理中断。中断:停止管道...错误:管道不想预卷。将管道设置为 NULL ...释放管道...

似乎 glcolorbalanc 导致decodebin无法与vaapih264enc链接，因为它是上述管道之间的唯一区别。

我是 gstreamer 新手，谁能告诉我第二条管道出了什么问题以及为什么链接失败？