编写C++程序使DirectShow进行视频捕捉-6ren

编写C++程序使DirectShow进行视频捕捉

转载作者：qq735679552 更新时间：2022-09-27 22:32:09

CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章编写C++程序使DirectShow进行视频捕捉由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.

视频捕捉Graph的构建一个能够捕捉音频或者视频的graph图都称之为捕捉graph图。捕捉graph图比一般的文件回放graph图要复杂许多，dshow提供了一个Capture Graph Builder COM组件使得捕捉graph图的生成更加简单。Capture Graph Builder提供了一个ICaptureGraphBuilder2接口，这个接口提供了一些方法用来构建和控制捕捉graph。首先创建一个Capture Graph Builder对象和一个graph manger对象，然后用filter graph manager 作参数，调用ICaptureGraphBuilder2::SetFiltergraph来初始化Capture Graph Builder。看下面的代码吧:

 
    ? 
   
         HRESULT 
         InitCaptureGraphBuilder(IGraphBuilder **ppGraph,       
         //Receives the pointer  
        
         ICaptureGraphBuilder2 **ppBuilder)            
         //Receives the pointer  
        
         {  
        
         if 
         (!ppGraph || !ppBuilder)  
        
         {  
        
         return 
         E_POINTER;  
        
         }  
        
         IGraphBuilder *pGraph = NULL;  
        
         ICaptureGraphBuilder2 *pBuild = NULL;  
        
         //Create the Capture Graph Builder  
        
         HRESULT 
         hr = CoCreateInstance(CLSID_CaptureGraphBuilder2, NULL,   
        
         CLSCTX_INPROC_SERVER, IID_ICaptureGraphBuilder2,   
        
         ( 
         void 
         **)&pGraph);  
        
         if 
         (SECCEEDED(hr))  
        
         {  
        
         //Create the Filter Graph Manager  
        
         hr = CoCreateInstance(CLSID_FilterGraph, 0, CLSCTX_INPROC_SERVER,   
        
         IID_IGraphBuilder, ( 
         void 
         **)&pGraph);  
        
         if 
         (SECCEEDED(hr))  
        
         {  
        
         //Initialize the Capture Graph Builder  
        
         pBuild->SetFiltergraph(pGraph);  
        
         //Return both interface pointers to the caller  
        
         *ppBuild = pBuild;  
        
         *ppGraph = pGraph;    
         //The caller must release both interface  
        
         return 
         S_OK;  
        
         }  
        
         else 
        
         {  
        
         pBuild->Release();  
        
         }  
        
         }  
        
         return 
         hr;      
         //Failed  
        
         }

视频捕捉的设备现在许多新的视频捕捉设备都采用的是WDM驱动方法，在WDM机制中，微软提供了一个独立于硬件设备的驱动，称为类驱动程序。驱动程序的供应商提供的驱动程序称为minidrivers。Minidrivers提供了直接和硬件打交道的函数，在这些函数中调用了类驱动。在directshow的filter图表中，任何一个WDM捕捉设备都是做为一个WDM Video Capture过滤器（Filter）出现。WDM Video Capture过滤器根据驱动程序的特征构建自己的filter 。

Direcshow中视频捕捉的Filter Pin的种类。

捕捉Filter一般都有两个或多个输出pin，他们输出的媒体类型都一样，比如预览pin和捕捉pin，因此根据媒体类型就不能很好的区别这些pin。此时就要根据pin的功能来区别每个pin了，每个pin都有一个GUID，称为pin的种类。如果想仔细的了解pin的种类，请看后面的相关内容Working with Pin Categories。对于大多数的应用来说，ICaptureGraphBuilder2提供了一些函数可以自动确定pin的种类。预览pin和捕捉pin 。

视频捕捉Filter都提供了预览和捕捉的输出pin，预览pin用来将视频流在屏幕上显示，捕捉pin用来将视频流写入文件.

预览pin和输出pin有下面的区别： 1 为了保证捕捉pin对视频桢流量，预览pin必要的时候可以停止。 2 经过捕捉pin的视频桢都有时间戳，但是预览pin的视频流没有时间戳.

预览pin的视频流之所以没有时间戳的原因在于filter图表管理器在视频流里加一个很小的latency，如果捕捉时间被认为就是render时间的话，视频renderFilter就认为视频流有一个小小的延迟，如果此时render filter试图连续播放的时候，就会丢桢。去掉时间戳就保证了视频桢来了就可以播放，不用等待，也不丢桢.

预览pin的种类GUID为PIN_CATEGORY_PREVIEW
捕捉pin的种类GUID为PIN_CATEGORY_CAPTURE

Video Port pin Video Port是一个介于视频设备（TV）和视频卡之间的硬件设备。同过Video Port，视频数据可以直接发送到图像卡上，通过硬件的覆盖，视频可以直接在屏幕显示出来。Video Port就是连接两个设备的。使用Video Port的最大好处是，不用CPU的任何工作，视频流直接写入内存中。如果捕捉设备使用了Video Port，捕捉Filter就用一个video port pin代替预览pin.

video port pin的种类GUID为PIN_CATEGORY_VIDEOPORT 。

一个捕捉filter至少有一个Capture pin，另外，它可能有一个预览pin 和一个video port pin，或者两者都没有，也许filter有很多的capture pin，和预览pin，每一个pin都代表一种媒体类型，因此一个filter可以有一个视频capture pin，视频预览pin，音频捕捉pin，音频预览pin.

Upstream WDM Filters 在捕捉Filter之上，WDM设备可能需要额外的filters，下面就是这些filter 。

TV Tuner Filter
TV Audio Filter.
Analog Video Crossbar Filter

尽管这些都是一些独立的filter，但是他们可能代表的是同一个硬件设备，每个filter都控制设备的不同函数，这些filter通过pin连接起来，但是在pin中没有数据流动。因此，这些pin 的连接和媒体类型无关。他们使用一个GUID值来定义一个给定设备的minidriver，例如：TV tuner Filter 和video capture filter都支持同一种medium.

在实际应用中，如果你使用ICaptureGraphBuilder2来创建你的capture graphs，这些filters就会自动被添加到你的graph中。更多的详细资料，可以参考WDM Class Driver Filters.

选择一个视频捕捉设备（Select capture device）。

如何选择一个视频捕捉设备，可以采用系统设备枚举，详细资料参见Using the System Device Enumerator 。enumerator可以根据filter的种类返回一个设备的monikers。Moniker是一个com对象，可以参见IMoniker的SDK.

对于捕捉设备，下面两种类是相关的.

CLSID_AudioInputDeviceCategory 音频设备
CLSID_VideoInputDeviceCategory 视频设备

下面的代码演示了如何枚举一个视频捕捉设备。

 
    ? 
   
         ICreateDevEnum *pDevEnum = NULL;  
        
         IEnumMoniker *pEnum = NULL;  
        
         //Create the system device enumerator  
        
         HRESULT 
         hr = CoCreateInstance(CLSID_SystemDeviceEnum, NULL,  
        
         CLSCT_INPROC_SERVER, IID_ICreateDevEnum,   
        
         reinterpret_cast 
         < 
         void 
         **>(&pDevEnum));  
        
         if 
         (SUCCEEDED(hr))  
        
         {  
        
         //创建一个枚举器，枚举视频设备  
        
         hr = pDevEnum->CreateClassEnumerator(CLSID_VideoInputDeviceCategory,   
        
         &pEnum, 0);  
        
         }

IEnumMoniker接口pEnum返回一个IMoniker接口的列表，代表一系列的moniker，你可以显示所有的设备，然后让用户选择一个。采用IMoniker::BindToStorage方法，返回一个IPropertyBag接口指针。然后调用IPropertyBag::Read读取moniker的属性。下面看看都包含什么属性:

1 FriendlyName 是设备的名字 2 Description 属性仅仅适用于DV和D-VHS/MPEG摄象机，如果这个属性可用，这个属性更详细的描述了设备的资料 3DevicePath 这个属性是不可读的，但是每个设备都有一个独一无二的。你可以用这个属性来区别同一个设备的不同实例。

下面的代码演示了如何显示遍历设备的名称，接上面的代码。

 
    ? 
   
         HWND 
         hList;      
         //Handle to the list box  
        
         IMoniker *pMoniker = NULL;  
        
         while 
         (pEnum->Next(1, &pMoniker, NULL) == S_OK)  
        
         {  
        
         IPropertyBag *pPropBag;  
        
         hr = pMoniker->BindToStorage(0, 0, IID_IPropertyBag, ( 
         void 
         **)(&pPropBag));  
        
         if 
         (FAILED(hr))  
        
         {  
        
         pMoniker->Release();  
        
         continue 
         ;     
         //Skip this one, maybe the next one will work  
        
         }  
        
         VARIANT varName;  
        
         hr = pPropBag->Read(L 
         "Description" 
         , &varName, 0);  
        
         if 
         (FAILED(hr))  
        
         {  
        
         hr = pPropBag->Read(L 
         "FriendlyName" 
         , &varName, 0);  
        
         }  
        
         if 
         (SECCEEDED(hr))  
        
         {  
        
         //Add it to the application's list box  
        
         USES_CONVERSION;  
        
         ( 
         long 
         )SendMessage(hList, LB_ADDSTRING, 0, ( 
         LPARAM 
         )OLE2T(varName.bstrVal));  
        
         VariantClear(&varName);  
        
         }  
        
         pPropBag->Release();  
        
         pMoniker->Release();  
        
         }

如果用户选中了一个设备调用IMoniker::BindToObject为设备生成filter，然后将filter加入到graph中.

 
    ? 
   
         IBaseFilter *pCap = NULL;  
        
         hr = pMoniker->BindToObject(0, 0, IID_IBaseFilter, ( 
         void 
         **)&pCap);  
        
         if 
         (SECCEEDED(hr))  
        
         {  
        
         hr = m_pGraph->AddFilter(pCap, L 
         "Capture Filter" 
         );

为了创建可以预览视频的graph，可以调用下面的代码:

 
    ? 
   
         ICaptureGraphBuilder2 *pBuild;    
         //Capture Graph Builder  
        
         //Initialize pBuild(not shown)  
        
         ...  
        
         IBaseFilter *pCap;                  
         //Video capture filter  
        
         hr = pBuild->RenderStream(&PIN_CATEGORY_PREVIEW, &MEDIATYPE_Video,  
        
         pCap, NULL, NULL);  
        
         }

。

如何捕捉视频流并保存到文件（Capture video to File）。

1 将视频流保存到AVI文件。

AVI Mux filter接收从capture pin过来的视频流，然后将其打包成AVI流。音频流也可以连接到AVI Mux Filter上，这样mux filter就将视频流和视频流合成AVI流。File writer将AVI流写入到文件中。可以像下面这样构建graph图。

 
    ? 
   
         IBaseFilter *pMux;  
        
         hr = pBuild->SetOutputFileName(&MEDIASUBTYPE_Avi,       
         //Specifies AVI for the target file  
        
         L 
         "C:\\Example.avi" 
         ,        
         //File name  
        
         &pMux,                   
         //Receives a pointer to the mux  
        
         NULL);     
         //(Optional)Receives a pointer to the file sink

第一个参数表明文件的类型，这里表明是AVI，第二个参数是制定文件的名称。对于AVI文件，SetOutputFileName函数会创建一个AVI mux Filter 和一个 File writer Filter ，并且将两个filter添加到graph图中，在这个函数中，通过File Writer Filter 请求IFileSinkFilter接口，然后调用IFileSinkFilter::SetFileName方法，设置文件的名称。然后将两个filter连接起来。第三个参数返回一个指向 AVI Mux的指针，同时，它也通过第四个参数返回一个IFileSinkFilter参数，如果你不需要这个参数，你可以将这个参数设置成NULL。然后，你应该调用下面的函数将capture filter 和AVI Mux连接起来.

 
    ? 
   
         hr = pBuild->RenderStream(&PIN_CATEGORY_CAPTURE,      
         //Pin category  
        
         &MEDIATYPE_Video,      
         //Media type  
        
         pCap,      
         //Capture filter  
        
         NULL,      
         //Intermediate filter(optional)  
        
         pMux);      
         //Mux or file sink filter  
        
         //Release the mux filter  
        
         pMux->Release();

第5个参数就是使用的上面函数返回的pMux指针。当捕捉音频的时候，媒体类型要设置为MEDIATYPE_Audio，如果你从两个不同的设备捕捉视频和音频，你最好将音频设置成主流，这样可以防止两个数据流间drift，因为avi mux filter为同步音频，会调整视频的播放速度的。为了设置master 流，调用IConfigAviMux::SetMasterStream方法，可以采用如下的代码:

 
    ? 
   
         IConfigAviMux *pConfigMux = NULL;  
        
         hr = pMux->QueryInterface(IID_IConfigAviMux, ( 
         void 
         **)&pConfigMux);  
        
         if 
         (SUCCEEDED(hr))  
        
         {  
        
         pConfigMux->SetMasterStream(1);  
        
         pConfigMux->Release();  
        
         }

SetMasterStream的参数指的是数据流的数目，这个是由调用RenderStream的次序决定的。例如，如果你调用RenderStream首先用于视频流，然后是音频，那么视频流就是0，音频流就是1。添加编码filter 。

 
    ? 
   
         IBaseFilter *pEncoder;  
        
         //Add it to the filter graph  
        
         pGraph->AddFilter(pEncoder, L 
         "Encode" 
         );  
        
         //Render the stream  
        
         hr = pBuild->RenderStream(&PIN_CATEGORY_CAPTURE, &MEDIATYPE_Video,   
        
         pCap, pEncoder, pMux);  
        
         pEncoder->Release();

2 将视频流保存成wmv格式的文件

为了将视频流保存成并编码成windows media video （WMV）格式的文件，将capture pin连到WM ASF Writer filter.

构建graph图最简单的方法就是将在ICaptureGraphBuilder2::SetOutputFileName方法中指定MEDIASUBTYPE_Asf的filter。如下。

 
    ? 
   
         IBaseFilter *pASFWriter = 0;  
        
         hr = pBuild->SetOutputFileName(&MEDIASUBTYPE_Asf,     
         //Create a windows media file  
        
         L 
         "C:\\VidCap.wmv" 
         ,         
         //File name  
        
         &pASFWriter,        
         //Receives a pointer to the filter  
        
         NULL);         
         //Receives an IFileSinkFilter interface pointer(optional)

参数MEDIASUBTYPE_Asf 告诉graph builder，要使用wm asf writer作为文件接收器，于是，pbuild 就创建这个filter，将其添加到graph图中，然后调用IFileSinkFilter::SetFileName来设置输出文件的名字。第三个参数用来返回一个ASF writer指针，第四个参数用来返回文件的指针.

在将任何pin连接到WM ASF Writer之前，一定要对WM ASF Writer进行一下设置，你可以同过WM ASF Writer的IConfigAsfWriter接口指针来进行设置.

 
    ? 
   
         IConfigAsfWriter *pConfig = 0;  
        
         hr = pASFWriter->QueryInterface(IID_IConfigAsfWriter, ( 
         void 
         **)&pConfig);  
        
         if 
         (SUCCEEDED(hr))  
        
         {  
        
         //Configure the ASF Writer filter  
        
         pConfig->Release();  
        
         }

然后调用ICaptureGraphBuilder2::RenderStream将capture Filter 和 ASF writer连接起来：

 
    ? 
   
         hr = pBuild->RenderStream(&PIN_CATEGORY_CAPTURE,      
         //Capture pin  
        
         &MEDIATYPE_Video,        
         //Video. Use MEDIATYPE_Audio for audio  
        
         pCap,      
         //Pointer to the capture filter  
        
         0,   
        
         pASFWriter);    
         //Pointer to the sink filter(ASF Filter)

3保存成自定义的文件格式如果你想将文件保存成自己的格式，你必须有自己的 file writer。看下面的代码:

 
    ? 
   
         IBaseFilter *pMux = 0;  
        
         IFileSinkFilter *pSink = 0;  
        
         hr = pBuild->SetOutputFileName(&CLSID_MyCustomMuxFilter,    
         //开发自己的Filter  
        
         L 
         "C:\\VidCap.avi" 
         , &pMux, &pSink);

4如何将视频流保存进多个文件当你将视频流保存进一个文件后，如果你想开始保存第二个文件，这时，你应该首先将graph停止，然后通过IFileSinkFilter::SetFileName改变 File Writer 的文件名称。注意，IFileSinkFilter指针你可以在SetOutputFileName时通过第四个参数返回的。看看保存多个文件的代码:

 
    ? 
   
         IBaseFilter *pMux = 0;  
        
         IFileSinkFilter *pSink = 0;  
        
         hr = pBuild->SetOutputFileName(&MEDIASUBTYPE_Avi,   
        
         L 
         "C:\\YourFileName.avi" 
         , &pMux, &pSink);  
        
         if 
         (SUCCEEDED(hr))  
        
         {  
        
         hr = pBuild->RenderStream(&PIN_CATEGORY_CAPTURE, &MEDIATYPE_Video,  
        
         pCap, NULL, pMux);  
        
         if 
         (SUCCEEDED(hr))  
        
         {  
        
         pControl->Run();  
        
         pControl->Stop();  
        
         //Change the file name and run the graph again  
        
         pSink->SetFileName(L 
         "YourFileName02.avi" 
         , 0);  
        
         pControl->Run();  
        
         }  
        
         pMux->Release();  
        
         pSink->Release();  
        
         }

最后此篇关于编写C++程序使DirectShow进行视频捕捉的文章就讲到这里了,如果你想了解更多关于编写C++程序使DirectShow进行视频捕捉的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！。

文章推荐：解析如何在android中增加gsensor驱动（MMA7660）

文章推荐： ubuntu 12.10 上 android 编译环境搭建的深入解析

文章推荐：为Android添加一门新语言的解决办法

文章推荐： MyBatis实现物理分页的实例

c - 如何从客户端(用 C 编写)接收 int 数组到服务器(用 python 编写)
我只想从客户端向服务器发送数组 adc_array=[w, x, y, z]。下面是客户端代码，而我的服务器是在只接受 json 的 python 中。编译代码时我没有收到任何错误，但收到 2 条警告
node.js - 如何连接我的移动应用程序(用 lua 编写)和我的服务器(用 node.js 编写)？
我是 lua 和 Node js 的新手，我正在尝试将我正在开发的移动应用程序连接到服务器。问题是它连接到服务器，但我尝试传递的数据丢失或无法到达服务器。对我正在做的事情有什么问题有什么想法吗？ th
Haskell 编写 myLength
我在这个页面上工作 http://www.haskell.org/haskellwiki/99_questions/Solutions/4 我理解每个函数的含义，看到一个函数可以像这样以多种方式定义，
Java CSV 编写
我目前正在尝试将数据写入 excel 以生成报告。我可以将数据写入 csv 文件，但它不会按照我想要的顺序出现在 excel 中。我需要数据在每列的最佳和最差适应性下打印，而不是全部打印在平均值下。这
Java - 编写、读取和修改带参数的字符串
所以，我正在做一个项目，现在我有一个问题，所以我想得到你的帮助:) 首先，我已经知道如何编写和读取 .txt 文件，但我想要的不仅仅是 x.hasNext()。我想知道如何像 .ini 那样编写、读
javascript - 编写 For 循环来计算阶乘
我正在尝试编写一个函数，该函数将返回作为输入给出的任何数字的阶乘。现在，我的代码绝对是一团糟。请帮忙。 function factorialize(num) { for (var i=num, i
Javascript，编写 if 条件的更好方法
这个问题已经有答案了: Check variable equality against a list of values (16 个回答) 已关闭 4 年前。有没有一种简洁或更好的方法来编写这个条件
aframe - 编写 A 型框架的测试规范
我对 VR 完全陌生，正在 AFrame 中为一个类(class)项目开发 VR 太空射击游戏，并且想知道 AFrame 中是否有 TDD 的任何文档/标准。有人能指出我正确的方向吗？最佳答案几乎
javascript - 编写 for 循环以使用数组创建多个方法
我正在尝试创建一个 for 循环，它将重现以下功能代码块，但以一种更具吸引力的方式。这是与 Soundcould 小部件 API 实现一起使用的 here on stackoverflow $(doc
Java 编写/编辑属性文件
我有一个非常令人困惑的问题。我正在尝试更改属性文件中的属性，但它只是没有更改... 这是代码: package config; import java.io.FileNotFoundException
aframe - 编写 A 型框架的测试规范
我对 VR 完全陌生，正在 AFrame 中为一个类(class)项目开发 VR 太空射击游戏，并且想知道 AFrame 中是否有 TDD 的任何文档/标准。有人能指出我正确的方向吗？最佳答案几乎
.net - 编写.NET互操作调试器
我正在开发一个用户模式(Ring3)代码级调试器。它还应支持.NET可执行文件的本机(x86)调试。基本上，我需要执行以下操作: 1).NET在隐身模式下加载某些模块，而没有LOAD_DLL_DEBU
python - 编写 if 语句以避免某些列表项的更好方法是什么？
我有一个列表，我知道有些项目是不必要打印的，我正在尝试通过 if 语句来做到这一点...但是它变得非常复杂，所以有没有什么方法可以在 if 语句中包含多个索引而无需打印重写整个声明。看起来像这样的东
c# - 编写 if 语句是否会以不同方式影响程序的速度和效率？
我很好奇以不同方式编写 if 语句是否会影响程序的速度和效率。所以，例如写一个这样的: bool isActive = true; bool isResponding = false; if (isA
javascript - 编写 if 语句的新方法
我在搜索网站的源代码时找到了一种以另一种方式(我认为)编写 if 语句的方法。代替: if(a)b; 或: a?b:''; 我读了: !a||b; 第三种方式和前两种方式一样吗？如果是，为什么我们要
Java + 编写 XML
我的数据采用以下格式(HashMap的列表) {TeamName=India, Name=Sachin, Score=170} {TeamName=India, Name=Sehwag, Score=
mysql - 编写 HAVING 条件的最有效方法
我目前正在完成 More JOIN operations sqlzoo 的教程，遇到了下面的代码作为#12 的答案: SELECT yr,COUNT(title) FROM movie JOIN ca
ruby - 编写 && 检查列表的更好方法？
我正试图找到一种更好的方法来编写这段代码: def down_up(array, player) 7.downto(3).each do |row| 8.times do |col
由 C++ 编写
出于某种原因，我的缓冲区中充满了乱码，我不确定为什么。我什至用十六进制编辑器检查了我的文件，以验证我的字符是否以 2 字节的 unicode 格式保存。我不确定出了什么问题。 [打开文件] fseek
c# - 编写 FizzBuzz
阅读编码恐怖片时，我刚刚又遇到了 FizzBuzz。原帖在这里:Coding Horror: Why Can't Programmers.. Program? 对于那些不知道的人:FizzBu

qq735679552

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

编写C++程序使DirectShow进行视频捕捉