天天看点

Window 下 VFW 视频采集与显示

    经过几天的努力终于将vfw视频采集与显示功能完整实现了,不得不说网上对这方面完整的详细讲解文章是在太少了。所以就要本人来好好总结一下让后来者不再像我一样折腾好久。在本文中我将详细讲解vfw视频采集过程的实现,以及采集后视频的显示方法。

虽然这是篇技术博文,但是我觉得用一个东西,那么关于它的概述还是不能少,所以特从百度上copy了下vfw的概念描述,如果读者不想看可以直接去观看正文部分。

         vfw(video for

windows)是microsoft推出的关于数字视频的一个软件开发包,vfw的核心是avi文件标准。avi(audio video

interleave)文件中的音、视频交错存放。围绕avi文件,vfw推出了一整套完整的、压缩、、回放和编辑的(api)。它引进的文件标准,该标准未规定如何对视频进行捕获、压缩及播放,仅规定视频和音频该如何存储在硬盘上,在avi文件中交替存储视频帧和与之相匹配的音频数据。vfw给提供.vbx和avicap的高级编程工具,使程序员能通过发送消息或设置属性来捕获、播放和编辑视频剪辑。现在用户不必专门安装vfw了,windows95本身包括了video

for windows1.1,当用户在安装windows时,安装程序会自动地安装配置视频所需的组件,如设备驱动程序、视频压缩程序等。 由于avi推出较早且在数字视频技术中有广泛的应用,所以vfw仍然有很大的实用价值,而且进一步发展的趋势。

vfw主要由以下六个模块组成:

(1)avicap.dll:包含了执行视频捕获的函数,它给avi文件i/o和视频、音频设备提供一个高级接口;

(2)msvideo.dll:用一套特殊的drawdib函数来处理屏幕上的视频操作;

(3)mciavi.drv:此驱动程序包括对vfw的mci命令的

(4)avifile.dll:支持由标准i/o(mmio)函数提供的更高的命令来访问.avi文件;

(5)压缩管理器(icm):管理用于视频压缩-的编解码器(codec);

(6)音频压缩管理器acm:提供与icm相似的服务,不同的是它适于波形音频。

visual c++在支持vfw方面提供有vfw32.lib、 msacm32.lib

、winmm.lib等类似的库。特别是它提供了功能强大、简单易行、类似于mciwnd的avicap。avicap为应用程序提供了一个简单的、基于消息的接口,使之能访问视频和波形音频硬件,并能在将捕获到硬盘上的过程中进行控制

在vc++开发环境中调用vfw和使用其它开发包没有什么不同,只是需要将vfw32.lib文件加入工程中,但在开放视频捕捉与压缩管理程序时需要其它软件硬件设置。vfw为avi文件提供了丰富的处理函数和宏定义,avi文件的特点在于它是典型的文件,它由、、文本流组成。所以对avi文件的处理主要是处理文件流。

       关于vfw采集的过程我大致归纳如下几个步骤:

一、capcreatecapturewindow 创建视频采集窗口,注意此处创建的窗口并不是mfc中的窗口。

//创建视频采集窗口(注意此窗口与我们所说的显示窗口不同),并设置预览窗口

    //idc_video_local

参数是采集窗口的id,此处直接使用的是显示窗口的id

    m_capwnd =

capcreatecapturewindow(text("my video capture"), ws_child |

ws_visible, 0, 0,

localrect.width(),

        localrect.height(),

localwnd->getsafehwnd(), idc_video_local);

二、设置回调函数,在vfw中可以设置的回调函数有以下几种,可以根据程序需要设置:

        1、bool

capsetcallbackoncapcontrol(hwnd, fpproc );

此宏可以设置用于精确控制采集的开始和结束的控制函数,此回调函数原型为:

        lresult callback

capcontrolcallback(hwnd hwnd, int nstate );

        hwnd参数为第一步创建的采集窗口句柄, nstate

当前capture的状态,可取值为controlcallback_preroll(等待capture开始)

和controlcallback_capturing(capture正在采集),程序要控制capture的开启和关闭时通过对当前capture状态返回适当的值,当为controlcallback_preroll是返回true则代表要开启capture的捕捉,返回false代表中止capture,当为controlcallback_capturing时,返回true表示要继续采集,返回false表示要停止采集。

        2、bool capsetcallbackonerror(hwnd,

fpproc );此宏用于设置当capture采集过程中出错的时候反馈给程序处理的回调函数,回调函数原型为:

caperrorcallback(  hwnd hwnd,    int

nid,      lpcstr lpsz );

        hwnd参数为第一步创建的采集窗口句柄,nid

为当前出错的错误id标识,lpsz

代表出错原因的一个文本描述内容 

       3、bool capsetcallbackonframe(hwnd,

fpproc ); 此宏用于设置当capture采集过程中每采集到一帧图像的时候,反馈给程序处理的回调函数,回调函数原型为:

       lresult (callback* capvideocallback)

(hwnd hwnd, lpvideohdr lpvhdr);

       hwnd参数为第一步创建的采集窗口句柄,lpvhdr

为采集到的一帧数据,lpvideohdr 结构体定义如下:

typedef struct videohdr_tag

{

    lpbyte      lpdata;        //指向采集到的数据buffer

    dword       dwbufferlength; //buffer的长度

    dword       dwbytesused; //buffer实际使用的byte数

    dword       dwtimecaptured; //从开始采集到当前帧采集时经过的毫秒数

    dword       dwuser; //用户通过

capsetuserdata

设定的自定义参数

    dword       dwflags; //当前帧的标识,可取如下值

    /*

    vhdr_done        done

bit 

    vhdr_prepared    set

if this header has been

prepared  

    vhdr_inqueue    reserved

for

driver  

    vhdr_keyframe    key

frame  

    */

    dword_ptr   dwreserved[4];  //保留给驱动使用的空间

}

videohdr, near *pvideohdr, far * lpvideohdr;

      4、bool capsetcallbackonstatus(hwnd, fpproc );

此宏用于设置监控capture状态改变的回调函数,函数原型为:

       lresult callback

capstatuscallback(  hwnd hwnd,    int

       hwnd参数为第一步创建的采集窗口句柄,nid

定义的状态消息值,关于当前更新的状态的一个文本描述。

      5、bool capsetcallbackonvideostream(hwnd,

fpproc ); 此宏设置当capture采集到一个video buffer(其实也是一帧数据)数据后反馈给程序的功能函数,函数原型为:

      lresult callback capvideostreamcallback( 

hwnd hwnd,  lpvideohdr lpvhdr  );

     hwnd参数为第一步创建的采集窗口句柄,lpvhdr 为采集到的一帧数据,具体意义可以参看第三个

     6、bool

capsetcallbackonwavestream(hwnd, fpproc

);此宏设置当采集到一个audio音频数据buffer时,反馈给程序的函数,函数原型为:

     lresult callback capwavestreamcallback(  hwnd

hwnd,  lpwavehdr lpwhdr );

     hwnd参数为第一步创建的采集窗口句柄,lpwhdr

为采集到audio音频数据,其结构体定义如下:

typedef struct { 

    lpstr      lpdata; //指向采集的音频数据buffer

    dword      dwbufferlength; //buffer长度

    dword      dwbytesrecorded; //采集到的数据byte数

    dword_ptr  dwuser; //用户通过capsetuserdate自定义的数据

    dword      dwflags; //

    dword      dwloops; //播放时长

    struct wavehdr_tag

* lpnext; 

    dword_ptr

reserved; //保留字段

} wavehdr;

     7、bool capsetcallbackonyield(hwnd, fpproc );

此宏用于设置一个回调函数当每采集一帧图像时反馈给程序,回调函数原型为:

     lresult callback capyieldcallback(  hwnd

hwnd  );

     hwnd参数为第一步创建的采集窗口句柄

三、capgetdriverdescription

获得当前可用的capture设备驱动的版本信息。我们可以通过此函数枚举当前系统中可用的驱动。方法如下:

bool vfwapi

capgetdriverdescription(  

    word

wdriverindex,//要获取的设备驱动的索引值,取值范围为0-9   

    lpstr

lpszname, //指向保存获取到的设备名字buffer    

    int

cbname,//设备名字buffer的长度           

lpszver,//指向保存获取到的设备版本信息buffer        

cbver //设备版本信息buffer长度          

);

      我们可以通过循环枚举索引值为 0-9

时函数的返回值,如果返回为真则此索引对应的设备存在,并可以获得设备的描述信息。

四、capdriverconnect 连接指定索引值的设备驱动

五、配置capture采集参数,可设置参数所需函数如下(注意要先连接后配置参数):

       1、bool

capcapturesetsetup(hwnd,   pscapparms,   wsize );

用于设置视频流采集过程的配置参数。hwnd 采集窗口句柄, pscapparms 为配置结构体 captureparms 其结构体定义如下,wsize

为pscapparms结构体的大小:

    dword

dwrequestmicrosecperframe;//请求的帧率,默认为66667,即每秒15帧。

    bool  fmakeuserhitoktocapture; //如果为true,将显示一个对话框帮助用户快速地进行捕捉设置,默认为false

    uint  wpercentdropforerror; //在捕捉过程中允许弃帧的最大百分比

    bool  fyield; //如果为true,将产生一个后台线程来进行视频捕捉

dwindexsize; //表示avi文件最大的索引入口数

    uint  wchunkgranularity; //以字节为单位表示avi文件的大小

    bool  fusingdosmemory; //未使用

    uint  wnumvideorequested; //分配视频缓冲区的最大数量

    bool  fcaptureaudio; //为true,表示音频被捕捉,默认值依赖于安装的音频设备

    uint  wnumaudiorequested; //表示分配的音频缓冲区的最大数量

    uint  vkeyabort; //表示终止捕捉的虚拟键

    bool  fabortleftmouse; //为true,表示单击鼠标左键停止捕捉

    bool  fabortrightmouse; //为true,表示单击鼠标右键停止捕捉

    bool  flimitenabled; //为true,表示设置捕捉时间限制

    uint  wtimelimit; //以秒为单位设置捕捉的超时时间

    bool  fmcicontrol; //为true,控制mci(媒体设备接口)兼容的视频源

    bool  fstepmcidevice; //为true,使用mci设备使用步进帧进行捕捉,为false,使用mci设备进行时时捕捉,如果fmcicontrol成员为false,该成员被忽略

dwmcistarttime; //以毫秒为单位标识mci设备视频捕捉序列的起始位置,如果fmcicontrol成员为false,该成员被忽略

dwmcistoptime; //以毫秒为单位标识mci设备视频捕捉序列的停止位置,如果fmcicontrol成员为false,该成员被忽略

    bool  fstepcaptureat2x; //为true,捕捉的视频帧使用两个分辨率,它可以使用软件在某个分辨率的基础上改写像素,将其该为高清晰度的图像

    uint  wstepcaptureaverageframes; //在捕捉时每帧图像使用的时间大小

dwaudiobuffersize; //音频缓冲区大小

    bool  fdisablewritecache;//未使用 

    uint  avstreammaster; //确定在写入avi文件时,音频流是否控制时钟

captureparms;

        2、bool capsetvideoformat(

hwnd,  psvideoformat,    wsize ); 

设置video每帧图像的格式,hwnd为采集窗口句柄,psvideoformat为 bitmapinfo 结构体,wsize为bitmapinfo

结构体的大小。

typedef struct tagbitmapinfo

    bitmapinfoheader

bmiheader; //位图图像格式

    rgbquad

bmicolors[1]; //调色板,

} bitmapinfo;

typedef struct tagbitmapinfoheader{

    dword  bisize;  //bitmapinfoheader

结构体的大小

    long   biwidth; //图像的宽度,按像素

    long   biheight; //图像的高度,按像素

    word   biplanes; //设备的面数,必须设置为1

    word   bibitcount; //每个像素所包含的bit数

    dword  bicompression; //图像的压缩格式

    dword  bisizeimage; //图像的大小

    long   bixpelspermeter; //图像的水平分辨率,单位为每米的像素个数

    long   biypelspermeter; //图像的垂直分辨率,单位为每米的像素个数

    dword  biclrused; //图像所用到的颜色数,为0则为bibitcount对应的数目

    dword  biclrimportant; //图像中重要的颜色数,为0则所有颜色都重要

bitmapinfoheader, *pbitmapinfoheader;

       3、bool capsetaudioformat( 

hwnd,  psaudioformat,    wsize); 设置采集的音频数据格式

hwnd为采集窗口句柄,psaudioformat为 waveformatex 或 pcmwaveformat 结构体,wsize为psaudioformat

    word  wformattag;  //音频数据格式

    word  nchannels; //音频的声道数,为1为单声道,2为立体声

nsamplespersec; //每秒的采样频率

navgbytespersec; //每秒的数据传输频率

    word  nblockalign; //一个块的大小,采样bit的字节数乘以声道数

    word  wbitspersample; //每个采样数据的比特数

    word  cbsize; //一般为0

waveformatex;

    word  wformattag; //音频数据格式

nsamplespersec;  //每秒的采样频率

navgbytespersec;  //每秒的数据传输频率

waveformat;

    waveformat

wf; 

    word       wbitspersample; //每个采样数据的比特数

pcmwaveformat;

       4、bool capsetscrollpos( 

hwnd,    lpp );设置视频帧的客户区卷轴位置  hwnd 为采集窗口句柄,lpp 为卷轴位置的指针

上面4中参数设备函数,都有相应的参数获取函数,在编写程序时,我们可以先获取设备原先设定的参数,然后在修改我们关心的参数在进行设置,相应的获取函数只要将对应函数的set换成get就可以了。

六、预览配置,在设置好预览后我们运行程序就能在我们capcreatecapturewindow 中指定的窗口中预览到采集到视频数据了。

        1、bool cappreviewrate(

hwnd,    wms );  设置预览时的采集频率, hwnd为采集窗口句柄,wms为设定的频率

        2、bool cappreviewscale( 

hwnd,    f ); 设置预览时图像是否 可伸缩,即根据显示窗口大小显示,hwnd为采集窗口句柄,f

为bool值,为true代表图像可伸缩

        3、bool cappreview( 

hwnd,    f     

);设置是否使用预览模式,hwnd为采集窗口句柄,f为bool值,为true则使用预览模式

七、一帧图像的显示。如果想要处理每一帧采集到的图像,那么程序必须调用

capsetcallbackonvideostream或capsetcallbackonframe设置回调函数。在设置的回调函数中将图像数据发送给图像显示的窗口,在这里要注意的是,我们在设置参数的时候在capsetvideoformat函数中设置的图像压缩格式如果为bi_rgb那么采集的图像就为rgb数据,rgb的位数为设定的bibitcount。在显示窗口中进行如下操作:

         1、用getdc获得显示窗口的显示设备句柄

cdc* pdc = showwnd->getdc();

         2、创建窗口显示设备句柄的兼容句柄

cdc

memdc;

memdc.createcompatibledc(pdc);

         3、创建一个设备相关的bitmap

cbitmap bmp;

bmp.createcompatiblebitmap(pdc, bmpinfo.bmiheader.biwidth,

bmpinfo.bmiheader.biheight);

cbitmap *poldbmp =

memdc.selectobject(&bmp);

4、将采集到的位图数据发送给设备,然后将其刷在屏幕上

::setdibitstodevice(memdc.getsafehdc(),0, 0, bmpinfo.bmiheader.biwidth,

bmpinfo.bmiheader.biheight, 0, 0,

0, 

    bmpinfo.bmiheader.biheight, videodate,

&bmpinfo, dib_rgb_colors);

pdc->bitblt(0, 0, wndrect.width()-6,

wndrect.height(), &memdc, 0, 0, srccopy);

八、拍照功能实现。其实所谓的拍照只是将采集到的一帧图像数据写入一个文件中,只是在图像数据前还要加上一些图像格式和参数的说明参数。具体实现如下:

           1、设置图像文件参数说明结构体

bitmapfileheader , 和 图像格式信息结构体 bitmapinfoheader

typedef struct tagbitmapfileheader

    word    bftype;        //图像的类型,必须为bm即

0x4d42即十进制的19778

    dword   bfsize;     //图像文件的大小

即 图像数据大小 +

54(两个参数说明结构体的大小)

    word    bfreserved1; //保留字段必须为0

    word    bfreserved2; //保留字段必须为0

    dword   bfoffbits; //从文件开始到

图像数据的偏移 

} bitmapfileheader, *pbitmapfileheader;

    dword  bisize; //结构体的大小

    long   biwidth; //图像的宽度

    long   biheight; //图像的高度

    word   biplanes; //图像目标设备的面数,必须为1

    word   bibitcount; //每个像素的bit数

    dword  bicompression; //图像压缩格式

    dword  bisizeimage; //图像数据大小

    long   bixpelspermeter; //图像的水平分辨率

    long   biypelspermeter; //图像的垂直分辨率

    dword  biclrused; //图像所使用到的颜色数

    dword  biclrimportant; //图像中重要的颜色数

} bitmapinfoheader, *pbitmapinfoheader;

           注意这两个结构体的参数一定要根据你采集图像前设置的图像格式来设置,或者直接用当时设置的数据。设置好这两个结构体后就将他们写入文件,然后将采集到的图像数据也写入文件就形成了一张照片了。

cfile filepic(picpath_one,

cfile::modecreate|cfile::modewrite);//存放报警图片

filepic.write(pbmpfilehd,14);

filepic.write(&m_bmpinfo.bmiheader,

40);

filepic.write(m_pimagetmp->lpdata,

m_pimagetmp->dwbytesused);

九、采集结束,关闭设备。这个操作 可以通过capsetcallbackoncapcontrol设置的回调函数实现,也可以直接调用

capcapturestop、capcaptureabort停止采集,然后再将原先设置的功能回调函数给关闭,即将函数指针传递null值。然后capdriverdisconnect断开和设备的连接。

笔者自己编写的一个测试源程序  中下载

videoplay–视频语音采集完整版.rar

本文,笔者耗时几个小时认真编写,如果有什么错误,欢迎讨论。如若转载请标明出处 

from: