摘 要: 为了解决视频监控系统中多样性、异构性的设备集成难问题,采用web服务与流媒体技术设计了一种嵌入式视频服务器。给出视频服务器的硬件结构;基于嵌入式linux操作系统,详细阐述了视频服务器软件的设计与实现过程;视频服务器适用于具有跨语言、跨平台特性的视频监控系统的设备集成。应用于油井监控局域网中时,在单个远程终端链接情况下,视频服务器速率达25 f/s,可满足一般的监控要求。关键词:web services; 嵌入式系统; linux; 流媒体
中图分类号:tn919.85-34文献标识码:a
文章编号:1004-373x(2010)22-0060-04
embedded video server based on web service
sun shi-ming1, wang ai-guo1, xie xing-zhou2
(1. college of computer and communication engineering, china university of petroleum, dongying 257061, china;
2. gudao oil plant, sinopec shengli oilfield company, dongying 257321, china)
abstract: an embedded video monitoring server is designed with the technologies of web services and streaming media to solve the problems of integration of diversity and heterogeneity equipments in video monitoring system. the hardware structure of the video server is elaborated. the software design and implementation of the video server based on linux2.6.24 is illustrated in detail. the video server is appropriate to the equipment integration of the video monitoring system with the features of cross-language and cross-platform and can be applied to monitoring system easily. the velocity of video server can reach up to 25 f/s and can meet the requirement of general monitoring when the single remote terminal is linked in lan of well monitoring system.
keywords: web service; embedded system; linux; streaming media
收稿日期:2010-06-30
目前,视频监控在煤炭安全生产[1]、楼宇安防[2]、森林火灾监控[3]等领域逐步得到应用,出现了各式各样的嵌入式视频服务器;同时,视频监控系统也向着一体化、视频数字化、监控网络化、系统集成化方向发展[4],各种视频服务器的集成和统一管理变得越来越困难。wWw.133229.cOm本文设计了一种基于web services的嵌入式流媒体视频服务器,借助web services跨平台、跨语言的分布式模型[5],通过rtp/rtcp协议实时传输视频流,实现了视频监控设备的无缝连接与统一管理。
1 视频服务器的硬件结构
视频服务器硬件分为核心板和底板两部分。核心板使用arm s3c2440处理器,扩展64 mb sdram和64 mb flash外部存储器,集成时钟电路和jtag接口电路;底板提供视频采集接口,包括视频采集芯片与mpeg压缩芯片,4线rs 232串口,由以太网控制器和rj45接口组成的以太网接口[6]。硬件结构如图1所示。
系统通过以太网接口获取远程终端的控制数据,利用串口对设备进行操控;通过视频采集电路获取压缩后的视频数据,使用rtp协议将数据打包后通过以太网接口发送到远程终端,完成视频的实时传输。
图1 视频服务器的硬件结构图
2 视频服务器的软件设计与实现
2.1 软件总体结构
视频服务器的软件基于linux操作系统,分为两个模块:web services模块和视频采集与传输模块。其中web services模块主要负责对摄像头及云台的操控,将操控摄像头和云台的功能接口以web服务的形式发布给远程终端,从而屏蔽了摄像头和云台的异构性,方便远程终端对设备进行集成和统一管理。视频采集与传输模块主要负责将采集到的视频数据通过rtp/rtcp协议打包,然后传送给远程终端。视频服务器结构如图2所示。
2.2 web services模块
web services使用标准的、通用的通信模型,它在http,xml,soap,wsdl,uddi 之上提供统一的编程模型,使用统一的方法,公共的基础结构和统一文本格式,适合于internet/intranet分散型应用。服务请求者与服务提供者之间通过soap(简单对象访问协议)消息进行绑定和通信。soap协议定义了用于在系统之间进行通讯的标准xml消息格式,可使用soap在多种计算机体系结构、语言和操作系统之间进行通信。web services模块流程图如图3所示。
图2 视频服务器的结构
图3 web services模块流程图
选用gsoap作为linux下web service的开发工具。gsoap是一款使用c/c++编写的开源的web service开发工具,具有占用系统资源少、运行速度快、可裁减等特点[7]。gsoap工具包中提供了两个可执行文件:wsdl2h 和soapcpp2。wsdl2h.exe用来解析wsdl文档生成描述服务的c/c++头文件,soapcpp2.exe用来解析该头文件并生成框架代码[8]。
利用gsoap工具包开发视频服务器的web service,首先编写一个头文件service.h,声明4个web service接口,该头文件的主要内容如下:
typedef int xsd__int;
struct ns2_camerainf //摄像头信息结构体
{ xsd_int cam_id; //编号
xsd_int cam_width; //分辨率:宽
xsd_int cam_height; //分辨率:高
xsd_int cam_hue; //色调
xsd_int cam_contrast; //对比度
xsd_int cam_brightness; //亮度
xsd_int cam_focus;//焦距
}
struct ns2_pantiltinf //云台信息结构体
{ xsd_int pantilt_id; //编号
xsd_int pantilt_ rotation; //旋转角度
};
int ns2_ctrlcamera(xsd_int ictrlcam);
//摄像头控制
int ns2_getcamerainf(void *_ ,
struct ns2_getcamerainfresponse
{ struct ns2_camerainf camera_inf;
} *_return);//获取摄像头信息
int ns2_ctrlpantilt(xsd_int ictrl);//云台控制
int ns2_getpantiltinf(void *_ ,
struct ns2_getpantiltinfresponse
{ struct ns2_pantiltinf pantilt_inf;
} *_return); //获取云台信息
根据service.h文件生成服务端框架代码及service.wsdl文档,命令如下:
# soapcpp2 service.h
生成的框架代码如下:soapstub.h:从输入头文件生成且带名称空间的头文件;soaph.h:主要头文件,所有客户机和服务源代码都要将其包括在内;soapc.c:指定数据结构的序列化器和反序列化器;soapclient.c:客户机存根例程;soapserver.c:服务器端存根例程。
另外,在gsoap工具包中还包含两个重要的文件:stdsoap2.h和stdsoap2.c/cpp。其中stdsoap2.h是stdsoap2.c/cpp运行时库头文件,stdsoap2.c/cpp是运行时c/c++库,带 http/ soap解析器和运行时支持例程。用户可以用这两个文件和上述的框架代码方便的进行客户端/服务器端开发。程序代码在此不再赘述。
2.3 视频采集与传输模块
视频采集与传输模块将采集到的视频通过rtp协议打包发送到远程终端。过程如图4所示。
2.3.1 jrtplib和jthread的移植
利用jrtplib开发程序之前,需要先将jrtplib库移植到视频服务器的硬件体系结构上,方法如下:
(1) 下载jrtplib和jthread
下载地址:http://research.edm.uhasselt.be/~jori /page/index.php?n=cs.jrtplib
(2) 解压
将下载的两个压缩文件解压到/usr/local /software目录中:
#tar -jxvf jrtplib-3.7.1.tar.bz2
#tar -zxvf jthread-1.2.1.tar.gz
解压后在/usr/local/software下生成jrtplib- 3.7.1和jthread-1.2.1两个目录。
图4 视频采集与传输模块软件流程
(3) 编译jthread
进入jthread源码目录:
#cd /usr/local/software/ jthread-1.2.1
在终端中输入:
#./configure -host=arm-linux cc=arm-linux- gcc
cxx=arm-linux-g++
执行后,会生成一个makefile文件,执行:
#make
#make install
至此jthread安装成功。
(4) 编译jrtplib
进入jrtplib源码目录:
#cd /usr/local/software/ jrtplib-3.7.1
在终端中输入:
#./configure -host=arm-linux cc=arm-linux- gcc cxx=arm-linux-g++
执行后,会生成一个makefile文件,执行:
#make
#make install
至此jrtplib安装成功。
jrtplib和jthread安装完成后,可以看到/usr/local/lib目录增加了jthread和jrtplib的库文件。
2.3.2 rtp实时传输流媒体数据实现
利用rtp协议能够在单播或者多播的网络环境中实现传流媒体数据的实时传输,它的报文中包含传输媒体的类型、格式、序列号、时间戳以及是否有附加数据等信息[9-10]。多媒体数据的传输使用 udp 来进行,每一个rtp数据报都由头部(header)和负载(payload)两个部分组成,其中头部前 12 个字节的含义是固定的,而负载则可以是音频或者视频数据。具体实现过程如下:
(1) 初始化rtp会话
rtpsession rtpses;//创建rtpsession对象来代表此次rtp会话:
rtpses.create(2000);//调用rtpsession类的create()方法,指定rtp会话的端口号
(2) 设置时间戳
rtpses.settimestampunit(1.0/8000.0);
//设置时间戳(单位:s),使程序的采样频率为8 000 hz
(3) 设置目标地址
unsigned long addr = ntohl(inet_addr("192. 168.0.2" ));
//将网络字节序转换为长整型
rtpses.adddestination(addr,2000);
//添加目标地址,端口号为2000
(4) 发送流媒体数据
rtpses.setdefaultpayloadtype(0);
//设置默认的负载类型
rtpses.setdefaultmark(false);//设置标志
rtpses.setdefaulttimestampincrement(10); //设置时间戳增量
rtpses.sendpacket(buf, n);//发送数据,buf为数据缓冲区,n为缓冲区大小
(5) 客户端接收数据
if (rtpses.gotofirstsourcewithdata())
{//获取接受到的各个源的数据
do
{rtpses.addtoacceptlist(remoteip, allports, portbase);
rtpses.setreceivemode(receivemode_acceptsome);//设置接收模式
rtppacket *pack;
pack = rtpses.getnextpacket();
//处理接收到的数据
delete pack; }
while (rtpses.gotonextsourcewithdata());
}
3 测试运行
系统测试采用c/s结构。视频服务器配置为s3c2440微处理器,运行在400 mhz,扩展64 mb nand flash和64 mb sdram,以太网接口芯片为rtl8201bl,视频压缩芯片为mb86390,显示器为8寸16 bit tft lcd,linux 2.6.24内核,接入实验室局域网。视频服务调用端为联想的启天m6900 pc机,redhat 9.0操作系统,开发环境gcc 4.3.0,qt 4.4.0和gsoap-2.7f工具包,通过gsoap调用web服务。pc机上的运行界面如图5所示。
图中视频图像即为得到视频服务器图像。局域网中单个远程链接时测试平均视频传输速度达25 f/s,可满足一般的监控要求。在2个远程链接时测试平均视频传输速度为16.7 f/s,3个远程链接时平均视频传输速度为10.1 f/s。多个远程链接的情况下性能会有较为明显的下降。因此多个链接情况下使用时建议采用s3c6410等具有更高性能的硬件平台实现。
图5 监控中心运行界面
4 结 语
本文提出一种基于web services、使用rtp/rtcp协议实时传输视频流数据的嵌入式视频服务器,借助web services跨平台、跨语言的分布式模型,有效地屏蔽了视频监控设备的多样性、异构性,实现监控设备的无缝连接与统一管理。视频服务器已集成在油井监控系统中,集成和扩展简便,实施效率得到大大提高。
编辑整理
参考文献
[1]张文,方飞.视频监控在煤矿中的应用研究[j].煤炭工程,2010(1):112-114.
[2]吕优,张九根.安防视频监控系统设计研究[j].低压电器, 2009(14):36-39.
[3]徐凡,袁杰.基于视频的嵌入式森林火灾预警系统[j].计算机应用,2008,28(1):264-266.
[4]张多英,申晨,刘伟平,等.嵌入式视频监控传输系统的设计与实现[j].计算机工程与设计,2010,31(4):724-728.
[5]徐晓菊.基于b/s结构的嵌入式网络视频监控系统的研究与应用[j].工矿自动化, 2010,36(1):83-84.
[6]房芳,马旭东.基于嵌入式web技术的监控系统设计与实现[j].计算机工程,2009,35(23):237-239.
[7]夏亮,祖一康,吴志荣.基于嵌入式web services的系统集成方案[j].单片机与嵌入式系统应用,2008(3):7-9.
[8]anon. gsoap 2.7.15 user guide[eb/ol].[2007-12-15].http://
