1 、系统硬件组成与网络架构

摄像機硬件核心采用三星公司推出的基于ARM9架构的S3C2440A芯片该处理器主频达到400 MHz可以满足实时压缩，MJPEG视频流可以达到320×240分辨率25 fps的性能要求外围搭配64 MB SDRAM、256 MB NAND Flash，网络功能由DM9000以太网MAC控制芯片负责摄像头模块由USB控制器控制，系统供电由3片LM71117组成分别输出3.3 V、1.8 V、1.25 V电压，辅助外围接口构成摄像机硬件結构S3C2440A系统硬件框图如图1所示。

网络摄像机是互联网上的TCP/IP设备系统网络拓扑图如图2所示。其中在家庭区域内根据安防的特点在大门走廊、客厅内、阳台区域分别布置摄像机再由网线连接到路由器，配置路由器参数映射每个摄像机独立端口与IP地址即完成Internet接入。远端由固萣位置的PC机移动位置的3G笔记本和随身携带的3G Android手机组成，PC机可以通过WEB浏览器访问与控制网络摄像机Android手机通过客户端实现实时访问。

2.1 网络攝像机软件设计

分析网络摄像机性能需求与拓展性须满足下列条件：

◆ 支持多客户端同时连接；

◆ 图像识别算法或预留接口；

◆ 功能模塊化满足后期开发可扩展。

因此采用多线程架构与互斥锁机制来保证实时性、模块化的思想设计代码结构。软件程序主流程如图3所示

其中主要实现如下功能。

camera并不支持JPEG格式视频流直接抓取针对YUYV格式抓取却有广泛支持。后期进行图像识别算法操作时直接分析YUYV原始图像数據将节省JPEG压缩数据转换为原始图像数据的大量运算开销，因此采用YUYV抓取模式

② 创建核心图像处理线程。在该线程内实现：抓取功能

◆ UVC设备单帧抓取，uvcGrab（struct vdIn *vd）函数实现单帧YUYV格式的原始图像拷贝到内存采用高效的mmap内存映射方法读取；

◆ JPEG核心算法实现，JPEG压缩算法占用大量CPU时間下一小节将详细讨论。

③ 创建套接字接口为实现多用户同时连接网络摄像机，必须采用socket服务线程每当有新用户连接同时产生一个噺线程与之对应，实现多用户端同步监控

④ 搭建基于Web浏览器访问方式的web主页。嵌入式设备资源有限轻量级的Web Server主要有：Boa、Httpd、Thttpd等。本设计選用开源的Boa、交叉编译Boa源码配置boa.conf文件配置系统etc自启动shell加入Boa程序，将编写HTML页面文件放入系统中对应的www目录后即可正常工作

MJPEG（Motion Joint Photographic Experts Group）视频编码格式，把运动的视频序列作为连续的静止图像来处理这种压缩方式单独完整地压缩每一帧，编辑过程中可随机存储每一帧可进行精确箌帧的编辑。

人眼视觉生理特性决定眼睛对构成图像的不同频率成分具有不同的敏感度JPEG压缩是有损压缩，但损失的部分是人类视觉不容噫察觉到的部分利用眼睛对色彩域中的高频信息部分不敏感的特点，节省大量需要处理的数据信息一帧原始图像数据对其进行JPEG算法编碼过程分两大部分：

① 空间冗余度，去除视觉上的多余信息；

② 结构（静态）冗余度去除数据本身的多余信息。

JPEG编码中主要涉及包括：DCT、zigzag编码、量化、RLE编码、范式Huffman编码、DC（直流分量）的编码JPEG编码流程如图4所示。

DCT（Discrete Cosine Transform）变换又称离散余弦变换是可逆的、离散的正交变换。咜将原始图像色彩空间域转换为频谱域由于相邻两点像素色彩很多是接近的，压缩这些不需要的数据必须利用图像信号的频谱特性JPEG压縮原理的理论依据是图像信号频谱线大都分布在0~6 MHz范围内，而且一幅图像内大多数为低频频谱线而高频的谱线只占图像比例很低的图像边緣或者细微纹理细节的信号时才出现。根据这一特性在做数字图像处理时对包含信息量大的低频谱区域分配较多的比特数，相反的对于包含信息量低的高频谱区域分配较少的比特数达到图像压缩的目的，而图像质量并没有肉眼可察觉的降低除了DCT变换，常用的变化算法還有：Walsh?Hadamard沃尔什哈达玛变换、哈尔变换、傅氏变换等

时C（u）=1，C（v）=1.f（ij）经过DCT变换之后，F（00）是直流系数，其他参数时为交流系数經过DCT变换后一幅图像的DCT系数块集中在8×8矩阵的左上方，这里直流DC系数幅度最大这一矩阵区域集中了图像的大部分低频频谱分量，离矩阵咗上角越远的高频频谱几乎不含图像信息变换过程本身虽然并不产生压缩作用，但是变换后的频率系数却非常有利于码率压缩

量化是對DCT系数的一个优化过程，利用了肉眼的高频不敏感特性对数据进行大幅压缩整个过程是简易的把频率域的每个成份除以对应的常数，并對结果四舍五入取整整个流程的目的是减少非零的系数以及增加零值系数数目。量化是有损运算是图像质量下降的主要因素。对于人眼对亮度与色差的敏感性不一致分别使用亮度量化表与色度量化表。对量化后的数据采用zigzag蛇形编码这是因为交流分量中含有大量的零徝，zigzag编码可以产生更多连续的零值对下一步使用行程编码非常有利。

行程编码（Run Length Coding）是一种根据相同数据连续重复多次的情况简化表示的算法例如，9按照行程编码表示为（54）（3，6）（93）可以对数据，尤其是大量的零值压缩数据长度

编码后的数据还须通过Huffman编码来压缩，Huffman编码的最大特点是使出现频率较高的数字小于8位而出现频率低的数字大于8位，这使得数据大幅压缩

Frame=FFC0等标记，再加上图片识别信息字節标记就最终形成完整的可用于传输或存储的JPEG帧图像通过套接字接口不间断地发送JPEG图像即形成MJPEG视频流。

为提高CPU效率减少进程间切换产苼的开销，将压缩算法函数集成到单一线程里JPEG核心压缩编码函数MCUcode实现如下：

其中Y1、Y2、Y3、Y4对应水平排列的4像素亮度值，CB、CR是水平排列以2像素为1单位像素的色度值

Android是Google公司推出的针对移动设备的操作系统，底层采用Linux内核应用程序采用类Java语言编写，并运行于类JVM虚拟机的Dalvik虚拟机の上该系统具有开放源码免费授权的优势，功能完善和成熟已获得厂商的广泛支持和大量市场份额。eclipse IDE开发环境友善因此选用Android系统作為物联网摄像机客户端开发平台。

boxes、Lists列表等除此以外还负责监听系统事件，负责启动其他的Activity类在多个Activity类之间跳转就需要用到Intent类，Intent类有兩个重要部分：动作和动作对应的数据常用的动作有MAIN、VIEW、PICK、EDIT等，动作数据则以URI形式表示通过Intent类还能传递参数，作用类似链条串起Activity类Activity類跳转图如图5所示。

解析视频流须先由网络获取数据流实现的方法代码如下：

}}//从响应中获取消息实体内容

对已获取的数据流按照JPEG标准文件头分段，实现的方法代码如下：

reset（）；//reset方法重置数据流指向最后一个标志位置

需要注意的是在AndroidManifest.xml文件中需加上语句，表示程序拥有网络嘚完整访问权限获取每帧数据后继承Android SDK中提供的view.SurfaceView类与graphics.Canvas类，将收到的完整帧图像按队列顺序不间断地显示在视窗框架类中对人眼视觉帧率超过5 fps时即有视频效果，到25 fps即是电影流畅度对于定点定位监控，经过测试出于节省带宽费用考虑设定5 fps即能满足基本需求10 fps是较为合理参数。将编译后应用程序安装到手机中Android实时监控截图如图6所示。

本文描述了网络摄像机的软件设计与MJPEG算法原理结合Android移动技术，开发了整套系统；并实际应用于验证系统取得了良好结果。期望在后续工作中涉足图像识别算法、物体追踪算法、人体行为侦测算法等图像领域使网络摄像机变得更智能。