基于HMM的嵌入式人脸识别系统研究
引言
嵌入式人脸识别系统与传统鉴别身份的系统相比具有很强的优势，无需特殊的采集设备，成本低廉，使用简单；同时，人脸识别不干扰使用者，不侵犯使用者的隐私，属于非侵犯的主动识别，易于为用户所接受。
本文以嵌入式arm9系统开发为主线，以hmm模型为理论基础，展示了完成图像采集、人脸检测与识别等功能相对应的硬件平台和软件模块的设计及实现过程；并对图像预处理的浮点算法做了优化，极大提高了嵌入式系统的速度。
本系统软件部分可直接应用于带有linux操作系统的智能手机中，利用手机以及内置的摄像头，即可进行个人面部特征数据分析，然后对比最初存储的人脸信息库，完成身份识别功能。
1 系统架构及其设计方案
本系统采用了samsung推出的以arm 920t risc为内核的处理器——s3c2410a。其优秀的处理性能理所当然地成为便携式设备开发的首选。同时为适应智能手机对视频图像采集的需求，系统采用了基于usb总线的视频采集模块，与串行传输相比极大地提高了数据的采集速率。本系统涉及到数字图像的采集、处理、存储、传输和hmm算法等多种技术。其系统架构如图1所示。
2 图像采集硬件设计
鉴于传统ccd图像传感器昂贵的成本、相对复杂的附加电路和较高的功耗，本系统采用omnivision公司的ov7640 cmos芯片作为图像传感器。ov7640是一款低电压(2．5 v)、高灵敏度的cmos图像传感器。
实时采集存储系统需要高速的数据传输，对系统硬件之问的配合提出较高的要求。本系统设计中，在采集部分和传输部分之间配有相应的缓存区。实际中，采用ov7640及配套的芯片ov511扩展dram起缓存作用，实现将数字视频图像通过高速usb送入arm处理器。ov511是一个专用的数字摄像ic的usb接口芯片。
3 图像采集程序
本系统采用linux做为操作系统平台，操作系统的移植在此不做过多介绍。
video4 linux(简称v4l)是linux中关于视频设备的内核驱动，它为针对视频设备的应用程序编程提供一系列接口函数，这些视频设备包括现今市场上流行的tv卡、视频捕捉卡和usb摄像头等。linux内核提供video4linux应用程序接口，在程序开发时，首先是基于video4linux api函数来设计程序。
基于video4linux图像采集的程序流程如图2所示。
4 图像预处理与人脸识别算法及实现
人脸识别过程首先判断输入的人脸图像或者视频中是否存在人脸，如果存在，则进一步给出每个人脸的位置、大小和各个主要面部器官的位置信息，并依据这些信息，进一步提取每个人脸中所蕴含的身份特征，将其与已有人脸库中的人脸进行对比，从而识别人的身份。
人脸识别的过程可以分为图像预处理、人脸检测和人脸识别三部分。
人脸检测是指从待识别矩阵中定位人脸区域中各特征区域，并将各个区域分割开。人脸识别是根据已有的人脸数据库，输出待测人脸对应在人脸库中的对象标号。二者互为前提和目的。由于hmm既可完成人脸检测，又可完成人脸识别，因此我们将人脸检测与识别同时处理。
4．1 隐马尔可夫模型(hmm)基本概念
hmm是一组用于特征化信号的统计特性的模型，它包含两个相关的过程：一个是隐含的、不可见的有限状态马尔可夫链，它具有初始状态概率分布函数和状态转移概率矩阵，另外是一组与状态有关的概率密度函数。
一个hmm的构成元素如下：
一个hmm可以简记为λ={a，b，∏}，由于其输入为有限字符集v={v1，v2，… vm}，因此称其为离散隐马尔可夫模型
4．2 用于人脸识别的hmm模型
根据状态转移的类型，hmm可分为遍历的(ergodic)和从左到右的(left-right)。前者表示状态转移是任意的，可以到本身和其他所有状态，后者状态转移只限于本身和下一个状态。人脸垂直方向由上至下和水平方向从左至右各个区域具有自然不变的顺序，可以用1d-hmm来模拟人脸，如图3所示。
4．3 人脸图像特征提取
设每一个人脸图像宽度为w，高度为h，被划分为互相重叠的块。块的高度为l，重叠深度为p。因此，从人脸图像抽取的总分块数为观察矢量数t，且t=(h-l)／(l-p)+1。参数l和p的选择将影响系统的识别率，大的重叠深度值p增加了垂直特征向量的数量，使系统的识别率提高。l的选择比较微妙，较小的l使观察矢量不能有效鉴别；而大的l使剪切相交特征概率增加。当p大时，系统识别率对l的变化不敏感。分割算法流程如图4所示。
4．4 人脸hmm模型的训练
为人脸图像库中每一个人脸建立一个hmm模型，用同一个人的5张不同人脸照片进行训练。按照子块划分方法，得到的2d-dct变换系数矢量形成观察矢量序列。用观察矢量序列o={o1，o2，…，ot}进行训练，得到hmm模型参数。
首先对hmm模型λ={a，b，∏}进行初始化，通过自上而下均匀分割人脸图像得到训练数据。模型状态数n=6，与每一个状态有关的观察矢量序列用于得到观察概率矩阵b的初始估计，a和∏的初始值按人脸模型自左到右的结构给出。然后利用最大似然估计算法(baum-welch估计算法)重新估计模型参数，检测p(o|λ)的收敛条件。
如果满足式(3)条件，则模型已收敛，结束训练迭代过程；否则继续进行下一次训练。
此处，c为预先给定的阈值。
4．5 人脸图像识别
被识别的人脸图像用于训练过程相同的方法提取观察矢量序列，观察矢量序列的概率由人脸图像hmm模型计算出，即：
当满足式(4)时，被识别人脸对应人脸图像库中第k个人的人脸被识别出。
实验证明，此算法易于实现实时处理，不受脸部表情变化的影响，抗噪声能力强，鲁棒性好。但在人脸识别中的光照问题和姿态问题方面还有待于进一步的研究。
5 结论
基于嵌入式arm9和hmm算法的人脸识别系统具有体积小，计算量小，运算速度快，性能稳定等特点，能够满足人们对识别设备小型化的需求。相信在不久的将来，基于嵌入式的人脸识别系统会在安检、身份验证、门禁系统、智能考勤等方面得到广泛应用。
本文作者创新点：
人脸识别是生物特征识别中一个重要的研究方向，是间接、无侵犯式身份识别的主要方法。在嵌入式系统进行人脸识别，能够实现人脸识别设备的便携化，将会极大地拓展识别设备的使用范围。识别使用hmm算法，有效地降低了识别算法的空间和时间复杂度，为实时识别提供了可能。
安卓手机开发板定制,MT6739核心板-高效稳定的选择
直线轴承油润滑方式_直线轴承的清洗方式
芯海科技推出智能剃须刀应用方案
高端大屏化趋势的今天 索尼98寸8K电视的到来恰逢其时
【热点】国产显卡崛起了吗？
基于HMM的嵌入式人脸识别系统研究
京东杀入无人驾驶领域,路试还需人员陪同
dfrobotWiiChuck转接器简介
2020年开始奥迪将实现电动汽车快速充电
KTV“聘请”普渡机器人服务员
Canalys 显示：2020 年中国电动汽车市场最大亮点特斯拉 Model 3 与五菱宏光 mini
美国特朗普签署了一项新法案,禁止美国政府和政府承包商使用华为和中兴的部分技术
NVIDIA吐槽：Intel核芯显卡就是个大悲剧
jar与war之间不得不说的事
危险化学品仓库热成像安全监控预警系统
液晶屏驱动板的原理分析
技嘉Z390 AORUS MASTER G2联名主板高清图集
四维图新受邀联合华为云发布乌兰察布汽车专区
详解五大突破，带你认识真正的骁龙本
一种基于仿真测试平台的实物自动化测试环境
嵌入式人脸识别系统与传统鉴别身份的系统相比具有很强的优势，无需特殊的采集设备，成本低廉，使用简单；同时，人脸识别不干扰使用者，不侵犯使用者的隐私，属于非侵犯的主动识别，易于为用户所接受。
本文以嵌入式arm9系统开发为主线，以hmm模型为理论基础，展示了完成图像采集、人脸检测与识别等功能相对应的硬件平台和软件模块的设计及实现过程；并对图像预处理的浮点算法做了优化，极大提高了嵌入式系统的速度。
本系统软件部分可直接应用于带有linux操作系统的智能手机中，利用手机以及内置的摄像头，即可进行个人面部特征数据分析，然后对比最初存储的人脸信息库，完成身份识别功能。
1 系统架构及其设计方案
本系统采用了samsung推出的以arm 920t risc为内核的处理器——s3c2410a。其优秀的处理性能理所当然地成为便携式设备开发的首选。同时为适应智能手机对视频图像采集的需求，系统采用了基于usb总线的视频采集模块，与串行传输相比极大地提高了数据的采集速率。本系统涉及到数字图像的采集、处理、存储、传输和hmm算法等多种技术。其系统架构如图1所示。
2 图像采集硬件设计
鉴于传统ccd图像传感器昂贵的成本、相对复杂的附加电路和较高的功耗，本系统采用omnivision公司的ov7640 cmos芯片作为图像传感器。ov7640是一款低电压(2．5 v)、高灵敏度的cmos图像传感器。
实时采集存储系统需要高速的数据传输，对系统硬件之问的配合提出较高的要求。本系统设计中，在采集部分和传输部分之间配有相应的缓存区。实际中，采用ov7640及配套的芯片ov511扩展dram起缓存作用，实现将数字视频图像通过高速usb送入arm处理器。ov511是一个专用的数字摄像ic的usb接口芯片。
3 图像采集程序
本系统采用linux做为操作系统平台，操作系统的移植在此不做过多介绍。
video4 linux(简称v4l)是linux中关于视频设备的内核驱动，它为针对视频设备的应用程序编程提供一系列接口函数，这些视频设备包括现今市场上流行的tv卡、视频捕捉卡和usb摄像头等。linux内核提供video4linux应用程序接口，在程序开发时，首先是基于video4linux api函数来设计程序。
基于video4linux图像采集的程序流程如图2所示。
4 图像预处理与人脸识别算法及实现
人脸识别过程首先判断输入的人脸图像或者视频中是否存在人脸，如果存在，则进一步给出每个人脸的位置、大小和各个主要面部器官的位置信息，并依据这些信息，进一步提取每个人脸中所蕴含的身份特征，将其与已有人脸库中的人脸进行对比，从而识别人的身份。
人脸识别的过程可以分为图像预处理、人脸检测和人脸识别三部分。
人脸检测是指从待识别矩阵中定位人脸区域中各特征区域，并将各个区域分割开。人脸识别是根据已有的人脸数据库，输出待测人脸对应在人脸库中的对象标号。二者互为前提和目的。由于hmm既可完成人脸检测，又可完成人脸识别，因此我们将人脸检测与识别同时处理。
4．1 隐马尔可夫模型(hmm)基本概念
hmm是一组用于特征化信号的统计特性的模型，它包含两个相关的过程：一个是隐含的、不可见的有限状态马尔可夫链，它具有初始状态概率分布函数和状态转移概率矩阵，另外是一组与状态有关的概率密度函数。
一个hmm的构成元素如下：
一个hmm可以简记为λ={a，b，∏}，由于其输入为有限字符集v={v1，v2，… vm}，因此称其为离散隐马尔可夫模型
4．2 用于人脸识别的hmm模型
根据状态转移的类型，hmm可分为遍历的(ergodic)和从左到右的(left-right)。前者表示状态转移是任意的，可以到本身和其他所有状态，后者状态转移只限于本身和下一个状态。人脸垂直方向由上至下和水平方向从左至右各个区域具有自然不变的顺序，可以用1d-hmm来模拟人脸，如图3所示。
4．3 人脸图像特征提取
设每一个人脸图像宽度为w，高度为h，被划分为互相重叠的块。块的高度为l，重叠深度为p。因此，从人脸图像抽取的总分块数为观察矢量数t，且t=(h-l)／(l-p)+1。参数l和p的选择将影响系统的识别率，大的重叠深度值p增加了垂直特征向量的数量，使系统的识别率提高。l的选择比较微妙，较小的l使观察矢量不能有效鉴别；而大的l使剪切相交特征概率增加。当p大时，系统识别率对l的变化不敏感。分割算法流程如图4所示。
4．4 人脸hmm模型的训练
为人脸图像库中每一个人脸建立一个hmm模型，用同一个人的5张不同人脸照片进行训练。按照子块划分方法，得到的2d-dct变换系数矢量形成观察矢量序列。用观察矢量序列o={o1，o2，…，ot}进行训练，得到hmm模型参数。
首先对hmm模型λ={a，b，∏}进行初始化，通过自上而下均匀分割人脸图像得到训练数据。模型状态数n=6，与每一个状态有关的观察矢量序列用于得到观察概率矩阵b的初始估计，a和∏的初始值按人脸模型自左到右的结构给出。然后利用最大似然估计算法(baum-welch估计算法)重新估计模型参数，检测p(o|λ)的收敛条件。
如果满足式(3)条件，则模型已收敛，结束训练迭代过程；否则继续进行下一次训练。
此处，c为预先给定的阈值。
4．5 人脸图像识别
被识别的人脸图像用于训练过程相同的方法提取观察矢量序列，观察矢量序列的概率由人脸图像hmm模型计算出，即：
当满足式(4)时，被识别人脸对应人脸图像库中第k个人的人脸被识别出。
实验证明，此算法易于实现实时处理，不受脸部表情变化的影响，抗噪声能力强，鲁棒性好。但在人脸识别中的光照问题和姿态问题方面还有待于进一步的研究。
5 结论
基于嵌入式arm9和hmm算法的人脸识别系统具有体积小，计算量小，运算速度快，性能稳定等特点，能够满足人们对识别设备小型化的需求。相信在不久的将来，基于嵌入式的人脸识别系统会在安检、身份验证、门禁系统、智能考勤等方面得到广泛应用。
本文作者创新点：
人脸识别是生物特征识别中一个重要的研究方向，是间接、无侵犯式身份识别的主要方法。在嵌入式系统进行人脸识别，能够实现人脸识别设备的便携化，将会极大地拓展识别设备的使用范围。识别使用hmm算法，有效地降低了识别算法的空间和时间复杂度，为实时识别提供了可能。
安卓手机开发板定制,MT6739核心板-高效稳定的选择
直线轴承油润滑方式_直线轴承的清洗方式
芯海科技推出智能剃须刀应用方案
高端大屏化趋势的今天 索尼98寸8K电视的到来恰逢其时
【热点】国产显卡崛起了吗？
基于HMM的嵌入式人脸识别系统研究
京东杀入无人驾驶领域,路试还需人员陪同
dfrobotWiiChuck转接器简介
2020年开始奥迪将实现电动汽车快速充电
KTV“聘请”普渡机器人服务员
Canalys 显示：2020 年中国电动汽车市场最大亮点特斯拉 Model 3 与五菱宏光 mini
美国特朗普签署了一项新法案,禁止美国政府和政府承包商使用华为和中兴的部分技术
NVIDIA吐槽：Intel核芯显卡就是个大悲剧
jar与war之间不得不说的事
危险化学品仓库热成像安全监控预警系统
液晶屏驱动板的原理分析
技嘉Z390 AORUS MASTER G2联名主板高清图集
四维图新受邀联合华为云发布乌兰察布汽车专区
详解五大突破，带你认识真正的骁龙本
一种基于仿真测试平台的实物自动化测试环境