基于多核DSP DM8168处理器的大数据量高速视频采集及压缩的实现方案
随着1080p高清视频以及4k超高清晰视频的普及和应用，基于传统单核dsp处理器的视频信息处理已有些力不从心。为此ti公司推出了一款专门用于高清视频处理的多核dsp处理器，它拥有4个不同类型的处理器，使得视频处理达到了一个更高水平。本文分析研究了该处理器的多核dsp结构及应用开发方法，并对多核间的协调工作及负载情况进行了测试分析。
以dsp为核心的处理器凭借自身硬件结构的优势和算法优化使得一般的嵌入式产品在视频应用领域得到了广泛的应用。随着高清视频应用的增多，传统单核dsp处理器已经不能很好地满足应用需求了。为此，ti公司推出了一款专门针对高清大数据量快速计算的专用多核dsp处理器dm8168。与传统单核dsp或arm+dsp的异构多核结构相比，dm8168集成了4个不同类型的处理器，除了传统arm+dsp结构外，dm8168还拥有两个专门针对高清视频的图像处理器。因此，研究如何基于这种复杂的多核dsp进行应用设计，是有一定实用价值的。
本文在一款基于多核dsp dm8168处理器的seed-dvs8168平台上，研究了16通道d1数据格式60 fps的大数据量高速视频采集及压缩的实现方法，并且对dm8168实现过程中4个核心处理器的负载进行了测试和分析。
1 硬件平台结构
tms320dm816是ti公司推出的达芬奇（davinci）硬件平台。它在dm8168开发板上拓展了16路模拟输入口，集成了多种外设接口。dm8168硬件平台为ti的高性能异构多核soc片上系统，该平台集成了一个主频为1.2 ghz的arm cortex—a8处理器，一个主频为1ghz的c674x dsp以及3个主频为600 mhz高清视频图像协处理器（high definition video/imaging coprocessor，hdvicp），以及一个高清视频处理子系统（hight defi nition video processing subsystem，hdvpss）。多核dsp系统应用中，各处理器在硬件上相互独立、相互配合，极大地提升了整个系统的效率。本文针对dm8168集成的4片tvp8158对16路60 fps视频的采集压缩过程进行了研究，并对结果进行了分析。硬件平台结构如图1所示。
1.1 arm cortex—a8处理器
arm cortex—a8是一款专门针对多任务应用的高性能哈佛结构处理器。本文中arm cortex—a8处理器主要用于控制管理各个从处理器，配置和调节各子系统的协同工作，管理外部设备及外部存储器。
1.2 高清视频处理子系统hdvpss
hdvpss集成了两个独立的视频捕捉输入端口vin0、vin1，每个vin口又分为a、b两组，即vinoa、vinob、vin1a、vin1b。每个tvp5158复合了4路视频送入vin口，hdvpss采集到数据之后利用内部硬件把视频抽离分解出来进行后期处理，捕捉时钟高达165mhz。此外，hdvpss每个视频输入端口支持缩放、像素格式转换、支持1路高达1080p60或8路复用的d1数据处理。功能上，hdvpss集成了两个视频处理引擎，具有去隔行处理、降噪、格式转换、视频输入/输出等数据处理能力。
1.3 高清视频协处理器hdvocp
hdvicp是一个视频编解码硬件加速器，可以最大支持1080p60标准高清视频的编解码流。硬件加速可支持mpeg1/2/4 asp/sp、h.264 bl/mp/hp、vc-1 sp/mp/ap、rv9/10、avs-1.0等主流的编解标准。hdvicp集成了运动估计加速引擎、帧内预测估计引擎、熵编/解码器等硬件模块。hdvicp直接在硬件上提升了原本复杂的数字图像处理运算，从而增强了hdvicp的视频处理能力。hdvicp的内部结构如图2所示。
在外部，hdvicp与其他处理器之间通过邮箱中断以及硬件自旋锁来实现。邮箱中断通过写寄存器的方式向某个从处理器发送中断信号，自旋锁机制则为访问系统共享资源提供了完善的解决方案;内部，同步箱负责所有嵌入式模块的调度，同步各加速器之间的参数以及数据。
1.4 数字信号处理dsp
c674x dsp内核是tms320c6000 dsp平台上的高性能浮点数字信号处理器，其除了具有传统dsp的硬件运算加速器单元外，还具有sploo p、压缩的指令集、增强的指令集、异常处理以及优先级管理，完备的硬件支持使得c674x dsp在应用中具有强大地数据信号处理能力。本系统研究中将传统的视频采集及压缩编码这类算法从dsp模块中分离出来，极大地减轻了dsp的负载，使多核dsp协同工作的环境、性能得到了极大的优化。
2 系统软件设计
dm8168的主处理器是arm cortex—a8，开始上电之后u-boot引导其从rom中启动linux，一旦启动成功，arm cortex—a8便引导从处理器c674x dsp和媒体控制器的电源管理、重启控制以及设置可执行文件的入口到相应寄存器中，完成这个软件运行环境的建立。
结合dm8168硬件平台的特点，软件系统整体划分为4个模块。其中arm为主控模块，运行linux系统，主要负责整个系统的控制以及外设管理;另外3个内核运行bios6系统，其中vpss m3运行在hdvpss上，主要管理视频的采集、存储以及输入/输出;video m3运行在hdvicp上，主要负责视频的编解码;c674x dsp主要执行软件的显示策略以及用户算法。软件结构设计如图3所示。
多通道视频处理框架（multi—channel framework，mcfw）中对视频处理常用的捕获、压缩编码、解码、显示等处理过程进行了优化，该框架下的视频处理以link为基本处理单位进行。视频传递采集、编码以及显示过程大致分为以下几个过程。
（1）原始采集过程
系统获得采集任务之后，首先初始化采集参数，包括采集设备的检测、需采集的视频格式、输出格式等。稍后调用mcfw框架下的system _linkcreate（）创建capturelink，调用system_linkstart（）进行视频采集，模拟信号经过主板上集成的4片tv5158解码芯片之后转换为16chd1 yuv422i 60fps的数字信号传递给vpss协处理器，等待下一步处理。
（2）视频处理
vpss协处理器检测到视频输入以后，对输入的视频进行降噪、去隔行处理等，然后将数据传递给hdvicp协处理器，dm8168内部集成的3个hdvicp协处理器的视频编解码硬件加速支持mpeg4 h.264等视频的编解码格式，运行在hdvicp上的视频编码子系统（video encode subsyst em，venc）以及视频解码子系统（video decode subsystem，vdec）具体实现16 ch d1 60 fps的h.264编码压缩/解码处理。
（3）视频的存储、显示以及传输
hdvicp协处理器压缩产生的视频数据，放入内存共享区，供arm处理器进行后期的网络传输或本地存储。同时，也将数据传递给hdvpss协处理器实现16 ch视频的显示输出。
（4）视频采集的销毁
视频采集结束后，hdvpss首先调用system_link stop（）停止视频采集，然后调用system_linkdelete（）释放占用资源。视频采集编码过程如图4所示。
视频的采集、降噪、压缩编码/解码、显示都由host a8进行控制，每个视频采集过程中的功能都在各自处理上进行了模块的划分，以独立的线程运行。各模块间通过消息中断、ipc等方式进行通信，通过共享内存实现数据共享。
3 结果测试与分析
本研究方法中，模拟视频信号经过主板上集成的4片tvp5158解码芯片转换为16ch d1 yuv422i 60fps数字信号传递给hdvpss协处理器进行降噪、隔行扫描处理，数据预处理之后hdvpss将数据传送给hdvicp协处理器进行视频的h.264压缩存储，同时数据也由hdvpss协处理器的hdmi数据输出接口输出到显示器。多核cpu负载情况统计如表1所列。
实验结果中，host a8作为主控处理器，负责多核dsp的任务调度和协调，hdvpss以及hdvicp协处理器承担了16 d1视频的采集以及压缩编码工作，处理器负载较均衡。由于协处理器独立承担视频的处理任务，dsp在本设计中只负责scd算法，负载较小。整体上来看，由于多核dsp dm8168的各个核心处理器之间相互协同工作，整个系统的负载较均衡，整个系统得到了有效的利用，且性能也比较突出。
结语
针对16通道d1数据格式的大数据量视频数据置的采集编码，在传统达芬奇dsp处理器上实现相对较为困难，而本文针对基于多核dsp dm8 168将视频的采集、降噪、隔行扫描以及压缩编码等任务从传统的单核dsp处理器上独立出来，分别由从硬件加速的hdvpss协处理器和hdvicp协处理器来完成，极大地提升了视频采集的效率，同时也减轻了单核dsp的任务负担，功能模块化设计大大提升了嵌入式设备的整体处理能力，效果较为明显。但从实际应用的角度来考虑，本设计可能考虑得不够全面，需在后期设计中不断地充实和完善。
VoLTE技术 让我们的声音不那么杂乱不堪
苹果8充电爆裂!步三星note7后尘?iPhone8紧急跳水价,五千不到即可买到
分布式光伏项目的设计优化方案解析
英特尔ONP和OPNFV的组件介绍
纳米银导电笔点亮一带一路
基于多核DSP DM8168处理器的大数据量高速视频采集及压缩的实现方案
LOC11X线性光耦合器的应用
如何保护和维护电脑硬盘，让数据不再无意丢失
三星表示未来Tizen系统将被用于汽车等多种设备
汉威入选“2022年度国家知识产权优势企业名单”
中国手机品牌成功进入俄罗斯市场，实力“圈粉”
光电与RFID 物流机器人总体结构设计
深度解析PCB喷锡与PCB化锡的区别
Zigbee技术物理信道的访问和设置建议
蓝牙艾灸宝承传统养生精髓，启现代艾灸新时代
指纹锁活体识别定义及优势特点
两种方法给你的硬盘“扩容”
TTP117-AD8专业台灯触摸IC,欢迎来电咨询
紫光展锐掌门人曾学忠联合多家股东成立了新公司
如何用继电器构建计算机的CPU
以dsp为核心的处理器凭借自身硬件结构的优势和算法优化使得一般的嵌入式产品在视频应用领域得到了广泛的应用。随着高清视频应用的增多，传统单核dsp处理器已经不能很好地满足应用需求了。为此，ti公司推出了一款专门针对高清大数据量快速计算的专用多核dsp处理器dm8168。与传统单核dsp或arm+dsp的异构多核结构相比，dm8168集成了4个不同类型的处理器，除了传统arm+dsp结构外，dm8168还拥有两个专门针对高清视频的图像处理器。因此，研究如何基于这种复杂的多核dsp进行应用设计，是有一定实用价值的。
本文在一款基于多核dsp dm8168处理器的seed-dvs8168平台上，研究了16通道d1数据格式60 fps的大数据量高速视频采集及压缩的实现方法，并且对dm8168实现过程中4个核心处理器的负载进行了测试和分析。
1 硬件平台结构
tms320dm816是ti公司推出的达芬奇（davinci）硬件平台。它在dm8168开发板上拓展了16路模拟输入口，集成了多种外设接口。dm8168硬件平台为ti的高性能异构多核soc片上系统，该平台集成了一个主频为1.2 ghz的arm cortex—a8处理器，一个主频为1ghz的c674x dsp以及3个主频为600 mhz高清视频图像协处理器（high definition video/imaging coprocessor，hdvicp），以及一个高清视频处理子系统（hight defi nition video processing subsystem，hdvpss）。多核dsp系统应用中，各处理器在硬件上相互独立、相互配合，极大地提升了整个系统的效率。本文针对dm8168集成的4片tvp8158对16路60 fps视频的采集压缩过程进行了研究，并对结果进行了分析。硬件平台结构如图1所示。
1.1 arm cortex—a8处理器
arm cortex—a8是一款专门针对多任务应用的高性能哈佛结构处理器。本文中arm cortex—a8处理器主要用于控制管理各个从处理器，配置和调节各子系统的协同工作，管理外部设备及外部存储器。
1.2 高清视频处理子系统hdvpss
hdvpss集成了两个独立的视频捕捉输入端口vin0、vin1，每个vin口又分为a、b两组，即vinoa、vinob、vin1a、vin1b。每个tvp5158复合了4路视频送入vin口，hdvpss采集到数据之后利用内部硬件把视频抽离分解出来进行后期处理，捕捉时钟高达165mhz。此外，hdvpss每个视频输入端口支持缩放、像素格式转换、支持1路高达1080p60或8路复用的d1数据处理。功能上，hdvpss集成了两个视频处理引擎，具有去隔行处理、降噪、格式转换、视频输入/输出等数据处理能力。
1.3 高清视频协处理器hdvocp
hdvicp是一个视频编解码硬件加速器，可以最大支持1080p60标准高清视频的编解码流。硬件加速可支持mpeg1/2/4 asp/sp、h.264 bl/mp/hp、vc-1 sp/mp/ap、rv9/10、avs-1.0等主流的编解标准。hdvicp集成了运动估计加速引擎、帧内预测估计引擎、熵编/解码器等硬件模块。hdvicp直接在硬件上提升了原本复杂的数字图像处理运算，从而增强了hdvicp的视频处理能力。hdvicp的内部结构如图2所示。
在外部，hdvicp与其他处理器之间通过邮箱中断以及硬件自旋锁来实现。邮箱中断通过写寄存器的方式向某个从处理器发送中断信号，自旋锁机制则为访问系统共享资源提供了完善的解决方案;内部，同步箱负责所有嵌入式模块的调度，同步各加速器之间的参数以及数据。
1.4 数字信号处理dsp
c674x dsp内核是tms320c6000 dsp平台上的高性能浮点数字信号处理器，其除了具有传统dsp的硬件运算加速器单元外，还具有sploo p、压缩的指令集、增强的指令集、异常处理以及优先级管理，完备的硬件支持使得c674x dsp在应用中具有强大地数据信号处理能力。本系统研究中将传统的视频采集及压缩编码这类算法从dsp模块中分离出来，极大地减轻了dsp的负载，使多核dsp协同工作的环境、性能得到了极大的优化。
2 系统软件设计
dm8168的主处理器是arm cortex—a8，开始上电之后u-boot引导其从rom中启动linux，一旦启动成功，arm cortex—a8便引导从处理器c674x dsp和媒体控制器的电源管理、重启控制以及设置可执行文件的入口到相应寄存器中，完成这个软件运行环境的建立。
结合dm8168硬件平台的特点，软件系统整体划分为4个模块。其中arm为主控模块，运行linux系统，主要负责整个系统的控制以及外设管理;另外3个内核运行bios6系统，其中vpss m3运行在hdvpss上，主要管理视频的采集、存储以及输入/输出;video m3运行在hdvicp上，主要负责视频的编解码;c674x dsp主要执行软件的显示策略以及用户算法。软件结构设计如图3所示。
多通道视频处理框架（multi—channel framework，mcfw）中对视频处理常用的捕获、压缩编码、解码、显示等处理过程进行了优化，该框架下的视频处理以link为基本处理单位进行。视频传递采集、编码以及显示过程大致分为以下几个过程。
（1）原始采集过程
系统获得采集任务之后，首先初始化采集参数，包括采集设备的检测、需采集的视频格式、输出格式等。稍后调用mcfw框架下的system _linkcreate（）创建capturelink，调用system_linkstart（）进行视频采集，模拟信号经过主板上集成的4片tv5158解码芯片之后转换为16chd1 yuv422i 60fps的数字信号传递给vpss协处理器，等待下一步处理。
（2）视频处理
vpss协处理器检测到视频输入以后，对输入的视频进行降噪、去隔行处理等，然后将数据传递给hdvicp协处理器，dm8168内部集成的3个hdvicp协处理器的视频编解码硬件加速支持mpeg4 h.264等视频的编解码格式，运行在hdvicp上的视频编码子系统（video encode subsyst em，venc）以及视频解码子系统（video decode subsystem，vdec）具体实现16 ch d1 60 fps的h.264编码压缩/解码处理。
（3）视频的存储、显示以及传输
hdvicp协处理器压缩产生的视频数据，放入内存共享区，供arm处理器进行后期的网络传输或本地存储。同时，也将数据传递给hdvpss协处理器实现16 ch视频的显示输出。
（4）视频采集的销毁
视频采集结束后，hdvpss首先调用system_link stop（）停止视频采集，然后调用system_linkdelete（）释放占用资源。视频采集编码过程如图4所示。
视频的采集、降噪、压缩编码/解码、显示都由host a8进行控制，每个视频采集过程中的功能都在各自处理上进行了模块的划分，以独立的线程运行。各模块间通过消息中断、ipc等方式进行通信，通过共享内存实现数据共享。
3 结果测试与分析
本研究方法中，模拟视频信号经过主板上集成的4片tvp5158解码芯片转换为16ch d1 yuv422i 60fps数字信号传递给hdvpss协处理器进行降噪、隔行扫描处理，数据预处理之后hdvpss将数据传送给hdvicp协处理器进行视频的h.264压缩存储，同时数据也由hdvpss协处理器的hdmi数据输出接口输出到显示器。多核cpu负载情况统计如表1所列。
实验结果中，host a8作为主控处理器，负责多核dsp的任务调度和协调，hdvpss以及hdvicp协处理器承担了16 d1视频的采集以及压缩编码工作，处理器负载较均衡。由于协处理器独立承担视频的处理任务，dsp在本设计中只负责scd算法，负载较小。整体上来看，由于多核dsp dm8168的各个核心处理器之间相互协同工作，整个系统的负载较均衡，整个系统得到了有效的利用，且性能也比较突出。
结语
针对16通道d1数据格式的大数据量视频数据置的采集编码，在传统达芬奇dsp处理器上实现相对较为困难，而本文针对基于多核dsp dm8 168将视频的采集、降噪、隔行扫描以及压缩编码等任务从传统的单核dsp处理器上独立出来，分别由从硬件加速的hdvpss协处理器和hdvicp协处理器来完成，极大地提升了视频采集的效率，同时也减轻了单核dsp的任务负担，功能模块化设计大大提升了嵌入式设备的整体处理能力，效果较为明显。但从实际应用的角度来考虑，本设计可能考虑得不够全面，需在后期设计中不断地充实和完善。
VoLTE技术 让我们的声音不那么杂乱不堪
苹果8充电爆裂!步三星note7后尘?iPhone8紧急跳水价,五千不到即可买到
分布式光伏项目的设计优化方案解析
英特尔ONP和OPNFV的组件介绍
纳米银导电笔点亮一带一路
基于多核DSP DM8168处理器的大数据量高速视频采集及压缩的实现方案
LOC11X线性光耦合器的应用
如何保护和维护电脑硬盘，让数据不再无意丢失
三星表示未来Tizen系统将被用于汽车等多种设备
汉威入选“2022年度国家知识产权优势企业名单”
中国手机品牌成功进入俄罗斯市场，实力“圈粉”
光电与RFID 物流机器人总体结构设计
深度解析PCB喷锡与PCB化锡的区别
Zigbee技术物理信道的访问和设置建议
蓝牙艾灸宝承传统养生精髓，启现代艾灸新时代
指纹锁活体识别定义及优势特点
两种方法给你的硬盘“扩容”
TTP117-AD8专业台灯触摸IC,欢迎来电咨询
紫光展锐掌门人曾学忠联合多家股东成立了新公司
如何用继电器构建计算机的CPU