一种基于Mailbox核间机制的多核处理系统
摘要：随着电子产业.工商业以及军事化产业的迅猛发展，越来越多的复杂运算已经无法单纯利用算法上的优化处理来大幅提升执行速度.为了解决日益复杂的计算问题，利用多核处理势必成为一种大势所趋.所以着手从多核和单核对比出发，利用xilinx 的xup virtex-2 pro建立多核处理平台（基于shared memory通信机制）以及单核平台，并将相同的图像处理算法dct分别运行在所构造的基于fpga的单核和多核硬件平台上，观察实验结果，比较多核和单核运行所需的时间以及资源的消耗，最终的结果有力的说明多核在图像处理方面的绝对优势。
0 引言 基于fpga的嵌入式应用在近几年来作为一个比较新颖的课题，已经在通信.消费电子.医疗.工业和军事等诸多领域占据了相当重要的地位.相对于其他芯片来说，使用fpga设计的电路执行速度快.上市时间短.成本低廉.可靠性高以及易于维护升级.正是这些优点才使得fpga的应用范围越来越广泛，备受各个领域设计师们的青睐.但是有关于它在多核体系上的研究却一直很少有人涉及.本文在研究各种核间通信机制的基础上，提出了一种基于mailbox核间机制的多核处理系统，在该系统中集成了xilinx的软核处理器microblaze,其降低了使用多信号处理板但来的成本问题同时还节省了空间，对更好的发挥多核系统提出了新的解决方案.
1 总线机制与核间通信机制 在多核嵌入式系统的设计中，核间通信机制与核间传输总线在选用时很有讲究，常用的总线有：opb总线.plb总线.xcl总线.fsl总线.lmb总线，同时多核通信系统中常用的通信机制以及通信手段包括：mailbox,mu-tex,shared memory,interrupt,plbv46_plbv46 bridge,fsl互连机制，dma controller等.如图1所示。
1.1 plb总线 plb 总线（processor local bus）总线包括了一个总线控制单元.一个看门狗定时器以及独立的地址和读/写数据路径单元，另外，还包括了一个可选用的dcr（device control register）从接口以提供对总线错误状态寄存器的访问。
1.2 lmb总线 lmb 总线主要用来连接片上bram（blockram）.为了能在一个时钟周期内完成访问，lmb采用了最少的控制信号和简单协议的方式.它分为指令寄存器dlmb 和数据寄存器ilmb 两类接口，而且这些接口只和bram连接。
1.3 shared memory通信机制 共享内存是一种典型的快速异步通信机制，因其使得零拷贝有可能实现，固非常适用于大于1 000 b的大型数据量共享的情况，共享内存可分为两种：blockram和外部内存ddrr。
2 rgb2ycrcb 算法以及dct算法介绍 rgb,ycrcb是表示颜色时经常用到的两种颜色空间，在应用中经常需要实现它们之间的转换.例如在人脸检测中就常常用到ycrcb空间，因为一般的图像都是基于rgb 空间的，在rgb 空间里人脸的肤色受亮度影响相当大，所以肤色点很难从非肤色点中分离出来，也就是说在此空间经过处理后，肤色点是离散的点，中间嵌有很多非肤色，这为肤色区域标定（人脸标定.眼睛等）带来了难题.如果把rgb转为ycrcb空间的话，可以忽略y（亮度）的影响，因为该空间受亮度影响很小，肤色会产生很好的类聚。
而dct 变换是视频压缩编解码器中很重要的一部分，被广泛应用于各种视频格式的编码算法中，例如：
jpeg,mpeg1,mpeg2,h.264等.
dct 是先将整体图像分为n×n 的像素块，然后对n×n 的像素块逐一进行dct变换.由于大多数图像的高频分量较小，对应于图像高频分量的系数经常为零，加上人眼对于高频成分的失真不太敏感，所以可以用更粗糙的量化.因此，传送变换系数的数码率要大大小于传送图像像素所用的数码率.图像到达接收端后通过反离散余弦变换回到样值，虽然会有一定的是真，但人眼是可以接受的，公式如下：
式中c（u） 和c（v） 在u.v 为0时等于1 2 ,其他情况下均为1,而x,u = 0,1,2,…，m – 1 ; y,v = 0,1,2,…，n – 1.
3 多核系统设计环境与系统软硬件的设计 本文所采用的软件开发环境是xilinx 公司旗下的ise 10.1开发套件，硬件开发平台采用的是xilinx 的xup virtex-2 pro[8-9]开发板，而ise 10.1开发套件嵌入了edk 开发包（其集成了xilinx platform studio,softwaredevelopment,库文件生成器，编译工具等开发模块），这样就大大方便了软硬件的开发.
3.1 利用xps向导进行多核硬件系统设计 打开xps 软件后，首先利用base system builder向导建立一个单核系统，在此基础上通过添加新的micro-blaze 处理器软核以及必要的内存块.数据指令控制器和相应的外围设备来完成多核系统的创建.有关基于bram的共享内存机制已经简要的介绍过，这里不再重复.整个系统的框架如图2所示。
硬件系统采用的总线机制为plb总线，所有的mi-croblaze均挂在这两条总线上，并且以microblaze0作为主处理器，其他用作从处理器.
设计中plb总线的从设备主要是xps-uartlite,它作为系统的主要验证手段，通过串口打印可以在pc机终端里输出核间通信信息.lmb 总线则用于连接片上bram 和mb 的各个lmb 接口，实现了d/i lmb 端口与启动内存块.数据/指令控制器的互连.
plb 桥的作用是使得所有的处理器可以共享外围设备，如串口rs 232等.
3.2 利用edk套件进行多核软件开发 在软件开发过程中，一方面除了需要注意重要的宏定义以及数据结构的设计外，如在rgb2ycrcb处理中，为了在后续的代码中对内存进行操作，需要对这些内存地址进行预先的宏定义以及设计有关bmp图片信息头的数据结构和信息获取函数；另一方面也要注意算法的设计.编译与部署.具体算法的核心部分设计如下所述.
rgb2ycrcb的核心算法如下：
4 硬件实现 4.1 测试所搭建的硬件系统的步骤 （1）点击hardware 下的generate bitstream 按钮，生成配置fpga所需要的比特流文件；
（2）将pc 机与virtex-2 pro 开发板正确连接，并且给开发板上电；
（3）打开超级终端或是putty工具，设置正确的参数（如波特率.奇偶校验位以及流控制位等），确保和创建硬件系统时的设置一致；
（4）点击device configuration 下的download bit-stream进行比特流的下载配置；
（5）观察终端中的打印信息，判断是否和tes-tapp_memory.c文件中的一致.
4.2.1 图像算法在单核上的执行流程
（1）算法按照宏块顺序往下处理，先处理第一个宏块；
（2）对第一个宏块的前4个y分量进行rgb2ycrcb处理，完成后对ycrcb结果做dct（ymatrix,color）变换；
（3）对第一个宏块的cr 分量进行rgb2ycrcb 处理，完成后对ycrcb结果做dct（crmatrix,color）变换；
（4）对第一个宏块的cb 分量进行rgb2ycrcb 处理，完成后对ycrcb结果做dct（cbmatrix,color）变换；
（5）返回到步骤（1）进行第二个宏块的处理.
基于单核架构的处理流程是一个串行执行过程，体现在宏块于宏块之间是处于一种阻塞等待性的机制，换言之，只要宏块0的任何一个分量（y/cr/cb）没有独立处理且最终完全处理完毕后处理器都必须等待，而无法转向宏块1进行后续的处理.
4.2.2 下载比特流，配置fpga
（1）正确连接好virtex-2 pro 开发板，并给板子上电；
（2）打开一个超级终端或是putty工具，注意设置匹配的波特率.奇偶校验位以及流控制位；
（3）对于需要运行的应用程序，右单击选中markto initialize brams以初始化内存块；
（4）在device configuration 中点击download bit-stream下载比特流，配置fpga;
（5）修改shm.c文件中trycount值（该值为一幅8 kb图片进行循环处理的次数），然后重新编译.下载并配置fpga,统计每次处理完成的时间，并填写表1.
4.3 多核执行图像处理算法以及时间测量 4.3.1 图像算法在多核上的执行流程
（1）算法仍以宏块处理为单位，mb0先对第一个宏块进行处理；
（2）mb0对第一个宏块的4个y分量进行rgb2y变换，并将中间结果写入内存，作为mb1 进行dct（yma-trix,color）的输入数据；
（3）mb1读取颜色转换后的y 分量，对其进行dct（ymatrix,color）；
（4）mb0在将y分量写入共享之后，立即开始cr分量的rgb2cr变换，并将cr结果写入共享作为mb1进行dct（crmatrix,color）变换的输入数据；
（5）mb1读取颜色转换后的cr 分量，对其进行dct（crmatrix,color）；
（6）mb0 在将cr 分量写入共享之后，立即开始cb分量的rgb2cb 变换，并将cb 结果写入共享作为mb1进行dct（cbmatrix,color）变换的输入数据；
（7）mb1读取颜色转换后的cb 分量，对其进行dct（cbmatrix,color）；
（8）mb0完成一个宏块的处理之后不等待，即可返回步骤状态进行第二个宏块的处理，而mb1 则以mb0的处理过程循环往复.
基于双核架构的处理流程也是一个并行执行过程，体现在当mb0做好rgb2ycrcb（所有分量的颜色变换）之后，只需将处理的中间结果写入内存作为mb1 进行dct 变换的出入数据，而无需等待mb1 上dct 处理进程的完成，在mb1 进行上一个宏块的dct 变换处理过程中，mb0 已经转向宏块1 进行下一轮的各个分量的rgb2ycrcb处理.
4.3.2 下载下载比特流，配置fpga
所有步骤同单核配置过程.运行后同样要改写shm.c文件中的trycount值，记录时间，并填写表2.
通过表1,表2的对比，很容易发现，多核体系在时间上有明显的优势.
4.4 单核/多核体系占用资源对比 通过编译，在生成的编译报告中将两者所用的资源统计如表3所示.从表中可以看到在硬件资源的占用上，双核体系的确消耗的资源较多.
5 结语 多核系统由于采用了并行环路体系并摒弃了单核阻塞状态下的等待时间，从而能够达到处理时间上的优化，但是另一方面其对片上资源的消耗也会随着从处理器的增加与日俱增，这也印证了“速度与面积”不能兼得这条原则，所以在工程中一定要做好权衡，权衡算法性能优化和硬件资源占用率的取舍，最好能够折中.
当然在处理如图像处理.信号处理类的一些复杂算法时，多核机制还是相当具有可取性的，毕竟在实际工程中，往往不介意以空间资源消耗来获取时间上的优化处理。
沃达丰新式无人机追踪和控制技术用以管制无人机
云办公成趋势，华为云桌面全方位保障企业安全
如何在OpticStudio中建模菲涅尔透镜
Xilinx开发板Si570频率配置步骤详解
干货满满 戴尔游匣G15是618最值得选的电竞神器！
一种基于Mailbox核间机制的多核处理系统
随着公众对VR的兴趣持续稳定增长 索尼将会推出新一代PSVR头显
腕带型人体传感器 拥有广阔应用前景
智原科技采用Cadence数字实现与验证解决方案，提升最大型SoC设计的性能
路由器使用需要注意哪些问题？
开关电源中MOS管栅极上拉电阻和下拉电阻的作用
应用材料公司展现加速创新、驱动长期盈利增长的独特能力
51单片机、AVR单片机和PIC单片机的IO口操作
可上下限温度的感温控制器电路图说明
压力变送器怎样选型
共享单车行业的兴衰史 或成互联网流量红利最后“风口”
光伏行业最新新闻：晶澳太阳告别纳斯达克借壳回A 国务院推动光伏+发展
到底什么是物联网
气体流量计工作原理_气体流量计应用
华为Mate S iPhone 6S 谁更靓?
0 引言 基于fpga的嵌入式应用在近几年来作为一个比较新颖的课题，已经在通信.消费电子.医疗.工业和军事等诸多领域占据了相当重要的地位.相对于其他芯片来说，使用fpga设计的电路执行速度快.上市时间短.成本低廉.可靠性高以及易于维护升级.正是这些优点才使得fpga的应用范围越来越广泛，备受各个领域设计师们的青睐.但是有关于它在多核体系上的研究却一直很少有人涉及.本文在研究各种核间通信机制的基础上，提出了一种基于mailbox核间机制的多核处理系统，在该系统中集成了xilinx的软核处理器microblaze,其降低了使用多信号处理板但来的成本问题同时还节省了空间，对更好的发挥多核系统提出了新的解决方案.
1 总线机制与核间通信机制 在多核嵌入式系统的设计中，核间通信机制与核间传输总线在选用时很有讲究，常用的总线有：opb总线.plb总线.xcl总线.fsl总线.lmb总线，同时多核通信系统中常用的通信机制以及通信手段包括：mailbox,mu-tex,shared memory,interrupt,plbv46_plbv46 bridge,fsl互连机制，dma controller等.如图1所示。
1.1 plb总线 plb 总线（processor local bus）总线包括了一个总线控制单元.一个看门狗定时器以及独立的地址和读/写数据路径单元，另外，还包括了一个可选用的dcr（device control register）从接口以提供对总线错误状态寄存器的访问。
1.2 lmb总线 lmb 总线主要用来连接片上bram（blockram）.为了能在一个时钟周期内完成访问，lmb采用了最少的控制信号和简单协议的方式.它分为指令寄存器dlmb 和数据寄存器ilmb 两类接口，而且这些接口只和bram连接。
1.3 shared memory通信机制 共享内存是一种典型的快速异步通信机制，因其使得零拷贝有可能实现，固非常适用于大于1 000 b的大型数据量共享的情况，共享内存可分为两种：blockram和外部内存ddrr。
2 rgb2ycrcb 算法以及dct算法介绍 rgb,ycrcb是表示颜色时经常用到的两种颜色空间，在应用中经常需要实现它们之间的转换.例如在人脸检测中就常常用到ycrcb空间，因为一般的图像都是基于rgb 空间的，在rgb 空间里人脸的肤色受亮度影响相当大，所以肤色点很难从非肤色点中分离出来，也就是说在此空间经过处理后，肤色点是离散的点，中间嵌有很多非肤色，这为肤色区域标定（人脸标定.眼睛等）带来了难题.如果把rgb转为ycrcb空间的话，可以忽略y（亮度）的影响，因为该空间受亮度影响很小，肤色会产生很好的类聚。
而dct 变换是视频压缩编解码器中很重要的一部分，被广泛应用于各种视频格式的编码算法中，例如：
jpeg,mpeg1,mpeg2,h.264等.
dct 是先将整体图像分为n×n 的像素块，然后对n×n 的像素块逐一进行dct变换.由于大多数图像的高频分量较小，对应于图像高频分量的系数经常为零，加上人眼对于高频成分的失真不太敏感，所以可以用更粗糙的量化.因此，传送变换系数的数码率要大大小于传送图像像素所用的数码率.图像到达接收端后通过反离散余弦变换回到样值，虽然会有一定的是真，但人眼是可以接受的，公式如下：
式中c（u） 和c（v） 在u.v 为0时等于1 2 ,其他情况下均为1,而x,u = 0,1,2,…，m – 1 ; y,v = 0,1,2,…，n – 1.
3 多核系统设计环境与系统软硬件的设计 本文所采用的软件开发环境是xilinx 公司旗下的ise 10.1开发套件，硬件开发平台采用的是xilinx 的xup virtex-2 pro[8-9]开发板，而ise 10.1开发套件嵌入了edk 开发包（其集成了xilinx platform studio,softwaredevelopment,库文件生成器，编译工具等开发模块），这样就大大方便了软硬件的开发.
3.1 利用xps向导进行多核硬件系统设计 打开xps 软件后，首先利用base system builder向导建立一个单核系统，在此基础上通过添加新的micro-blaze 处理器软核以及必要的内存块.数据指令控制器和相应的外围设备来完成多核系统的创建.有关基于bram的共享内存机制已经简要的介绍过，这里不再重复.整个系统的框架如图2所示。
硬件系统采用的总线机制为plb总线，所有的mi-croblaze均挂在这两条总线上，并且以microblaze0作为主处理器，其他用作从处理器.
设计中plb总线的从设备主要是xps-uartlite,它作为系统的主要验证手段，通过串口打印可以在pc机终端里输出核间通信信息.lmb 总线则用于连接片上bram 和mb 的各个lmb 接口，实现了d/i lmb 端口与启动内存块.数据/指令控制器的互连.
plb 桥的作用是使得所有的处理器可以共享外围设备，如串口rs 232等.
3.2 利用edk套件进行多核软件开发 在软件开发过程中，一方面除了需要注意重要的宏定义以及数据结构的设计外，如在rgb2ycrcb处理中，为了在后续的代码中对内存进行操作，需要对这些内存地址进行预先的宏定义以及设计有关bmp图片信息头的数据结构和信息获取函数；另一方面也要注意算法的设计.编译与部署.具体算法的核心部分设计如下所述.
rgb2ycrcb的核心算法如下：
4 硬件实现 4.1 测试所搭建的硬件系统的步骤 （1）点击hardware 下的generate bitstream 按钮，生成配置fpga所需要的比特流文件；
（2）将pc 机与virtex-2 pro 开发板正确连接，并且给开发板上电；
（3）打开超级终端或是putty工具，设置正确的参数（如波特率.奇偶校验位以及流控制位等），确保和创建硬件系统时的设置一致；
（4）点击device configuration 下的download bit-stream进行比特流的下载配置；
（5）观察终端中的打印信息，判断是否和tes-tapp_memory.c文件中的一致.
4.2.1 图像算法在单核上的执行流程
（1）算法按照宏块顺序往下处理，先处理第一个宏块；
（2）对第一个宏块的前4个y分量进行rgb2ycrcb处理，完成后对ycrcb结果做dct（ymatrix,color）变换；
（3）对第一个宏块的cr 分量进行rgb2ycrcb 处理，完成后对ycrcb结果做dct（crmatrix,color）变换；
（4）对第一个宏块的cb 分量进行rgb2ycrcb 处理，完成后对ycrcb结果做dct（cbmatrix,color）变换；
（5）返回到步骤（1）进行第二个宏块的处理.
基于单核架构的处理流程是一个串行执行过程，体现在宏块于宏块之间是处于一种阻塞等待性的机制，换言之，只要宏块0的任何一个分量（y/cr/cb）没有独立处理且最终完全处理完毕后处理器都必须等待，而无法转向宏块1进行后续的处理.
4.2.2 下载比特流，配置fpga
（1）正确连接好virtex-2 pro 开发板，并给板子上电；
（2）打开一个超级终端或是putty工具，注意设置匹配的波特率.奇偶校验位以及流控制位；
（3）对于需要运行的应用程序，右单击选中markto initialize brams以初始化内存块；
（4）在device configuration 中点击download bit-stream下载比特流，配置fpga;
（5）修改shm.c文件中trycount值（该值为一幅8 kb图片进行循环处理的次数），然后重新编译.下载并配置fpga,统计每次处理完成的时间，并填写表1.
4.3 多核执行图像处理算法以及时间测量 4.3.1 图像算法在多核上的执行流程
（1）算法仍以宏块处理为单位，mb0先对第一个宏块进行处理；
（2）mb0对第一个宏块的4个y分量进行rgb2y变换，并将中间结果写入内存，作为mb1 进行dct（yma-trix,color）的输入数据；
（3）mb1读取颜色转换后的y 分量，对其进行dct（ymatrix,color）；
（4）mb0在将y分量写入共享之后，立即开始cr分量的rgb2cr变换，并将cr结果写入共享作为mb1进行dct（crmatrix,color）变换的输入数据；
（5）mb1读取颜色转换后的cr 分量，对其进行dct（crmatrix,color）；
（6）mb0 在将cr 分量写入共享之后，立即开始cb分量的rgb2cb 变换，并将cb 结果写入共享作为mb1进行dct（cbmatrix,color）变换的输入数据；
（7）mb1读取颜色转换后的cb 分量，对其进行dct（cbmatrix,color）；
（8）mb0完成一个宏块的处理之后不等待，即可返回步骤状态进行第二个宏块的处理，而mb1 则以mb0的处理过程循环往复.
基于双核架构的处理流程也是一个并行执行过程，体现在当mb0做好rgb2ycrcb（所有分量的颜色变换）之后，只需将处理的中间结果写入内存作为mb1 进行dct 变换的出入数据，而无需等待mb1 上dct 处理进程的完成，在mb1 进行上一个宏块的dct 变换处理过程中，mb0 已经转向宏块1 进行下一轮的各个分量的rgb2ycrcb处理.
4.3.2 下载下载比特流，配置fpga
所有步骤同单核配置过程.运行后同样要改写shm.c文件中的trycount值，记录时间，并填写表2.
通过表1,表2的对比，很容易发现，多核体系在时间上有明显的优势.
4.4 单核/多核体系占用资源对比 通过编译，在生成的编译报告中将两者所用的资源统计如表3所示.从表中可以看到在硬件资源的占用上，双核体系的确消耗的资源较多.
5 结语 多核系统由于采用了并行环路体系并摒弃了单核阻塞状态下的等待时间，从而能够达到处理时间上的优化，但是另一方面其对片上资源的消耗也会随着从处理器的增加与日俱增，这也印证了“速度与面积”不能兼得这条原则，所以在工程中一定要做好权衡，权衡算法性能优化和硬件资源占用率的取舍，最好能够折中.
当然在处理如图像处理.信号处理类的一些复杂算法时，多核机制还是相当具有可取性的，毕竟在实际工程中，往往不介意以空间资源消耗来获取时间上的优化处理。
沃达丰新式无人机追踪和控制技术用以管制无人机
云办公成趋势，华为云桌面全方位保障企业安全
如何在OpticStudio中建模菲涅尔透镜
Xilinx开发板Si570频率配置步骤详解
干货满满 戴尔游匣G15是618最值得选的电竞神器！
一种基于Mailbox核间机制的多核处理系统
随着公众对VR的兴趣持续稳定增长 索尼将会推出新一代PSVR头显
腕带型人体传感器 拥有广阔应用前景
智原科技采用Cadence数字实现与验证解决方案，提升最大型SoC设计的性能
路由器使用需要注意哪些问题？
开关电源中MOS管栅极上拉电阻和下拉电阻的作用
应用材料公司展现加速创新、驱动长期盈利增长的独特能力
51单片机、AVR单片机和PIC单片机的IO口操作
可上下限温度的感温控制器电路图说明
压力变送器怎样选型
共享单车行业的兴衰史 或成互联网流量红利最后“风口”
光伏行业最新新闻：晶澳太阳告别纳斯达克借壳回A 国务院推动光伏+发展
到底什么是物联网
气体流量计工作原理_气体流量计应用
华为Mate S iPhone 6S 谁更靓?