基于FPGA多路机载冗余图像处理系统的设计方案
摘要：本文以fpga作为核心处理器，提出了一种基于fpga多路机载冗余图像处理系统的设计方案，实现了对多路dvi视频冗余信号的解码、编码、实时处理以及输出显示，并且信号通道增加冗余设计，因而加强了系统的稳定性和可靠性。方案中的电路设计简洁，具有较强的灵活性和扩展性。通过实际测试结果表明，系统能够流畅地对1 600×1 200分辨率，60 hz刷新率，24位真彩色的高清视频进行实时处理，其系统可靠、稳定，实用性强。
0 引言
dvi（数字视频接口）是当前数字显示领域研究和应用的热点，面向dvi输出的视频处理技术不仅解决了显示器高分辨率、高刷新率等问题，而且提高了稳定性和显示性能，并进一步降低了平板显示器的成本。因此，面向dvi输出的视频控制器的研究具有十分重要的现实意义。
根据dvi标准，一条tmds通道可以达到165 mhz的工作频率和10 b 接口，也就是可以提供1.65 gb/s的带宽，这足以应付1 920×1 080@60 hz（23寸lcd）的显示要求。另外，为了扩充兼容性，dvi还可以使用第二条tmds通道，这样其带宽将会超过3 gb/s.也正是由于其较高的带宽优势，目前dvi已经成为了it业界最具前途的规范。
dvi具有支持高带宽数据传输和高清晰图像显示的优点。模拟视频的显示是通过数字到模拟到数字的转化实现的，而dvi接口无需进行这些转换，直接数字到数字，避免了信号转换而带来的图像质量损失，使图像的清晰度和细节表现力都得到了大大提高。基于以上优点，dvi接口被广泛应用于航空、航天等领域。
1 总体方案设计
1.1 总体方案原理框图
用户输入4路dvi信号，然后根据输入信号特性进行选择，将视频信号实时显示在液晶屏上。另外，将实时显示的图像回送给记录仪，此时记录仪实时记录当前的信息以及故障信息，确保在全任务阶段图像显示的正确性。根据设计要求，选择altera公司生产的 fpga 芯片ep2s30f1020i4 为主控芯片，配置芯片选用epcs16si16n.利用fpga内部丰富的逻辑资源和强大的ip核，配以相应的外部电路，构建出一个灵活、简洁、可靠的机载视频图形处理系统的嵌入式硬件模块。其总体方案原理框图如图1所示。
1.2 dvi编解码设计
在很多设计中，设计人员为了方便，简化电路，可能不会增加均衡器，对输入信号不进行处理。从而在后期的产品试验过程中，很容易就会出现信号显示质量差，兼容性差的缺陷，导致整个产品重新设计或整改，延缓了产品交货进度。根据用户输入的视频特性，本文采用均衡器+dvi编、解码器的方式，对输入、输出信号进行转换处理。这样处理有如下优点：传输距离较长，信号干扰小；外围电路简单，设计灵活、可靠；系统速度快、灵活性强、功能可扩展，系统兼容性好。
在本系统中，选用ti 公司生产的均衡器ds16ev5110，该器件具有功耗低、体积小、外围电路简单等特点。另外，dvi编解码芯片选用ti公司生产的芯片tfp401和 tfp410，同样具有功耗低、体积小、外围电路简单等特点。该器件控制引脚直接连接至fpga，可以很好控制这些器件的工作状态，以便减小功耗。并且，整个fpga内部逻辑控制简单、可靠。
在硬件电路设计中，还需要考虑高频特性对信号的影响。整个系统显示的分辨率为1 600×1 200@60 hz，信号位为真彩色24 b，采用奇偶方式，参考时钟162 mhz，dvi编码时钟为10×162 mhz=1.62 ghz，其编码码元理论宽度仅为t = 1 1.62 hz=0.62 ns，则码元的最大变化时间应在0.62 4 = 0.16 ns之内。考虑数据传输的可靠性和稳定性，采用双像素传输，可以大大降低信号采样频率。此外，还要考虑到pcb布局地线的完整性和供电去耦特性。其编解码芯片混合信号的供电参考电路如图2所示。
2 sdram 视频缓存设计
2.1 sdram选择依据
整个系统显示的分辨率为1600×1200@60 hz，信号位为真彩色24b，则一帧图像所需需要存储的容量c = 1 600×1 200×24=46 080 000 b≈47 mb;考虑到sdram乒乓操作和容量等问题，选用micro公司生产的容量为128m的mt48lc4m32b2tg-6器件，速度等级6，时钟频率达到166 mhz.该器件具有32根数据线和12根地址线，还有一些控制线。通过在fpga内部搭建逻辑控制单元，可以很好的控制sdram 视频信号的翻转等操作。
2.2 fpga内部原理逻辑框图
fpga内部原理逻辑框图如图3所示。
2.2.1 fpga内部逻辑功能介绍
（1）信号输入模块
这部分的主要功能是接收外部输入的视频信号，增强输入信号的驱动能力，为信号的后续处理做准备。其用verilog 语言实现的逻辑代码如下所示：
（2）数据流选择模块
根据需要选择两路输入视频信号中的一路进行输出。
（3）sdram乒乓操作和控制模块
由于sdram 乒乓操作具有节省缓冲区空间、流水线式算法以及低速模块处理高速数据流的特点。因此，本设计采用乒乓操作sdram.
sdram 作为整个图像处理系统的缓存，起着至关重要的作用。它将外部输入的图像按帧存入sdram中，然后按帧将图像数据送到外部继续处理。fpga的控制逻辑所需要完成的功能有：接收来自外部的图像数据，并进行缓冲和数据重组，产生符合sdram控制器位宽的数据信号；产生对sdram 的读、写命令和地址，并将它们寄存在fifo中，随时供sdram控制器提取。因此，系统需要一个地址产生逻辑；对sdram进行直接控制，将用户产生的地址命令进行解析，产生读/写、刷新等一系列操作，对sdram 发出的各种命令要符合特定的时序要求。在上电的时候还必须完成对sdram的初始化工作；建立用户与sdram 的数据通道，在sdram和用户接口之间传递需要写入或者读出的数据，并且调整对应读/写操作的dqs信号时序，使其满足sdram的要求；缓存从 sdram中读出的数据，由于直接读出的速度非常高，直接处理会对后端产生很大的压力。因此，需要进行缓存之后才送到后续处理。
（4）输出时序生成模块
这部分模块的主要功能是对sdram 进行操作，生成需要的视频时序信号以及生成驱动液晶屏的视频信号。
2.2.2 sdram操作
为了满足前后端数据流匹配，并实时发送，这里采用了sdram读写交替进行的读写方式。
sdram 读到写时序图如图4所示。写入和读出操作的发起是由行激活命令开始的，命令为10011，发起的同时sdram_addr送入列地址，发起写入读出命令时送入行地址。写入命令与数据同步，读出命令在发出后潜伏期时间后送出数据到端口，sdram_data 为sdram 的输入输出数据端口。预冲方式采用了自动预冲，即在发起读写命令时将地址位a10置高就可以在读写操作后sdram内部自动进行预冲操作，不需要发出额外命令，自动预冲占用4个时钟周期。
3 仿真分析以及测试结果
读写操作交替进行仿真图如图5所示。图5中包含了两个写入操作，一个读取操作。
sdram在完成读写操作的同时还需要完成每64 ms全行（4 096行）自动刷新操作，为所有行进行充电，不然就会导致sdram内的数据丢失。自动刷新时序图如图6所示。
这里将自动刷新操作穿插在读写当中，经计算为15 μs 需进行一次自动刷新操作，通过一个计数器每15 μs 发起一次自动刷新请求，程序检测到自动刷新操作请求后进行自动刷新操作然后再进行读写操作，自动刷新操作占用10个时钟周期。图7为写和读之间穿插了一次自动刷新操作，操作命令为10001.
测试结果证明，该缓存系统实现了预定功能，可以对视频数据进行更方便的操作与管理。sdram操作前与操作后图形效果对比如图8所示。
4 结语
本文介绍了某机载实时冗余视频图形处理系统的设计方案，该系统利用fpga设计结构化状态机实现对 sdram的控制，完成了对数据的缓存设计，实现了对多路dvi视频冗余信号的解码、编码、实时处理以及输出显示。该系统电路设计简洁，具有速度快、可靠性高、灵活性强和功能可扩展等优点。并且，由于信号通道增加冗余设计，因而加强了系统显示的稳定性和可靠性。本系统已经投入使用，其性能可靠、稳定，实用性强。该方法值得推广。（作者：赵小珍，刘波，朱标，陈文明）
怎么分辨机器人种类 本文告诉你答案
我们应该怎样看待人工智能产业创新
运营商年底冲业绩的可能操作将会有哪些
厦门正加快推进集成电路产业发展 并推动厦门大学国家集成电路产教融合创新平台建设
飞傲FW3真无线耳机参数介绍
基于FPGA多路机载冗余图像处理系统的设计方案
Redmi K40系列后置摄像头规格参数一览
基于莱迪思Nexus平台构建助力未来高性能数据中心发展
微型空气监测站如何提升城市环境质量
三星加大投资提升HBM产能，与SK海力士竞争加剧
数字经济成为推动河北转型升级的巨大助力
中国制造业目前已在智能制造方面取得显著成效，进入高速成长期
staking已成为区块链发展史上的重大变革
led循环灯电路设计及制作教程 基于4017和4069
如何设计SD/TF卡ESD静电放电防护电路图？
理想双工器和实际双工器的区别
海思HI3531上的音频编解码器NVP6114
仙工智能全感知物流系统解决方案 让智造更简单
一文看懂电池管理系统BMS
系统架构的未来会有什么变化
0 引言
dvi（数字视频接口）是当前数字显示领域研究和应用的热点，面向dvi输出的视频处理技术不仅解决了显示器高分辨率、高刷新率等问题，而且提高了稳定性和显示性能，并进一步降低了平板显示器的成本。因此，面向dvi输出的视频控制器的研究具有十分重要的现实意义。
根据dvi标准，一条tmds通道可以达到165 mhz的工作频率和10 b 接口，也就是可以提供1.65 gb/s的带宽，这足以应付1 920×1 080@60 hz（23寸lcd）的显示要求。另外，为了扩充兼容性，dvi还可以使用第二条tmds通道，这样其带宽将会超过3 gb/s.也正是由于其较高的带宽优势，目前dvi已经成为了it业界最具前途的规范。
dvi具有支持高带宽数据传输和高清晰图像显示的优点。模拟视频的显示是通过数字到模拟到数字的转化实现的，而dvi接口无需进行这些转换，直接数字到数字，避免了信号转换而带来的图像质量损失，使图像的清晰度和细节表现力都得到了大大提高。基于以上优点，dvi接口被广泛应用于航空、航天等领域。
1 总体方案设计
1.1 总体方案原理框图
用户输入4路dvi信号，然后根据输入信号特性进行选择，将视频信号实时显示在液晶屏上。另外，将实时显示的图像回送给记录仪，此时记录仪实时记录当前的信息以及故障信息，确保在全任务阶段图像显示的正确性。根据设计要求，选择altera公司生产的 fpga 芯片ep2s30f1020i4 为主控芯片，配置芯片选用epcs16si16n.利用fpga内部丰富的逻辑资源和强大的ip核，配以相应的外部电路，构建出一个灵活、简洁、可靠的机载视频图形处理系统的嵌入式硬件模块。其总体方案原理框图如图1所示。
1.2 dvi编解码设计
在很多设计中，设计人员为了方便，简化电路，可能不会增加均衡器，对输入信号不进行处理。从而在后期的产品试验过程中，很容易就会出现信号显示质量差，兼容性差的缺陷，导致整个产品重新设计或整改，延缓了产品交货进度。根据用户输入的视频特性，本文采用均衡器+dvi编、解码器的方式，对输入、输出信号进行转换处理。这样处理有如下优点：传输距离较长，信号干扰小；外围电路简单，设计灵活、可靠；系统速度快、灵活性强、功能可扩展，系统兼容性好。
在本系统中，选用ti 公司生产的均衡器ds16ev5110，该器件具有功耗低、体积小、外围电路简单等特点。另外，dvi编解码芯片选用ti公司生产的芯片tfp401和 tfp410，同样具有功耗低、体积小、外围电路简单等特点。该器件控制引脚直接连接至fpga，可以很好控制这些器件的工作状态，以便减小功耗。并且，整个fpga内部逻辑控制简单、可靠。
在硬件电路设计中，还需要考虑高频特性对信号的影响。整个系统显示的分辨率为1 600×1 200@60 hz，信号位为真彩色24 b，采用奇偶方式，参考时钟162 mhz，dvi编码时钟为10×162 mhz=1.62 ghz，其编码码元理论宽度仅为t = 1 1.62 hz=0.62 ns，则码元的最大变化时间应在0.62 4 = 0.16 ns之内。考虑数据传输的可靠性和稳定性，采用双像素传输，可以大大降低信号采样频率。此外，还要考虑到pcb布局地线的完整性和供电去耦特性。其编解码芯片混合信号的供电参考电路如图2所示。
2 sdram 视频缓存设计
2.1 sdram选择依据
整个系统显示的分辨率为1600×1200@60 hz，信号位为真彩色24b，则一帧图像所需需要存储的容量c = 1 600×1 200×24=46 080 000 b≈47 mb;考虑到sdram乒乓操作和容量等问题，选用micro公司生产的容量为128m的mt48lc4m32b2tg-6器件，速度等级6，时钟频率达到166 mhz.该器件具有32根数据线和12根地址线，还有一些控制线。通过在fpga内部搭建逻辑控制单元，可以很好的控制sdram 视频信号的翻转等操作。
2.2 fpga内部原理逻辑框图
fpga内部原理逻辑框图如图3所示。
2.2.1 fpga内部逻辑功能介绍
（1）信号输入模块
这部分的主要功能是接收外部输入的视频信号，增强输入信号的驱动能力，为信号的后续处理做准备。其用verilog 语言实现的逻辑代码如下所示：
（2）数据流选择模块
根据需要选择两路输入视频信号中的一路进行输出。
（3）sdram乒乓操作和控制模块
由于sdram 乒乓操作具有节省缓冲区空间、流水线式算法以及低速模块处理高速数据流的特点。因此，本设计采用乒乓操作sdram.
sdram 作为整个图像处理系统的缓存，起着至关重要的作用。它将外部输入的图像按帧存入sdram中，然后按帧将图像数据送到外部继续处理。fpga的控制逻辑所需要完成的功能有：接收来自外部的图像数据，并进行缓冲和数据重组，产生符合sdram控制器位宽的数据信号；产生对sdram 的读、写命令和地址，并将它们寄存在fifo中，随时供sdram控制器提取。因此，系统需要一个地址产生逻辑；对sdram进行直接控制，将用户产生的地址命令进行解析，产生读/写、刷新等一系列操作，对sdram 发出的各种命令要符合特定的时序要求。在上电的时候还必须完成对sdram的初始化工作；建立用户与sdram 的数据通道，在sdram和用户接口之间传递需要写入或者读出的数据，并且调整对应读/写操作的dqs信号时序，使其满足sdram的要求；缓存从 sdram中读出的数据，由于直接读出的速度非常高，直接处理会对后端产生很大的压力。因此，需要进行缓存之后才送到后续处理。
（4）输出时序生成模块
这部分模块的主要功能是对sdram 进行操作，生成需要的视频时序信号以及生成驱动液晶屏的视频信号。
2.2.2 sdram操作
为了满足前后端数据流匹配，并实时发送，这里采用了sdram读写交替进行的读写方式。
sdram 读到写时序图如图4所示。写入和读出操作的发起是由行激活命令开始的，命令为10011，发起的同时sdram_addr送入列地址，发起写入读出命令时送入行地址。写入命令与数据同步，读出命令在发出后潜伏期时间后送出数据到端口，sdram_data 为sdram 的输入输出数据端口。预冲方式采用了自动预冲，即在发起读写命令时将地址位a10置高就可以在读写操作后sdram内部自动进行预冲操作，不需要发出额外命令，自动预冲占用4个时钟周期。
3 仿真分析以及测试结果
读写操作交替进行仿真图如图5所示。图5中包含了两个写入操作，一个读取操作。
sdram在完成读写操作的同时还需要完成每64 ms全行（4 096行）自动刷新操作，为所有行进行充电，不然就会导致sdram内的数据丢失。自动刷新时序图如图6所示。
这里将自动刷新操作穿插在读写当中，经计算为15 μs 需进行一次自动刷新操作，通过一个计数器每15 μs 发起一次自动刷新请求，程序检测到自动刷新操作请求后进行自动刷新操作然后再进行读写操作，自动刷新操作占用10个时钟周期。图7为写和读之间穿插了一次自动刷新操作，操作命令为10001.
测试结果证明，该缓存系统实现了预定功能，可以对视频数据进行更方便的操作与管理。sdram操作前与操作后图形效果对比如图8所示。
4 结语
本文介绍了某机载实时冗余视频图形处理系统的设计方案，该系统利用fpga设计结构化状态机实现对 sdram的控制，完成了对数据的缓存设计，实现了对多路dvi视频冗余信号的解码、编码、实时处理以及输出显示。该系统电路设计简洁，具有速度快、可靠性高、灵活性强和功能可扩展等优点。并且，由于信号通道增加冗余设计，因而加强了系统显示的稳定性和可靠性。本系统已经投入使用，其性能可靠、稳定，实用性强。该方法值得推广。（作者：赵小珍，刘波，朱标，陈文明）
怎么分辨机器人种类 本文告诉你答案
我们应该怎样看待人工智能产业创新
运营商年底冲业绩的可能操作将会有哪些
厦门正加快推进集成电路产业发展 并推动厦门大学国家集成电路产教融合创新平台建设
飞傲FW3真无线耳机参数介绍
基于FPGA多路机载冗余图像处理系统的设计方案
Redmi K40系列后置摄像头规格参数一览
基于莱迪思Nexus平台构建助力未来高性能数据中心发展
微型空气监测站如何提升城市环境质量
三星加大投资提升HBM产能，与SK海力士竞争加剧
数字经济成为推动河北转型升级的巨大助力
中国制造业目前已在智能制造方面取得显著成效，进入高速成长期
staking已成为区块链发展史上的重大变革
led循环灯电路设计及制作教程 基于4017和4069
如何设计SD/TF卡ESD静电放电防护电路图？
理想双工器和实际双工器的区别
海思HI3531上的音频编解码器NVP6114
仙工智能全感知物流系统解决方案 让智造更简单
一文看懂电池管理系统BMS
系统架构的未来会有什么变化