基于FPGA的LCoS驱动和图像处理系统设计
基于fpga的显示系统有以下优势：第一，lcos尺寸小，便于实现微投影，利用可灵活编程的fpga器件作为驱动控制器，这样就可以将其做成像普通投影仪一样的微型投影设备，使计算全息三维显示摆脱了计算机和复杂光路的束缚，具有了更高的灵活性，为其走出实验室提供了条件。第二，因为在传统空间光调制器上得到的图像里含有物波和参考光的复共轭像，形成了噪声，在fpga上可以实现图像滤波去噪，使得到的图像更清晰。第三，fpga是基于可编程逻辑单元的器件，当经过综合、布局布线、时钟约束的代码烧录到fpga器件后，fpga就将算法代码硬件化了，可以作为专用芯片工作，其内部信号延时完全是硬件级传输延时。在处理数据搬移和复杂的数学运算以及一些循环操作时，例如图像的fft变换，fpga硬件运算要比软件运算快得多，即利用fpga器件实现对软件算法的硬件加速。
基于以上原因，本文设计了基于fpga的lcos驱动代码及图像的fft变换系统，为计算全息三维显示图像处理和显示提供了硬件平台。
1 系统设计
1.1 系统模块框图：
该系统采用cycloneⅲep3c5e144c8，该芯片有5 136个le，95个用户i/o，2个pll，以及46个嵌入式乘法器和423 936 b的内部逻辑寄存器。以它丰富的资源，完全可以作为lcos的驱动控制器件。显示屏采用himax的反射式lcos屏hx7308，其分辨率为1 024×768，可以支持256级灰度显示，具有内置的行场驱动电路，在外部输入时钟的上升沿和下降沿分别接收8b×4dots图像数据，这保证了场频可高达360 hz。
系统的整体框图如图1所示。
1.2 pll及系统复位模块
采用altera的锁相环ip核，外部输入时钟为20 mhz，经倍频后得到其他各模块的驱动时钟，以及lcos的驱动时钟信号。为防止系统异步复位时寄存器出现亚稳态，设计了pll的前级和后级d触发器。因为锁相环的locked引脚在锁相环稳定输出后才会跳变为高电平，所以为保证其他模块得到稳定的时钟信号，将locked引脚和外部输入复位信号rst_n相与后作为整个系统的复位信号。
1.3 单口rom模块
利用fpga内部的m9k存储器资源实现的单口rom作为源图像的数据存储器。将分辨率为176×144(qcif)的256阶灰度位图图像初始化到单口rom里，所需数据深度为25 344 b。当异步fifo没写满时，单口rom将按图像存储地址依次输出图像数据给fft核做快速傅里叶变换。经过处理的图像数据暂存到fifo)里，等待行场时序控制器模块取用。
1.4 异步fifo模块
按其数据地址最高2位分为4个区间，读/写指针分别对某一区间操作，当读/写指针相等时通过译码器产生fifo已读空或者已写满标志信号。为避免地址信号变化时出现冒险竞争现象，写地址和读地址指针都采用格雷码编码。在读空比较子模块和写满比较子模块里加入了fi-fo“将空”和“将满”检验机制，有效地保证了fifo正确无误的工作。在写时钟wrclk的上升沿，异步fifo每个地址对应的存储单元里被写入8bits数据，在读时钟rdclk的上升沿，fifo四块连续地址上的32bits数据输出，即读fifo的速率相当于写fifo速率的4倍速。
1.5 i2c状态机模块
没有满足i2c配置条件时，状态机处于空闲状态，当满足i2c配置条件时，状态机在状态标志位的控制下依次输出配置地址和配置数据。当数据配置结束时，状态机产生停止信号，并拉高输出引脚iic_config，通知行场时序控制器模块开始工作，这样保证了lcos屏能在正确配置下工作。状态机工作原理如图2所示。
1.6 行场时序控制器模块
内设水平计数器hcnt和垂直计数器vcnt。由于显示屏每个时钟周期锁存8个像素值，所以显示1 024个像素值所需行周期为128个tclk(行时钟周期)。当hcnt计数器值为hbp时表示行有效显示区域开始，hcnt计数器值为hbp+128时表示行有效显示区域结束，hent计数器值为hsyn-ccycle时，完成一行显示，vcnt计数器加1。当vcnt计数器值为vbp时，垂直有效显示区域开始，当vcnt计数器值为vbp+768时，垂直有效显示区域结束，当vcnt计数器值为vsync cycle时，完成一帧图像显示。行场时序关系如图3所示。
1.7 fft模块
fftv 9.1 ip核采用cooley-tukey基-2 dif算法，其fft变换原始公式为：
因为采用了数据流模式，经过变换的数据可以连续输出，即输出数据不会因为图像数据的输入而停止数据输出，同时输入数据也不会因为处理后的数据正在输出而停止继续输入，保证了数据转换和传输的连续性，提高了数据处理的速度和效率。因为fft通过异步fifo向屏幕输出数据，而fifo的读数据是写数据的4倍速，假如读时钟和写时钟都为100 mhz，那么有可能会在某一行里出现fifo被取空，而无法向屏幕输出有效数据的情况。为保证fifo向屏幕输出图像数据的连续性，就要充分利用vbp，vfp，hbp和hfp的时间，在每一行的开始，如果fifo没满，那么启动fft进行数据转换。若图像的分辨率为m×n并且在vbp期间fifo已被写满，则fifo，fft核、行场周期以及图像分辨率间关系的计算公式如下：
式中：deepth是异步fifo的数据深度，单位为b;thsync cycle是行周期;tclk是异步fifo，fft核、行场时序控制器模块的驱动时钟周期。当△>o时，系统会连续实时地处理图像;当△0。
2 实验仿真结果和测量结果分析
图4是采用modelsim 6.5b进行功能仿真的结果。利用quartusⅱv9.1自带的timequest timing analyzer进行时序约束后，在实验板上的场信号测量结果如图5所示，场扫描频率已达到368 hz，经测量其他引脚输出信号也均满足时序要求。由于fpga器件资源限制，对图像做了256点fft变换，经实验验证，该设计能够实现图像的实时处理，代码达到了预期设计效果。
3 结语
采用himax的lcos屏hx7308btjfa作为显示器件，其尺寸为14.43mm×10.69mm，大小可跟1枚1元硬币相比拟，很容易实现三维投影微显示。因veriloghdl有很强的可移植性，便于以后对代码的升级和维护。fpga内部资源毕竟有限，文中叙述可知，若显示分辨率较大的图像，光靠内部资源实现异步fifo是不可能的，所以在此提出两种方案：第一，换一片性能较高的芯片，满足写fifo速率等于读fifo速率的要求，这样就能达到读/写数据的动态平衡，保证了图像的连续显示;第二，采用外部存储器sdram存储源图像和fft处理后的数据，采用ddrii技术读取数据，使读/写fifo的速率匹配。受fpga芯片资源限制，该设计采用分辨率为176×144的图像进行了系统功能验证，尚未实现图像滤波以及fft逆变换，未来可将代码移植在高端的fpga芯片上继续开发数据处理功能。
电鱼机操作使用方法
华为Mate60系列引发抢购热潮
嵌入式开发中，C语言位结构体用途详解
移远通信与麦思动力达成战略合作，携手打造E-bike全系统解决方案
小米与诺基亚“搞机”，华为就和肯德基联手！
基于FPGA的LCoS驱动和图像处理系统设计
区块链技术在广告科技行业发展还需解决五大障碍
曙光分布式存储软件架构实现ParaStor持续迭代升级
机器人和自动化对就业的影响
指纹锁如何设置指纹
360儿童手表8X评测 399元的售价绝对是有着极高的性价比
三星电子也携带诸多创新科技和产品亮相天翼智能生态博览会
AMD Vega、Fury X同频对比：这结果让人意想不到
工业数字化转型:生产线PLC、HMI、机器人等程序自动备份“黑科技”
金百泽荣获中国“专精特新”企业称号
存储百倍提升! IBM纳米技术1比特12原子
上海由人力密集型向人机交互型转变
要投资的赶紧“比特币现金”上线 一度大涨超200% 成市值第三高数字货币
3D ToF技术将引爆新一轮行业应用浪潮
乐视或将不再有乐视手机专业维修点,乐视用户们将何去何从？
基于以上原因，本文设计了基于fpga的lcos驱动代码及图像的fft变换系统，为计算全息三维显示图像处理和显示提供了硬件平台。
1 系统设计
1.1 系统模块框图：
该系统采用cycloneⅲep3c5e144c8，该芯片有5 136个le，95个用户i/o，2个pll，以及46个嵌入式乘法器和423 936 b的内部逻辑寄存器。以它丰富的资源，完全可以作为lcos的驱动控制器件。显示屏采用himax的反射式lcos屏hx7308，其分辨率为1 024×768，可以支持256级灰度显示，具有内置的行场驱动电路，在外部输入时钟的上升沿和下降沿分别接收8b×4dots图像数据，这保证了场频可高达360 hz。
系统的整体框图如图1所示。
1.2 pll及系统复位模块
采用altera的锁相环ip核，外部输入时钟为20 mhz，经倍频后得到其他各模块的驱动时钟，以及lcos的驱动时钟信号。为防止系统异步复位时寄存器出现亚稳态，设计了pll的前级和后级d触发器。因为锁相环的locked引脚在锁相环稳定输出后才会跳变为高电平，所以为保证其他模块得到稳定的时钟信号，将locked引脚和外部输入复位信号rst_n相与后作为整个系统的复位信号。
1.3 单口rom模块
利用fpga内部的m9k存储器资源实现的单口rom作为源图像的数据存储器。将分辨率为176×144(qcif)的256阶灰度位图图像初始化到单口rom里，所需数据深度为25 344 b。当异步fifo没写满时，单口rom将按图像存储地址依次输出图像数据给fft核做快速傅里叶变换。经过处理的图像数据暂存到fifo)里，等待行场时序控制器模块取用。
1.4 异步fifo模块
按其数据地址最高2位分为4个区间，读/写指针分别对某一区间操作，当读/写指针相等时通过译码器产生fifo已读空或者已写满标志信号。为避免地址信号变化时出现冒险竞争现象，写地址和读地址指针都采用格雷码编码。在读空比较子模块和写满比较子模块里加入了fi-fo“将空”和“将满”检验机制，有效地保证了fifo正确无误的工作。在写时钟wrclk的上升沿，异步fifo每个地址对应的存储单元里被写入8bits数据，在读时钟rdclk的上升沿，fifo四块连续地址上的32bits数据输出，即读fifo的速率相当于写fifo速率的4倍速。
1.5 i2c状态机模块
没有满足i2c配置条件时，状态机处于空闲状态，当满足i2c配置条件时，状态机在状态标志位的控制下依次输出配置地址和配置数据。当数据配置结束时，状态机产生停止信号，并拉高输出引脚iic_config，通知行场时序控制器模块开始工作，这样保证了lcos屏能在正确配置下工作。状态机工作原理如图2所示。
1.6 行场时序控制器模块
内设水平计数器hcnt和垂直计数器vcnt。由于显示屏每个时钟周期锁存8个像素值，所以显示1 024个像素值所需行周期为128个tclk(行时钟周期)。当hcnt计数器值为hbp时表示行有效显示区域开始，hcnt计数器值为hbp+128时表示行有效显示区域结束，hent计数器值为hsyn-ccycle时，完成一行显示，vcnt计数器加1。当vcnt计数器值为vbp时，垂直有效显示区域开始，当vcnt计数器值为vbp+768时，垂直有效显示区域结束，当vcnt计数器值为vsync cycle时，完成一帧图像显示。行场时序关系如图3所示。
1.7 fft模块
fftv 9.1 ip核采用cooley-tukey基-2 dif算法，其fft变换原始公式为：
因为采用了数据流模式，经过变换的数据可以连续输出，即输出数据不会因为图像数据的输入而停止数据输出，同时输入数据也不会因为处理后的数据正在输出而停止继续输入，保证了数据转换和传输的连续性，提高了数据处理的速度和效率。因为fft通过异步fifo向屏幕输出数据，而fifo的读数据是写数据的4倍速，假如读时钟和写时钟都为100 mhz，那么有可能会在某一行里出现fifo被取空，而无法向屏幕输出有效数据的情况。为保证fifo向屏幕输出图像数据的连续性，就要充分利用vbp，vfp，hbp和hfp的时间，在每一行的开始，如果fifo没满，那么启动fft进行数据转换。若图像的分辨率为m×n并且在vbp期间fifo已被写满，则fifo，fft核、行场周期以及图像分辨率间关系的计算公式如下：
式中：deepth是异步fifo的数据深度，单位为b;thsync cycle是行周期;tclk是异步fifo，fft核、行场时序控制器模块的驱动时钟周期。当△>o时，系统会连续实时地处理图像;当△0。
2 实验仿真结果和测量结果分析
图4是采用modelsim 6.5b进行功能仿真的结果。利用quartusⅱv9.1自带的timequest timing analyzer进行时序约束后，在实验板上的场信号测量结果如图5所示，场扫描频率已达到368 hz，经测量其他引脚输出信号也均满足时序要求。由于fpga器件资源限制，对图像做了256点fft变换，经实验验证，该设计能够实现图像的实时处理，代码达到了预期设计效果。
3 结语
采用himax的lcos屏hx7308btjfa作为显示器件，其尺寸为14.43mm×10.69mm，大小可跟1枚1元硬币相比拟，很容易实现三维投影微显示。因veriloghdl有很强的可移植性，便于以后对代码的升级和维护。fpga内部资源毕竟有限，文中叙述可知，若显示分辨率较大的图像，光靠内部资源实现异步fifo是不可能的，所以在此提出两种方案：第一，换一片性能较高的芯片，满足写fifo速率等于读fifo速率的要求，这样就能达到读/写数据的动态平衡，保证了图像的连续显示;第二，采用外部存储器sdram存储源图像和fft处理后的数据，采用ddrii技术读取数据，使读/写fifo的速率匹配。受fpga芯片资源限制，该设计采用分辨率为176×144的图像进行了系统功能验证，尚未实现图像滤波以及fft逆变换，未来可将代码移植在高端的fpga芯片上继续开发数据处理功能。
电鱼机操作使用方法
华为Mate60系列引发抢购热潮
嵌入式开发中，C语言位结构体用途详解
移远通信与麦思动力达成战略合作，携手打造E-bike全系统解决方案
小米与诺基亚“搞机”，华为就和肯德基联手！
基于FPGA的LCoS驱动和图像处理系统设计
区块链技术在广告科技行业发展还需解决五大障碍
曙光分布式存储软件架构实现ParaStor持续迭代升级
机器人和自动化对就业的影响
指纹锁如何设置指纹
360儿童手表8X评测 399元的售价绝对是有着极高的性价比
三星电子也携带诸多创新科技和产品亮相天翼智能生态博览会
AMD Vega、Fury X同频对比：这结果让人意想不到
工业数字化转型:生产线PLC、HMI、机器人等程序自动备份“黑科技”
金百泽荣获中国“专精特新”企业称号
存储百倍提升! IBM纳米技术1比特12原子
上海由人力密集型向人机交互型转变
要投资的赶紧“比特币现金”上线 一度大涨超200% 成市值第三高数字货币
3D ToF技术将引爆新一轮行业应用浪潮
乐视或将不再有乐视手机专业维修点,乐视用户们将何去何从？