基于AHB接口的高性能LCD控制器IP设计

基于ahb接口的高性能lcd控制器ip设计
本文将说明高性能lcd控制器ip的模块化设计概念(如图一)。ftlcdc200 通过sdram控制器跟soc内部总线通信,控制器把图像数据从sdram读到tft显示屏。cpu来控制整个系统的初始化与数据的流向,包括每个控制器内部的配置寄存器、更新sdram中帧缓存区的内容。通过传递辅助端口输出的数据流,这套系统还可以为电视相关的终端提供视频信号,这需要另外搭配tv 编码器与三通道视频dac才能实现与tv的连接。
ahb 接口模块的设计概念 ahb 接口可以分为两个部分:一个是ahb 从接口,另一个是ahb 主接口。ahb 从 接口连接ftlcd200和amba ahb总线,并且允许系统中的ahb主接口的读写访问,此时ahb只能进行ok的响应和字(word)位宽的传输。ahb 主接口可以把帧缓冲区中的图像数据取出后放入到lcd控制器的fifo中。ahb接口可以处理长度不确定的字符串,也能够在处理出错的时候发出主接口出错断言。当一个重试的应答收到后,第二次操作将开始被处理。 fifo控制器和fifo模块的设计概念 数据被ahb主接口从外都存储器读取后会被放入fifo。除了ycbcr420模式下,其他模式都只需要一个控制器/fifo。y、cb、cr需要有三个单独的通道,因为每一个会放于不同的存储单元。fifo为32-bit位宽,深度则是可配置的。fifo的输入端连接在ahb 主接口的输出端;fifo的输出端则被连接到了像素数据解包控制器。如果总线不能提供给像素流足够的带宽,那么一些图像就会出现失真现象。因此,fifo控制器会提供一个称为“欠运行中断”的信号,来通知微控制器解决总线阻塞的问题。
图1 ftlcdc200的模组化方块图
像素数据解包 存储在fifo中的数据都是32-bit,但可以按照不同的格式打包,如24位、16位、8位、4位、2位和1位,这取决于像素格式的设定。当处于ycbcr420 和ycbcr422模式,像素格式是预先设定的且不能修改。根据操作模式,像素数据可以被用来对调色板ram区进行寻址,或者构成初始的色彩值而被直接应用到lcd的面板上。下面的表格有一个例子来描述数据包的格式。flcd200 提供了1位, 2位, 4位, 8位, 16位, 和24位bpp(每像素比特数),并且支持以下几种格式:大端(也称为大尾)字节和大端像素、小端(也称为小尾)字节和大端像素、小端字节和小端像素。 数据模式 一、 原始的rgb模式 这种模式下有两个类型:16bpp和24bpp,每一种都适用于初始数据rgb模式。数据流不需要任何处理,但必须根据不同的lcd面板的分辨率进行排序。 二、 ycbcr422模式 该模式中只允许16bpp。 三、 ycbcr420模式 该模式中只允许8bpp。y,cb,cr每个分量都被放到单独的存储单元中。这三个图像帧缓冲区的基地址在寄存器中都可以单独配置。当ycbcr420数据从各自的fifo中被读出后,必须在行数据消失之前生成色度值。行缓冲器里面存储着以前的数据,经过垂直插值后,可以得到缺失的色度值。这样就可以把ycbcr420转换成ycbcr422,然后输出数据流,进行下一步的处理。 四、 rgb调色板模式 为了加强应用的灵活性,本控制器提供了“重新映射”的操作模式。该技术可以让我们能够在色彩的丰富度和存储器带宽两个选择之间进行切换。有四种类型可以选择:8、4、2、1bpp。调色板存储器里面存储着一个查找表,用来重新生成所需要的rgb各个分量。因为物理上它的容量为128x32位,因此调色板存储器最多可以保留256x16位的色彩值。从输入fifo而来的像素数据被用来对一个独立的调色板单元进行寻址。1位像素数据可以寻址到最前端的两个存储空间,2位的像素数据可以寻址最前端的4个存储空间,4位的可以寻到最前端的16个存储空间。8位的可以寻遍整个256个存储空间。在16位和24位的模式下调色板存储器不被使用,通过配置可以把它去除以减小硬件开销。
scalar模块的设计概念 图2为scalar 模块的方块图,以下就其各个子模块作介绍, 这里的设计特点在只是用了(1024+2048)x24大小的行缓冲区, 大幅减小了ip的面积。
图2 scalar 模块
一、 滤波器 这是个128抽头的滤波器,使用线性插值算法来对水平方向的像素数据进行第一步的缩小操作,系数可选:1/2,1/3,1/4……. ,1/128。 二、 1024x24 行缓冲区 该行缓冲区来存储被滤波器处理过的一行数据。 三、 1024x24 行缓冲区控制器 该控制器控制着缓冲区数据的访问。缓冲区中被读出的数据会反馈到输入端口,跟第二行的像素数据进行线性插值,也就是垂直插值的处理。 四、 2048x24 行缓冲区 这个行缓冲区是一个乒乓结构的存储器,它由两个1024x24位的单端口sram组成。因为我们放大的处理是基于双线性算法,所以垂直放大系数被限制在2,乒乓结构可以提供同时进行读/写操作的机制,使得我们能够把行缓冲区存储器的大小压缩到仅仅一行像素数据的规模。 五、 2048x24 行缓冲区控制器 该控制器提供必需的地址线和控制信号给乒乓结构的行缓冲区,以确保rgb像素数据能够同时正确的被写入和读出。除了这个基本的控制功能以外,它也提供了一个可靠的外部lcd控制器访问接口。 六、 垂直scalar滤波器 该垂直scalar滤波器是2抽头,它执行一个“加-乘”混合计算(y[n] = a * x[n] + (1-a) * x[n-1])。x[n]是当前行的像素数据,x[n-1]是上一行的像素数据,y[n]是滤波器的输出。a和(1-a)都是滤波器因子。由于r/g/b各数据是独立进行处理的,所以每一种色彩像素数据处理需要两个8x9位的乘法器和一个17位的加法器。 七、 垂直scalar系数产生器 该发生器分为放大系数产生器和缩小系数产生器。他们都会产生一个9位的系数,msb代表整数部分,其余的都是小数部分。这个系数为输入图像垂直分辨率和输出图像垂直分辨率的比值。 八、 scalar数据fifo 该数据fifo的存储深度为8,垂直缩放模块输入数据到fifo,水平缩放模块读出数据用来处理后续的水平像素数据。 九、 水平scalar滤波器 该滤波器也是2抽头,它执行一个“加-乘”混合计算(y[n] = a * x[n] + (1-a) * x[n-1]),x[n]是当前的像素数据,x[n-1]是上一个的像素数据,y[n]是滤波器的输出。a和(1-a)都是滤波器因子。由于r/g/b各数据是独立进行处理的,所以每一种色彩像素数据处理需要两个8x9位的乘法器和一个17位的加法器。 十、 水平scalar系数发生器 该发生器分为放大系数产生器和缩小系数产生器。他们都会产生一个9位的系数,msb代表整数部分,其余的都是小数部分。这个系数为输入图像水平分辨率和输出图像水平分辨率的比值。 scalar的up scaling阶段能够任意的定量在1x1 和 2x2之间,也就是它scale up功能可以达到如1.5x1.8等。scaling down分成两级,第一级可以按比例缩减1/2*1/2, 1/4*1/4, 1/8*1/8, 1/16*1/16, 1/32*1/32, 1/64*1/64或1/128*1/128;而第二级可以从1*1~1/2*1/2做任意比例的缩减动作,也就是第二级可以有小数点,不过最低只能到1/2*1/2。因此,可以由第一级+第二级来搭配产生所想要的缩减比例。 例如:1/2.5 * 1/4 => 第一级做1/2*1/2,然后第二级做4/5*1/2 就可以达到你所想要的scaling ratio。有关第二级scale down给个scal_ver_num /scal_hor_num的例子, 如果我们想要scale由 100x200 down to 90x160. scal_ver_num = [mod((ver_no_in+1)/ver_no_out)]x256/ver_no_out scal_hor_num = [mod((hor_no_in+1)/hor_no_out)]x256/hor_no_out scal_ver_num = mod[ (100) / 90 ] x 256 / 90 = 28.44 --> 28 scal_hor_num = mod[ (200) / 160 ] x 256 / 90 = 113.77 --> 114 中断控制器 该控制器有四个内部中断源,ahb master出错中断、fifo欠载中断、垂直同步中断和帧基地址改变中断,这几个中断信号经过组合形成一个全局中断信号,只要这四个中断源中的任意一个出现中断,全局中断信号就会出现断言。这四个中断源可以通过寄存器的修改来开启和关闭 stn面板控制信号 以下是lcd控制器和stn面板的接口信号 * lc_data[7:0]:lcd数据总线,发送给stn面板上面需要被显示的像素数据。根据stn所选择的模式,数据直接加载到该总线上 * lc_vs(flm):lcd的帧同步信号,表明了一个新的帧的开始。在一帧的最后一个行脉冲结束后,flm 变为有效并一直保持到下一行脉冲,flm才撤销断言,并保持无效直到下一帧。flm是高电平有效还是低电平有效是可以通过软件配置的。 * lc_hs(lp):lcd的行同步信号,被用来锁存stn面板上的行数据。lp是高电平有效还是低电平有效是可以通过软件配置的。 * lc_de(acd):lcd数据使能信号。该信号可以配置成每一帧切换或者每隔n行切换。 * lc_pclk:lcd输出的移位时钟,是让stn面板用来同步lcd输出的数据。lc_pclk是高电平有效还是低电平有效是可以通过软件配置的。 stn面板的接口时序 lcd控制器通过lcd的数据总线持续的传送像素数据到lcd面板。总线的时序由lc_pclk、lc_hs、lc_vs组成。lc_pclk信号把像素数据打入到lcd面板内部的移位寄存器。lc_hs指示每一行的开始,lc_vs则指示帧的第一行的开始。本lcd控制器可以支持绝大部分的单色lcd屏。图3解释了1位、2位、4位、8位lcd数据总线的接口时序。lc_hs信号再加上lc_vs信号表明了当前帧第一行的结束。在真实显示行中插入哑元行可以调节帧率。用户可以自己配置哑元行的数量。
图3 stn在8位, 4位, 2位以及1位数据宽度的接口时序。
lcd屏的宽度(pl)和高度(lf)寄存器里面定义了lcd面板的尺寸。lcd控制器将会以“lcd屏开始地址寄存器”(lcdimage0framebase)中的值为首地址来扫描显存,因此,被打上影音的区域将会最终显示在lcd面板上。 lcd虚拟页面宽度参数指定了最大显示页面宽度。通过修改lcdimage0framebase,可以使得真实显示的窗口大小和位置在虚拟页面边界的范围内变化。然后,对于编程人员来说,在软件设置定义显存扫描起地址的时候,是不能超多虚拟页面的高度和宽度,否则,屏幕上可能会有一些意想不到的景象。 这个ip在lcd屏的接口上还比一般的lcd控制器多了对串口rgb屏的支持,我们在fpga开发板上就是使用auo a036qn01串口rgb屏来验证。a036qn01的规格书上没有dummy data(lcd serial panel pixel parameters: offset=0200h),但我们的design是有dummy data跟没有dummy data的可以支持的。
ip内部的接口时钟关系 以上就这个ip的原理与子模块作了充分的说明, 再接着介绍ip内部的接口时钟关系。 ftlcdc200包含了三个时钟域分别为hclk, lc_scaler_clk以及lc_clk。hclk时钟使用于ahb接口而且这个时钟与ahb接口是一致的。ahb必须为soc上的lcd控制器提供足够的带宽用以由帧缓存区捕获足够的数据。 lc_scaler_clk提供时钟给scaler模块同时对scaler模块也要足够快来处理数据。lc_clk用于产生像素时钟。像素时钟(lc_pclk是由lc_clk产生并且除以1, 2, 3等等。 此外, 这三个时钟域必须按照下面的两个原则才能运行顺畅: ? 1. hclk ≥ lc_scaler_clk ≥ lc_clk (频率) ? 2. lc_scaler ≥ hclk/16 (频率) lc_clk的频率变化依靠lcd屏的选择与使用。使用这个ip在频率上必须根据所选用的lcd屏的规格,下面两个例子介绍选择时钟频率的方法 范例1. 假设输入的分辨率是640x480, 每个在帧缓存区内的像素是16-bpp, ahb总线的带宽是32 bits, lcd屏的分辨率是320x240而显示的帧刷新率是30帧每秒。 在这个范例, scaling-down功能必须打开并且操作在1/2x1/2的步骤。 hclk必须大于640x480 (输入的分辨率) x 16 (bpp) x 30 (帧刷新率)/32 (总线带宽) = 4.6 mhz lc_scaler_clk必须大于640x480 (最大的 {输入的分辨率, 输出的分辨率}) x 30 (帧刷新率) = 9.2 mhz lc_clk必须大于320x240 (输出的分辨率) x 30 (帧刷新率) x 1.2 (门廊的空白) = 2.8mhz 因此, 针对这个范例, 使用者能选择以下的两个条件 hclk ≥ lc_scaler_clk ≥ 9.2 mhz lc_clk ≥ 2.8 mhz 范例2. 假设输入的分辨率是640x480, 每个在帧缓存区内的像素是16-bpp, ahb总线的带宽是32 bits, lcd屏的分辨率是1280x960而显示的帧刷新率是30帧每秒。 在这个范例, scaling-down功能必须打开并且操作在2x2的步骤。 hclk必须大于640x480 (输入的分辨率) x 16 (bpp) x 30 (帧刷新率)/32 (总线带宽) = 4.6 mhz lc_scaler_clk必须大于1280x960 (最大的{输入的分辨率, 输出的分辨率}) x 30(帧刷新率) = 36.8 mhz lc_clk必须大于1280x960 (输出的分辨率) x 30 (帧刷新率) x 1.2 (门廊的空白) = 44.2 mhz 因此, 针对这个范例, 使用者能选择以下的条件 hclk ≥ lc_scaler_clk ≥ lc_clk ≥ 44.2 mhz 在我们的fpga上验证配置ftlcdc200以显示图象的参数条件如下 ftlcdc200 ngo 以45 mhz的综合条件来产生。 hclk = 40 mhz lc_clk = 24 mhz lc_scaler_clk = 24 mhz 如果有影像失真, 一般来说都是lc_clk太快而违反了综合的条件,放慢lc_clk的时钟就能解决问题。如果客户使用的lcd 屏最慢的时钟频率是21mhz (46.5 ns) ,然而, lc_clk是24 mhz 以及 divno配置为 3所以最终lc_clk 输入lcd屏的时钟频率大约是8mhz, 这跟lcd屏的规格是不符的。 作者:汪子凌,陈宏铭 技术咨询部 智原科技(上海)有限公司

积分电路原理
基板旋转冲洗过程中小结构的表面清洗
如何才能给树莓派添加开关机键
微擎小程序模块安装上传打包操作步骤解析
FANUC机器人TCP三点法介绍
基于AHB接口的高性能LCD控制器IP设计
微软已经与美国金融公司MSCI发起了基于云的战略联盟
企业区块链公司Insolar将于2020年2月3日上线主网
MIUI 10背后的故事:更加关注什么是用户真正需要的设计,认真才能成功
家居温湿度控制系统
主动红外入侵探测器的安装环境_主动红外探测器的安装注意事项
联通上线5G升级包 9.9元即可畅享5G流量
嵌入式状态监测与故障诊断装置设计
智能硬件创新设计行业走势及战略布局
基于LINUX的嵌入式浏览器的设计与实现
华为史上最好看手机今天发布 叫板iPhone7
带鱼屏+升降镜头?颜值超高,但看到处理器?再见?
适用于传输少量数据的蓝牙低能耗技术
IBM助力客户斩获多项IDC中国未来企业大奖
三种write mode,你真的理解吗?