基于Zynq SoC增强CCD图像传感器性能
ccd常用于对量子效率、动态范围、暗信号和读出噪声等指标要求极高的高性能图像系统。ccd工作在一种并行/串行架构，也就是说图像的每一线并行移动，输出的线数据在时钟作用下逐像素写入串行寄存器读出。因为ccd是模拟器件，为了获得更好的性能，这些并行和串行转换需要精确的时序和精确的重叠区域控制。许多现有的ccd驱动系统都基于大规模的系统架构，这限制了它们的性能和灵活性。e2v公司“space imaging ”项目组的产品开发团队已经研发出了用于内部测试和系统产品的灵活的“proximity electronics core”原型机。这里的“proximity”指的是为了获得更好性能，驱动电路离ccd非常近。这种设计架构允许主要的图像处理工作在前端转换成“安全”的数字信号后可以在远端通过专用的处理集群完成。
这个核心板的主要功能是：
（1）software-defined：软件配置操作模式，硬件使用一个类似于soi 7层协议栈的预定义协议栈；
（2）信号快速转换到数字域，显著的减少了模拟链路路径；
（3）提升了用于定义ccd驱动行为的抽象层次；
（4）产生高精度的时钟；
（5）network-enabled：通过千兆网进行高速通信；
（6）interface-rich：可以使用许多通用的嵌入式通信接口，如usb、rs-232、 i2c, spi, can等。
开发团队之所以选择使用xilinx zynq-7000 soc用作系统原型，是因为它支持丰富的接口标准，各种功能可根据各自的特点选择在arm cortex-a9 mpcore双核处理器（ps）或可编程逻辑（pl）上面完成。zynq soc允许设计团队聚焦到增值领域：应用软件、嵌入式软件、fpga开发和模拟前端设计。
1 什么是software defined？ 这里没有一个明确的标准定义来自software-defined嵌入式系统的各个组件是如何联系在一起的。比如说，没有一个标准化的组装机制来整理基于主机的应用程序、嵌入式系统软件、硬件、cots、fpga、电源等等。因此，开发团队采用下面的模型，如图1所示。
图1 software-defined嵌入式系统模型
和osi通信模型非常类似的是，用户创建解决方案时无需提供所有的层级功能。层与层之间和层内都使用工业标准接口进行通信，比如fpga api层采用axi总线协议，module level采用spi，i2c通信等。只要有可能，我们都尽量避免使用自定义的接口和协议，因为自定义接口和协议会降低模块间的可重用性并且增加不必要的成本和风险。
2 proximity core架构 系统架构如图2所示，展示了运行在本地host的应用软件是如何配置嵌入式系统的。一旦完成配置，由som和模拟卡组成的嵌入式系统就会给ccd输出时钟，采样ccd像素数据并封装成以太网帧发出。归功于som灵活的io特性，也可以方便的连接到包括滤光片、快门在内的图像系统的其他硬件。
图2 ccd proximity core系统级架构
3 proximity core应用软件 我们用python语言开发基于pc的应用软件，这个软件允许用户定制图形化的波形图，下图3是软件gui的截屏。和传统的难调试、耗时多的基于文本的波形文件相比，直观的gui让人更容易理解用于驱动ccd的波形。
图3 软件gui屏幕截图
应用软件将用户满意的波形图数据写入到zynq soc内的波形发生器使之产生这个波形，这种设计方法可以使用户在设备工作的过程中更新波形，这是针对假设情景分析的一个伟大尝试。
4 zynq soc核 标准的核心是运行嵌入式软件和实现fpga api levels的zynq soc，它完成以下功能：
（1）和基于pc的应用软件通信；
（2）配置zynq pl内的波形发生器；
（3）产生ccd驱动波形；
（4）和模拟前端连接，并对ccd输出的模拟像素信号进行模数转换；
（5）使用数字相关双采样技术来确定像素值；
（6）通过千兆网发送数据。
以上这些任务分成产生输出波形和输入视频处理两组。产生输出波形需要灵活的、高精度的波形发生器。开发团队在波形发生中使用xilinx picoblaze微控制器，picoblaze是一个8位的微控制器软核，每条指令仅用两个时钟周期，实时性能非常高。
picoblaze控制器在zynq soc pl内完全独立运行，它的可执行代码存储在内部的双端口ram中。使用双端口ram代替单口ram存储picoblaze代码的优势是zynq soc ps端可以向picoblaze控制器实时更新代码。不需要调用通用picoblaze汇编器，系统内基于pc的应用程序就可以产生picoblaze可执行代码并将它下载到目标器件。
系统大多数图像信号处理（isp）链路都使用vivado ip库里面的标准组件，但是输入视频处理需要开发一个自定义的adc接口和dcds ip block。在系统定制和优化过程中，所有的标准和自定义的ip组件都允许通过axi-lite接口进行software-defined配置。
输入视频处理内部模块和模块间的数据流通信采用axi stream协议传输，允许使用dma通过zynq soc的高性能axi接口将数据很容易的写到ps端的ddr内存。千兆网专用的dma将内存中的图像数据搬运到ps的ethernet mac发送，这样可以节省arm处理器的开销。
运行在arm处理器的嵌入式软件主要负责两大功能：管理picoblaze控制器的代码存储空间和将采集到的图像数据通过千兆网发送出去。
使用zynq soc一个额外的优势是其内部集成xadc可以实时监控ccd和其他嵌入式组件的运行参数。如果有需要，这些系统健康数据可以叠加在图像数据的后面发出。
5 模拟前端 非常遗憾的是，ccd设备没有一个易用性很好的数字接口。在zynq soc输出的数字时钟和ccd时钟输入引脚之间需要一个中间级实现电平转换和大电流驱动。中间缓冲级将数字时钟信号电平变换到ccd需要的电压范围（典型值是8v-30v）并提高电流驱动能力，因为ccd内部设计的原因，它的时钟输入引脚的负载很重。
模拟输入链路将ccd输出的模拟像素信号缩放到适合adc采样的动态范围内。因为ccd的输出不是一个真正的差分信号，在使用不同类型的ccd时可能需要额外的模拟信号处理，比如说类差分减法。
下图4是在电气和光学实验室中从“proximity electronics core”原型机上捕捉到的第一个输出波形。
图4 实验室捕捉到ccd输出的第一个波形
6 将来的性能优化考虑 通常的，ccd输出波形彼此之间，特别是重叠区域对齐必须要非常精密的位置控制。虽然zynq soc可以运行在很高的频率下，但是我们可能要求更高精度，也就是对这些信号亚毫微秒级的控制，不包括这个原型机在内，e2v已经开发出了在zynq soc arm处理器的控制下允许亚毫微秒级脉冲控制的技术。结合上述方法，这些额外的控制办法通过粗调和精调时序相结合来确保ccd工作在最佳状态。
电缆护层保护器接线方法详解
苹果生产的首批新iPhone手机，已交付给苹果美国总部
电力系统的组成
系统的消息循环
大屏旗舰手机荣耀Note10搭载着哪些黑科技？
基于Zynq SoC增强CCD图像传感器性能
微软Edge浏览器将推全新分享链接页面
第1部：RepRap社区的介绍
0glasses中标中国联通集团5G创新应用专区供应商
夏普拟联手鸿海 吃东芝存储器20%股权
E拆解：三星 Galaxy S22+（上）
Redmi将首发天玑旗舰芯新平台
极致魅力热情四溢，华为荣耀V9红蓝CP图赏
OpenAI发生严重故障 GPT-4 Turbo模型太火爆 ChatGPT停服两小时
【节能学院】南京大学无菌动物房改造项目消防应急照明和疏散指示系统的研究与应用
美光：尔必达债权人放弃逾3千亿债权
《移动物联网通用模组技术需求和应用场景》标准制定完成
减速机速比和扭矩如何计算
浅析氮化镓器件驱动设计技术
承德科胜12头自流式灌装机|橄榄油灌装机|河北灌装机
这个核心板的主要功能是：
（1）software-defined：软件配置操作模式，硬件使用一个类似于soi 7层协议栈的预定义协议栈；
（2）信号快速转换到数字域，显著的减少了模拟链路路径；
（3）提升了用于定义ccd驱动行为的抽象层次；
（4）产生高精度的时钟；
（5）network-enabled：通过千兆网进行高速通信；
（6）interface-rich：可以使用许多通用的嵌入式通信接口，如usb、rs-232、 i2c, spi, can等。
开发团队之所以选择使用xilinx zynq-7000 soc用作系统原型，是因为它支持丰富的接口标准，各种功能可根据各自的特点选择在arm cortex-a9 mpcore双核处理器（ps）或可编程逻辑（pl）上面完成。zynq soc允许设计团队聚焦到增值领域：应用软件、嵌入式软件、fpga开发和模拟前端设计。
1 什么是software defined？ 这里没有一个明确的标准定义来自software-defined嵌入式系统的各个组件是如何联系在一起的。比如说，没有一个标准化的组装机制来整理基于主机的应用程序、嵌入式系统软件、硬件、cots、fpga、电源等等。因此，开发团队采用下面的模型，如图1所示。
图1 software-defined嵌入式系统模型
和osi通信模型非常类似的是，用户创建解决方案时无需提供所有的层级功能。层与层之间和层内都使用工业标准接口进行通信，比如fpga api层采用axi总线协议，module level采用spi，i2c通信等。只要有可能，我们都尽量避免使用自定义的接口和协议，因为自定义接口和协议会降低模块间的可重用性并且增加不必要的成本和风险。
2 proximity core架构 系统架构如图2所示，展示了运行在本地host的应用软件是如何配置嵌入式系统的。一旦完成配置，由som和模拟卡组成的嵌入式系统就会给ccd输出时钟，采样ccd像素数据并封装成以太网帧发出。归功于som灵活的io特性，也可以方便的连接到包括滤光片、快门在内的图像系统的其他硬件。
图2 ccd proximity core系统级架构
3 proximity core应用软件 我们用python语言开发基于pc的应用软件，这个软件允许用户定制图形化的波形图，下图3是软件gui的截屏。和传统的难调试、耗时多的基于文本的波形文件相比，直观的gui让人更容易理解用于驱动ccd的波形。
图3 软件gui屏幕截图
应用软件将用户满意的波形图数据写入到zynq soc内的波形发生器使之产生这个波形，这种设计方法可以使用户在设备工作的过程中更新波形，这是针对假设情景分析的一个伟大尝试。
4 zynq soc核 标准的核心是运行嵌入式软件和实现fpga api levels的zynq soc，它完成以下功能：
（1）和基于pc的应用软件通信；
（2）配置zynq pl内的波形发生器；
（3）产生ccd驱动波形；
（4）和模拟前端连接，并对ccd输出的模拟像素信号进行模数转换；
（5）使用数字相关双采样技术来确定像素值；
（6）通过千兆网发送数据。
以上这些任务分成产生输出波形和输入视频处理两组。产生输出波形需要灵活的、高精度的波形发生器。开发团队在波形发生中使用xilinx picoblaze微控制器，picoblaze是一个8位的微控制器软核，每条指令仅用两个时钟周期，实时性能非常高。
picoblaze控制器在zynq soc pl内完全独立运行，它的可执行代码存储在内部的双端口ram中。使用双端口ram代替单口ram存储picoblaze代码的优势是zynq soc ps端可以向picoblaze控制器实时更新代码。不需要调用通用picoblaze汇编器，系统内基于pc的应用程序就可以产生picoblaze可执行代码并将它下载到目标器件。
系统大多数图像信号处理（isp）链路都使用vivado ip库里面的标准组件，但是输入视频处理需要开发一个自定义的adc接口和dcds ip block。在系统定制和优化过程中，所有的标准和自定义的ip组件都允许通过axi-lite接口进行software-defined配置。
输入视频处理内部模块和模块间的数据流通信采用axi stream协议传输，允许使用dma通过zynq soc的高性能axi接口将数据很容易的写到ps端的ddr内存。千兆网专用的dma将内存中的图像数据搬运到ps的ethernet mac发送，这样可以节省arm处理器的开销。
运行在arm处理器的嵌入式软件主要负责两大功能：管理picoblaze控制器的代码存储空间和将采集到的图像数据通过千兆网发送出去。
使用zynq soc一个额外的优势是其内部集成xadc可以实时监控ccd和其他嵌入式组件的运行参数。如果有需要，这些系统健康数据可以叠加在图像数据的后面发出。
5 模拟前端 非常遗憾的是，ccd设备没有一个易用性很好的数字接口。在zynq soc输出的数字时钟和ccd时钟输入引脚之间需要一个中间级实现电平转换和大电流驱动。中间缓冲级将数字时钟信号电平变换到ccd需要的电压范围（典型值是8v-30v）并提高电流驱动能力，因为ccd内部设计的原因，它的时钟输入引脚的负载很重。
模拟输入链路将ccd输出的模拟像素信号缩放到适合adc采样的动态范围内。因为ccd的输出不是一个真正的差分信号，在使用不同类型的ccd时可能需要额外的模拟信号处理，比如说类差分减法。
下图4是在电气和光学实验室中从“proximity electronics core”原型机上捕捉到的第一个输出波形。
图4 实验室捕捉到ccd输出的第一个波形
6 将来的性能优化考虑 通常的，ccd输出波形彼此之间，特别是重叠区域对齐必须要非常精密的位置控制。虽然zynq soc可以运行在很高的频率下，但是我们可能要求更高精度，也就是对这些信号亚毫微秒级的控制，不包括这个原型机在内，e2v已经开发出了在zynq soc arm处理器的控制下允许亚毫微秒级脉冲控制的技术。结合上述方法，这些额外的控制办法通过粗调和精调时序相结合来确保ccd工作在最佳状态。
电缆护层保护器接线方法详解
苹果生产的首批新iPhone手机，已交付给苹果美国总部
电力系统的组成
系统的消息循环
大屏旗舰手机荣耀Note10搭载着哪些黑科技？
基于Zynq SoC增强CCD图像传感器性能
微软Edge浏览器将推全新分享链接页面
第1部：RepRap社区的介绍
0glasses中标中国联通集团5G创新应用专区供应商
夏普拟联手鸿海 吃东芝存储器20%股权
E拆解：三星 Galaxy S22+（上）
Redmi将首发天玑旗舰芯新平台
极致魅力热情四溢，华为荣耀V9红蓝CP图赏
OpenAI发生严重故障 GPT-4 Turbo模型太火爆 ChatGPT停服两小时
【节能学院】南京大学无菌动物房改造项目消防应急照明和疏散指示系统的研究与应用
美光：尔必达债权人放弃逾3千亿债权
《移动物联网通用模组技术需求和应用场景》标准制定完成
减速机速比和扭矩如何计算
浅析氮化镓器件驱动设计技术
承德科胜12头自流式灌装机|橄榄油灌装机|河北灌装机