基于STi7105的视频通话功能的实现
本文以sti7105 高清机顶盒为基础，采用sip 协议，尽量利用高清互动机顶盒的现有编解码能力实现视频通话功能。该方案充分利用了机顶盒的现有模块及hfc 网络，但是对语音和视频的压缩度不高。随着科学技术特别是多媒体通信技术的发展，传统的语音电话模式越来越不能满足现代人之间信息交流的需求。随着图像、音频、视频等多媒体数据逐渐成为信息处理领域中的主要媒体表现形式，与传统语音电话相比，视频电话可以更加吸引用户，并可以有效地利用网络资源，大大降低成本。有线电视网络在业务上已经实现视频、数据业务，为适应我国大力推进三网融合的步伐，必须能够实现通信业务，所以实现视频通话是一项很好的选择。
1 sti7105 芯片简介
sti7105 是意法半导体公司生产的一款高性能高清数字电视机顶盒解码芯片，采用先进的半导体生产工艺及完善的优化设计，提升各个功能模块的性能，增加高速数据接口，降低耗电量，降低系统的整体材料成本。sti7105 是一款应用范围很广的soc 芯片，可以用于有线高清数字电视机顶盒、卫星高清数字电视机顶盒、iptv 机顶盒、多媒体手持设备等。sti7105 芯片的结构示意图如图1。
图1 sti7105 示意图
sti7105 芯片内部集成了一颗高性能的st40 应用程序处理器，主频高达450mhz,实时处理运算能力超过800dmips,另外芯片内还集成有两颗实时运算加速器，也可以用于各种运算要求的处理。这样的处理能力不但可以达到高清机顶盒的要求，还能够充分满足家庭多媒体中心的设计需求。
sti7105 的ts 流输入处理模块可以支持4 路ts流输入、1 路ts 流输出，这个处理模块内可以同时处理分解多个码流，用于同时进行录像、码流回放、画中画等功能，这些码流可以来自传统的数字电视广播通道，也可以来自cable modem、eoc、以太网等ip 通道，该模块能为用户提供灵活的产品开发模式。
sti7105 集成了高性能的视音频解码器，其灵活的解码架构可以满足目前已有的各种视音频编码压缩格式的解码要求，也可以通过软件升级来支持这些标准。在视频编解码方面， 它可以支持h.264hp@hl4.1、mpeg -2 mp@hl、vc -1 mp@hl、ap@l3、mpeg -4 p2 asp@l5、divx 格式、rm、rmvb、avs 等视频格式，其解码器可以用于pvr、画中画功能，支持1080p 的格式，内置的图像降噪声处理，增强优化的后处理电路能够给用户带来前所未有的优美图像。在音频编解码器方面，可以支持mpeg-1 layer i/ii、mp3、mpeg -2 layer ii、ac -3 dolbydigital、dd+、aac、aac+sbr 等等，也可支持杜比、dts 的新算法及中国dra 音频标准。
sti7105 除视音频解码功能以外，还具有一定的视音频的编码的能力，支持divx、xvid、h.263 编码格式。
2 实现及应用
2.1 技术协议
视频通话终端软件的开发和应用涉及许多方面的技术，包括信令协议、分组语音技术、视频编解码技术以及流媒体网络传输技术等。
2.1.1 信令协议
信令指各个交换局在完成呼叫接续中的一种通信语言，在通信设备之间传递的各种控制信号，如占用、释放、设备忙闲状态、被叫用户号码等，都属于信令。信令系统指导系统各个部分相互配合，协同运行，共同完成某项任务。目前国际上ip 网络通信的主要标准有h.323 和sip (session initiation protocol)，两者都对视频电话系统信令提出了完整的解决方案，都是作为多媒体通信的应用层控制(信令)协议，都利用rtp 作为媒体传输协议。但是两者的设计风格截然不同，h.323 采用的是传统的电话信令模式，包括一系列协议;而sip 借鉴其他互联网协议，采用基于文本的协议。
sip 协议由于其简单、易于扩展、便于实现等诸多优点越来越得到通信业界的青睐，sip 在现有通信网向ngn 演进过程中十分重要，正在成为ngn(下一代网络)的核心协议之一，而且sip 协议已经被3gpp工作组定义为第三代移动通信系统的信令协议以提供ip 多媒体服务，本方案采用sip 作为信令协议。
sip 协议是ietf 制订用于多方多媒体通信，主要目的是为了解决ip 网中的信令控制以及同软交换机的通信，从而构成新一代的通信平台。sip 协议采用客户机/服务器的工作方式，sip 网络包含两类组件：用户代理(user agent)和网络服务器(network server)。
用户代理(ua)表示一个终端系统，包括用户代理客户端(uac)和用户代理服务器端(uas)，前者产生请求，后者产生对应的响应。uac 和uas 是逻辑上的两个部分，每个终端系统都包含了uac 和uas 的功能。
sip 是一个分层体系结构的协议，第1 层是语法和编码层，它的编码使用扩展的巴科斯范式规定;第2 层是传输层， 它定义了网络上的客户机和服务器如何接收请求和发送响应;第3 层是事务层，事务是sip的基本元素，事务由客户机向服务器发送的请求和从服务器发回客户机的所有响应组成，事务层若处理消息超时，则重传并匹配响应到请求;第3 层是用户层，每个sip 实体(除了无状态代理)都是事务用户，当一个事务用户希望发送请求时，就创建一个客户机事务实例以发送此请求。sip 提供用户定位、用户通信能力协商、用户可用性、建立呼叫和呼叫处理与控制等功能。sip 不提供具体的业务，不定义会话将如何描述，只提供会话建立功能。sip 协议清晰地将会话建立和会话描述区分开，使sip 可以成为internet 上多媒体会话中真正意义上的信令协议，适用范围很广。
2.1.2 视频编码技术
视频压缩是多媒体应用中的核心技术，itu-t 推出的低码率视频压缩标准对推动可视电话的发展和实用化起到了重要的促进作用。h.261 是itu-t 推出的第一个低码率视频压缩标准，码率为p×64kbps,其中p 在1~30 中取值，图像格式为cif 和qcif.h.261压缩编码算法的基本思想是利用预测编码减少时间冗余度，利用变换编码减少空间冗余度。算法主要由运动估计、运动补偿、dct 变换、量化和霍夫曼编码构成。
h.263 是最早用于低码率视频编码的itu-t 标准，随后出现的第二版(h.263+)及h.263++增加了许多选项，使其具有更广泛的适用性。h.263 是itu-t为低于64kb/s 的窄带通信信道制定的视频编码标准。
它是在h.261 基础上发展起来的，其标准输入图像格式可以是s-qcif、qcif、cif、4cif 或者16cif 的彩色4∶2∶0 亚取样图像。h.263 与h.261 相比采用了半像素的运动补偿，并增加了4 种有效的压缩编码模式。
h.264 是由iso/iec 与itu-t 组成的联合视频组(jvt)制定的新一代视频压缩编码标准。对信道时延的适应性较强，既可工作于低时延模式以满足实时业务，又可工作于无时延限制的场合。在编解码器中采用复杂度可分级设计，在图像质量和编码处理之间可分级，以适应不同复杂度的应用，提高网络适应性。相对于先期的视频压缩标准，h.264 引入了很多先进的技术，包括4×4 整数变换、空域内的帧内预测、1/4 像素精度的运动估计、多参考帧与多种大小块的帧间预测技术等。
h.261 与h.263 在视频通信中应用较广，h.263 与h.261 相比，增加了若干选项，提供了更灵活的编码方式，压缩效率大大提高，更适应网络传输。h.264 标准的推出，是视频编码标准的一次里程碑式的重要进步，它与h.263、h.261 相比，具有明显的优势，特别是编码效率的提高，使之能用于许多新的领域。由于sti7105 芯片视频编码能力有限，所以我们视频编码选用h.263 格式。
2.1.3 音频编码技术
语音通信是可视电话最基本的功能，受网络条件的限制，可视电话通常在较低码率下工作。itu-t 推出了一系列语音压缩标准，其中有g.711、g.723.1、g.
728、g.729 和g.729a 等，在可视电话中得到了广泛应用。当可视电话与普通电话通信时，采用g.711 标准，g.711 为pcm 编码，只对语音信号进行采样和量化，产生64kbps 的码流，g.711 编码后的语音质量高，缺点是占用的带宽也很高。g.723.1 能够产生两种速率的码流，高速率编码器使用多脉冲最大自然量化(mp-mlq)算法，低速率编码器使用代数码激励线性预测(acelp)算法。g.729a 是g.729 的简化版本，其复杂度与g.729 相比降低了50%,语音质量略有降低，两种标准编码后的码流可互相解码。
实际选择语音编解码算法时，要考虑各种因素，高比特率可以保证良好的语音品质，但要占用大量存储空间，耗费更多资源;而过低的比特率会影响语音的品质增加延迟。由于sti7105 芯片音频处理能力有限，所以我们音频编码选用g.711、g.723.1 格式。
2.2 系统结构
视频通话测试系统主要由服务器、传输网络和sti7105 机顶盒终端组成，架构如图2 所示。
图2 系统结构示意图
服务器用来控制整个系统的通话过程，服务器的基本功能是按照用户的要求完成对信令、视频、话音等信号切换，保证音频及视频的连续性。
详细内容请阅读pdf文档：基于sti7105高清机顶盒实现视频通话
框架解耦神器—REventBus
vivo IFEA 分离式镜头表明：智能手机镜头设计已达到百花齐放阶段
苹果为什么收购Dialog部分业务 苹果为什么要自主研发芯片
艾默生网络能源的ATCA系统可支持深层封包检测功能
镜面电视，带你体验高科技的家居生活!
基于STi7105的视频通话功能的实现
Metropia 2042是ArtStation迄今为止最大的3D挑战赛
曙光全栈液冷方案解决旧数据中心提效升级难题
中国长征系列火箭创下新纪录 连续103次发射成功新纪录
一加5什么时候上市：一加5准备就绪5月发布，一加5配置、性能、黑科技、价格抢先看
凤凰一号怎么样 值不值得买
创客福利来袭：多款低价Zynq SoC和Xilinx 7系列FPGA开发板
Android存在安全漏洞,5.0系统版本以上都存在,高达77.5%受影响
曝国内手机厂商将与哈苏合作
共射放大电路参数确定方案解析
魅族Flyme6：就一个字“美”
NVIDIA重磅发布专门的矿卡—CMP HX系列
Amazon 跨足智能电视机，与中国厂商携手推出 4K 电视
集合四种功能，我的“双核独显”电源制作过程
STM8S时钟系统的时钟初始化函数实现
1 sti7105 芯片简介
sti7105 是意法半导体公司生产的一款高性能高清数字电视机顶盒解码芯片，采用先进的半导体生产工艺及完善的优化设计，提升各个功能模块的性能，增加高速数据接口，降低耗电量，降低系统的整体材料成本。sti7105 是一款应用范围很广的soc 芯片，可以用于有线高清数字电视机顶盒、卫星高清数字电视机顶盒、iptv 机顶盒、多媒体手持设备等。sti7105 芯片的结构示意图如图1。
图1 sti7105 示意图
sti7105 芯片内部集成了一颗高性能的st40 应用程序处理器，主频高达450mhz,实时处理运算能力超过800dmips,另外芯片内还集成有两颗实时运算加速器，也可以用于各种运算要求的处理。这样的处理能力不但可以达到高清机顶盒的要求，还能够充分满足家庭多媒体中心的设计需求。
sti7105 的ts 流输入处理模块可以支持4 路ts流输入、1 路ts 流输出，这个处理模块内可以同时处理分解多个码流，用于同时进行录像、码流回放、画中画等功能，这些码流可以来自传统的数字电视广播通道，也可以来自cable modem、eoc、以太网等ip 通道，该模块能为用户提供灵活的产品开发模式。
sti7105 集成了高性能的视音频解码器，其灵活的解码架构可以满足目前已有的各种视音频编码压缩格式的解码要求，也可以通过软件升级来支持这些标准。在视频编解码方面， 它可以支持h.264hp@hl4.1、mpeg -2 mp@hl、vc -1 mp@hl、ap@l3、mpeg -4 p2 asp@l5、divx 格式、rm、rmvb、avs 等视频格式，其解码器可以用于pvr、画中画功能，支持1080p 的格式，内置的图像降噪声处理，增强优化的后处理电路能够给用户带来前所未有的优美图像。在音频编解码器方面，可以支持mpeg-1 layer i/ii、mp3、mpeg -2 layer ii、ac -3 dolbydigital、dd+、aac、aac+sbr 等等，也可支持杜比、dts 的新算法及中国dra 音频标准。
sti7105 除视音频解码功能以外，还具有一定的视音频的编码的能力，支持divx、xvid、h.263 编码格式。
2 实现及应用
2.1 技术协议
视频通话终端软件的开发和应用涉及许多方面的技术，包括信令协议、分组语音技术、视频编解码技术以及流媒体网络传输技术等。
2.1.1 信令协议
信令指各个交换局在完成呼叫接续中的一种通信语言，在通信设备之间传递的各种控制信号，如占用、释放、设备忙闲状态、被叫用户号码等，都属于信令。信令系统指导系统各个部分相互配合，协同运行，共同完成某项任务。目前国际上ip 网络通信的主要标准有h.323 和sip (session initiation protocol)，两者都对视频电话系统信令提出了完整的解决方案，都是作为多媒体通信的应用层控制(信令)协议，都利用rtp 作为媒体传输协议。但是两者的设计风格截然不同，h.323 采用的是传统的电话信令模式，包括一系列协议;而sip 借鉴其他互联网协议，采用基于文本的协议。
sip 协议由于其简单、易于扩展、便于实现等诸多优点越来越得到通信业界的青睐，sip 在现有通信网向ngn 演进过程中十分重要，正在成为ngn(下一代网络)的核心协议之一，而且sip 协议已经被3gpp工作组定义为第三代移动通信系统的信令协议以提供ip 多媒体服务，本方案采用sip 作为信令协议。
sip 协议是ietf 制订用于多方多媒体通信，主要目的是为了解决ip 网中的信令控制以及同软交换机的通信，从而构成新一代的通信平台。sip 协议采用客户机/服务器的工作方式，sip 网络包含两类组件：用户代理(user agent)和网络服务器(network server)。
用户代理(ua)表示一个终端系统，包括用户代理客户端(uac)和用户代理服务器端(uas)，前者产生请求，后者产生对应的响应。uac 和uas 是逻辑上的两个部分，每个终端系统都包含了uac 和uas 的功能。
sip 是一个分层体系结构的协议，第1 层是语法和编码层，它的编码使用扩展的巴科斯范式规定;第2 层是传输层， 它定义了网络上的客户机和服务器如何接收请求和发送响应;第3 层是事务层，事务是sip的基本元素，事务由客户机向服务器发送的请求和从服务器发回客户机的所有响应组成，事务层若处理消息超时，则重传并匹配响应到请求;第3 层是用户层，每个sip 实体(除了无状态代理)都是事务用户，当一个事务用户希望发送请求时，就创建一个客户机事务实例以发送此请求。sip 提供用户定位、用户通信能力协商、用户可用性、建立呼叫和呼叫处理与控制等功能。sip 不提供具体的业务，不定义会话将如何描述，只提供会话建立功能。sip 协议清晰地将会话建立和会话描述区分开，使sip 可以成为internet 上多媒体会话中真正意义上的信令协议，适用范围很广。
2.1.2 视频编码技术
视频压缩是多媒体应用中的核心技术，itu-t 推出的低码率视频压缩标准对推动可视电话的发展和实用化起到了重要的促进作用。h.261 是itu-t 推出的第一个低码率视频压缩标准，码率为p×64kbps,其中p 在1~30 中取值，图像格式为cif 和qcif.h.261压缩编码算法的基本思想是利用预测编码减少时间冗余度，利用变换编码减少空间冗余度。算法主要由运动估计、运动补偿、dct 变换、量化和霍夫曼编码构成。
h.263 是最早用于低码率视频编码的itu-t 标准，随后出现的第二版(h.263+)及h.263++增加了许多选项，使其具有更广泛的适用性。h.263 是itu-t为低于64kb/s 的窄带通信信道制定的视频编码标准。
它是在h.261 基础上发展起来的，其标准输入图像格式可以是s-qcif、qcif、cif、4cif 或者16cif 的彩色4∶2∶0 亚取样图像。h.263 与h.261 相比采用了半像素的运动补偿，并增加了4 种有效的压缩编码模式。
h.264 是由iso/iec 与itu-t 组成的联合视频组(jvt)制定的新一代视频压缩编码标准。对信道时延的适应性较强，既可工作于低时延模式以满足实时业务，又可工作于无时延限制的场合。在编解码器中采用复杂度可分级设计，在图像质量和编码处理之间可分级，以适应不同复杂度的应用，提高网络适应性。相对于先期的视频压缩标准，h.264 引入了很多先进的技术，包括4×4 整数变换、空域内的帧内预测、1/4 像素精度的运动估计、多参考帧与多种大小块的帧间预测技术等。
h.261 与h.263 在视频通信中应用较广，h.263 与h.261 相比，增加了若干选项，提供了更灵活的编码方式，压缩效率大大提高，更适应网络传输。h.264 标准的推出，是视频编码标准的一次里程碑式的重要进步，它与h.263、h.261 相比，具有明显的优势，特别是编码效率的提高，使之能用于许多新的领域。由于sti7105 芯片视频编码能力有限，所以我们视频编码选用h.263 格式。
2.1.3 音频编码技术
语音通信是可视电话最基本的功能，受网络条件的限制，可视电话通常在较低码率下工作。itu-t 推出了一系列语音压缩标准，其中有g.711、g.723.1、g.
728、g.729 和g.729a 等，在可视电话中得到了广泛应用。当可视电话与普通电话通信时，采用g.711 标准，g.711 为pcm 编码，只对语音信号进行采样和量化，产生64kbps 的码流，g.711 编码后的语音质量高，缺点是占用的带宽也很高。g.723.1 能够产生两种速率的码流，高速率编码器使用多脉冲最大自然量化(mp-mlq)算法，低速率编码器使用代数码激励线性预测(acelp)算法。g.729a 是g.729 的简化版本，其复杂度与g.729 相比降低了50%,语音质量略有降低，两种标准编码后的码流可互相解码。
实际选择语音编解码算法时，要考虑各种因素，高比特率可以保证良好的语音品质，但要占用大量存储空间，耗费更多资源;而过低的比特率会影响语音的品质增加延迟。由于sti7105 芯片音频处理能力有限，所以我们音频编码选用g.711、g.723.1 格式。
2.2 系统结构
视频通话测试系统主要由服务器、传输网络和sti7105 机顶盒终端组成，架构如图2 所示。
图2 系统结构示意图
服务器用来控制整个系统的通话过程，服务器的基本功能是按照用户的要求完成对信令、视频、话音等信号切换，保证音频及视频的连续性。
详细内容请阅读pdf文档：基于sti7105高清机顶盒实现视频通话
框架解耦神器—REventBus
vivo IFEA 分离式镜头表明：智能手机镜头设计已达到百花齐放阶段
苹果为什么收购Dialog部分业务 苹果为什么要自主研发芯片
艾默生网络能源的ATCA系统可支持深层封包检测功能
镜面电视，带你体验高科技的家居生活!
基于STi7105的视频通话功能的实现
Metropia 2042是ArtStation迄今为止最大的3D挑战赛
曙光全栈液冷方案解决旧数据中心提效升级难题
中国长征系列火箭创下新纪录 连续103次发射成功新纪录
一加5什么时候上市：一加5准备就绪5月发布，一加5配置、性能、黑科技、价格抢先看
凤凰一号怎么样 值不值得买
创客福利来袭：多款低价Zynq SoC和Xilinx 7系列FPGA开发板
Android存在安全漏洞,5.0系统版本以上都存在,高达77.5%受影响
曝国内手机厂商将与哈苏合作
共射放大电路参数确定方案解析
魅族Flyme6：就一个字“美”
NVIDIA重磅发布专门的矿卡—CMP HX系列
Amazon 跨足智能电视机，与中国厂商携手推出 4K 电视
集合四种功能，我的“双核独显”电源制作过程
STM8S时钟系统的时钟初始化函数实现