基于通信技术的MEC VR可提升计算能力，解决带宽和时延等问题
在今天举行的中国移动“5g+e”网边融合技术峰会”上，清华大学计算机科学与技术系教授、网络技术研究所所长崔勇发表了“基于边缘计算的沉浸式vr”的主题演讲。崔勇表示：基于现有通信技术的mec vr成为创新思路，可通过mec提升计算能力，通过协同渲染解决带宽、时延等问题。
2016年就进入了vr元年。而近两年，vr新品与核心技术不断涌现，例如爱奇艺vr一体机，高通推出了vr芯片骁龙835，谷歌推出ar core，facebook推出社交vr等实时互动的最新相关vr，索尼推出vr实时互动桌游，华为vr眼镜获得2019世界vr产业大会创新金奖，近日华为发布vr glass 6dof游戏套装等，说明大厂依然在vr/ar方面发力。
但业界也有人认为vr寒冬将至——应用未果，投资遇冷。究竟是缺乏应用场景，还是技术不够呢？
在崔勇看来，vr/ar的技术痛点包括：由于vr响应时延需要非常低（小于25ms），沉浸式vr的基本需求包括高刷新率（100hz）、4k及深度图像等高质量图像、360度全景视角，因此难点在于时延、高清、交互，也就是超高清实时交互。在这种情况下超高清实时交互需要计算来提供实时交互，但是高清渲染计算在哪算？如果手机或vr头盔的gpu进行实时渲染会导致用户体验画面卡顿、手机温度过热等问题，因此vr业界正在呼唤高性能计算设备。
崔勇分析了移动vr应用的核心技术难点，边缘计算模式霞，pc端vr在pc上渲染计算高质量图像，将图像实时传输至移动端，画质体验好但移动受限制。如果让pc服务器进行高性能的图像计算，将计算好的图像实时传输到移动端，但大家看到的商店里各式各样vr产品都戴着小辫子，戴上vr眼镜玩一会儿看不到小辫子在哪就很容易摔倒。如何砍断小绳子、打造高质量移动vr呢？对此业界这几年研究了不少方案，包括预渲染和缓存预测，都难以做到实时交互。
“基于现有通信技术的mec vr成为创新思路，可通过mec提升计算能力，通过协同渲染解决带宽、时延等问题。”崔勇表示：移动vr的内容可以分为前景交互和背景交互，前景交互随机、不可预测、工作量小，但要求实时渲染，可在移动端渲染；背景交互环境连续、可预测、工作量大，可提前在边缘服务器渲染。这就需要协同渲染：一是手机gpu根据实时交互渲染前景；二是远端gpu预渲染背景并进行编码；三是将临近的编码数据帧预先传输到手机；四是手机cpu根据实时交互解压并协同显示。如果传输带宽不足，可降低背景传输带宽，离散化虚拟世界，预先渲染全景帧、采用h.264预先编码；如果遇到延时挑战，可基于移动预测，手机预取置临近的帧；手机上解码一个全景帧大约需要40ms的时延，通过并行解码显著降低解码时延。通过这样设计，可把原来手机上只能看到的每秒5到7帧的内容提升到每秒60多帧，跟手机刷新频率差不多，并且30分钟使用了手机不会发热或发烫，gpu和cpu计算资源使用率尚可，网络传输平均带宽127-130mbps。
边缘计算确实是非常重要的技术创新，崔勇认为，未来mec的新业务和新需求还包括从vr到云游戏，以及沉浸式远程教学。
Buterin提出区块链可扩展性解决方案，帮助交易所抵御黑客攻击
Xilinx_A7_K7_V7系列Cadence符号库
自动驾驶技术大战硝烟弥漫 究竟谁能笑到最后？
天网为什么能肩负着维护区块链世界安全的使命？
快速带你了解单晶硅
基于通信技术的MEC VR可提升计算能力，解决带宽和时延等问题
芯片巨头血拼先进封装，台积电等大厂占比超八成，国内产业链的机会在哪里？
Android手机电源管理设计要素
PLC指针类型与间接寻址如何使用
云计算系统中的分布式海量数据存储技术
利用无线开关量传输器搭建工业气体浓度监测系统
虹科课堂 | 湿热灭菌原理和基本概念全掌握
中国十大mcu公司有哪些
TLC优质颗粒+SSD协议 aigo高速固态U盘U393试用
PCBA打样过程的注意事项
华为matex2折叠新机多少钱 华为matex2折叠新机价格17999元起 全新双螺旋水滴铰链设计
Ovum最近对全球企业的物联网部署进行了调查涉及14个国家的1343家企业
BIO、NIO、AIO 模型工作方式
意大利议会安全委员会呼吁政府禁用华为中兴设备，但没有任何约束力
如何在振动环境下使涡街流量计能够实现准确计量
2016年就进入了vr元年。而近两年，vr新品与核心技术不断涌现，例如爱奇艺vr一体机，高通推出了vr芯片骁龙835，谷歌推出ar core，facebook推出社交vr等实时互动的最新相关vr，索尼推出vr实时互动桌游，华为vr眼镜获得2019世界vr产业大会创新金奖，近日华为发布vr glass 6dof游戏套装等，说明大厂依然在vr/ar方面发力。
但业界也有人认为vr寒冬将至——应用未果，投资遇冷。究竟是缺乏应用场景，还是技术不够呢？
在崔勇看来，vr/ar的技术痛点包括：由于vr响应时延需要非常低（小于25ms），沉浸式vr的基本需求包括高刷新率（100hz）、4k及深度图像等高质量图像、360度全景视角，因此难点在于时延、高清、交互，也就是超高清实时交互。在这种情况下超高清实时交互需要计算来提供实时交互，但是高清渲染计算在哪算？如果手机或vr头盔的gpu进行实时渲染会导致用户体验画面卡顿、手机温度过热等问题，因此vr业界正在呼唤高性能计算设备。
崔勇分析了移动vr应用的核心技术难点，边缘计算模式霞，pc端vr在pc上渲染计算高质量图像，将图像实时传输至移动端，画质体验好但移动受限制。如果让pc服务器进行高性能的图像计算，将计算好的图像实时传输到移动端，但大家看到的商店里各式各样vr产品都戴着小辫子，戴上vr眼镜玩一会儿看不到小辫子在哪就很容易摔倒。如何砍断小绳子、打造高质量移动vr呢？对此业界这几年研究了不少方案，包括预渲染和缓存预测，都难以做到实时交互。
“基于现有通信技术的mec vr成为创新思路，可通过mec提升计算能力，通过协同渲染解决带宽、时延等问题。”崔勇表示：移动vr的内容可以分为前景交互和背景交互，前景交互随机、不可预测、工作量小，但要求实时渲染，可在移动端渲染；背景交互环境连续、可预测、工作量大，可提前在边缘服务器渲染。这就需要协同渲染：一是手机gpu根据实时交互渲染前景；二是远端gpu预渲染背景并进行编码；三是将临近的编码数据帧预先传输到手机；四是手机cpu根据实时交互解压并协同显示。如果传输带宽不足，可降低背景传输带宽，离散化虚拟世界，预先渲染全景帧、采用h.264预先编码；如果遇到延时挑战，可基于移动预测，手机预取置临近的帧；手机上解码一个全景帧大约需要40ms的时延，通过并行解码显著降低解码时延。通过这样设计，可把原来手机上只能看到的每秒5到7帧的内容提升到每秒60多帧，跟手机刷新频率差不多，并且30分钟使用了手机不会发热或发烫，gpu和cpu计算资源使用率尚可，网络传输平均带宽127-130mbps。
边缘计算确实是非常重要的技术创新，崔勇认为，未来mec的新业务和新需求还包括从vr到云游戏，以及沉浸式远程教学。
Buterin提出区块链可扩展性解决方案，帮助交易所抵御黑客攻击
Xilinx_A7_K7_V7系列Cadence符号库
自动驾驶技术大战硝烟弥漫 究竟谁能笑到最后？
天网为什么能肩负着维护区块链世界安全的使命？
快速带你了解单晶硅
基于通信技术的MEC VR可提升计算能力，解决带宽和时延等问题
芯片巨头血拼先进封装，台积电等大厂占比超八成，国内产业链的机会在哪里？
Android手机电源管理设计要素
PLC指针类型与间接寻址如何使用
云计算系统中的分布式海量数据存储技术
利用无线开关量传输器搭建工业气体浓度监测系统
虹科课堂 | 湿热灭菌原理和基本概念全掌握
中国十大mcu公司有哪些
TLC优质颗粒+SSD协议 aigo高速固态U盘U393试用
PCBA打样过程的注意事项
华为matex2折叠新机多少钱 华为matex2折叠新机价格17999元起 全新双螺旋水滴铰链设计
Ovum最近对全球企业的物联网部署进行了调查涉及14个国家的1343家企业
BIO、NIO、AIO 模型工作方式
意大利议会安全委员会呼吁政府禁用华为中兴设备，但没有任何约束力
如何在振动环境下使涡街流量计能够实现准确计量