SD-WAN三种不同场景的部署和实践
前两天和公司同事聊到网络界的技术牛人，大家无意中聊到bgp4的草案最早提出者tony li，（一位思科前辈），20多年前提出的bgp4协议无论在今天互联网、云数据中心的vxlan evpn，还是基于mpls、segemntrouting等骨干网络都依然在使用和传承发展;另一个神奇人物就是nick mckeown教授，sdn架构和openflow最早提出者之一，现在又转向主导的可编程语言p4并创立barefoot networks，nick教授在技术创新并商业化上名利双收。今天不论最新的互联网技术、最热的云网融合和sdn网络都依然传承者这两位传奇人物的思想和理念。
感慨之余，2018伊始市场上一系列sd-wan部署案例发布将sd-wan再次掀起一个新高潮，谈到sd-wan，最近网上有很多不错文章，尤其是很多写sd-wan技术原理、发展历史、特色功能等等，但是从sd-wan具体实践部署的角度文章不算太多，作为一位老网工，历经了数次广域网技术的大转型，最近参与几个大型基于sdn的wan重构建设项目，在sdn技术发展十周年之际，抱砖引玉从sd-wan实际部署的角度出发分享一些心得，与大家共勉吧。
本文将分享三种不同场景的sd-wan的部署案例，包括：sd-wan接入-基于internet edge解决方案，sd-wan骨干网-基于srte 流量调度的core解决方案，以及基于多厂商wan的sdn协同控制器或业务协同编排器。这三个场景比较有代表性，也是目前遇到的典型的sd-wan的需求，下图以大地云网的架构示意图做参考，便于大家理解！
第一类部署场景：
sd-wan接入服务 ，也是最典型和最通俗的场景，有时也称为sd-wan edge 解决方案，运营商可以用这个技术作为mpls互补或下一代mpls替代，企业可以利用这个技术实现分支机构按需组网。
代表客户案例：2018年3月 南凌科技宣布“成为国内第一家有能力为客户提供全国范围内集mpls vpn、ipsec vpn、sd-wan等多种应用的广域网解决方案服务商”。
市场需求情况：随着企业上云和广域网按需接入的需求日益增加，传统的mstp和mpls等专线业务由于成本和部署周期长等问题已经难以满足云和互联网时代的需求，面向基于互联网和pop路径选择的sd-wan是技术随之诞生，这是一种面向分支灵活接入的sdn-wan 部署场景。由于目前国内运营商mpls vpn网络的已经大规模部署，短期内运营商不会用sd-wan替换mpls或其他专线业务，但是会利用sd-wan技术丰富mplsvpn业务或者做为最后一公里的接入技术。
主要的技术实现：其实sd-wan在技术上没有本质上的革新，但sd-wan在理念上有了新的突破，融入了sdn控制思想结合pop线路sla探测技术，同时可以实现云网一体的协同部署，技术实现如图所示 ：sd-wan通用技术及通用功能不在这里赘述，前两天有篇文章写的非常详细，这里从实际部署的角度谈谈几点考虑：
在sd-wan设计和部署时，在中国需要考虑南北运营商internet瓶颈的问题，客户部署设计时会选择在多个机房部署多线pop节点，在每个pop节点部署vpe设备，各个pop节点的vpe 通过专线组建骨干网保障sd-wan汇聚上来的流量sla，在这个案例中 pop节点的vpe 通过客户的mpls pe节点来组建（在其他项目中我们采用srte作为骨干网流量调度）。在一个大sd-wan部署时，每个cpe会根据控制器的下发列表探测并选择最佳的pop节点，并连接最佳运营商线路的vpe，在sd-wan设计时edge和core都需要考虑线路的sla保障，再利用sdn控制器的部署全网统一的路由，安全和qos的策略部署和控制，从而解决基于internet接入服务质量问题和全网统一策略部署问题；
另一个要解决的问题是sd-wan的租户如何与现网的mpls租户对接（租户分支机构有可能是sd-wan线路，有的是mpls专线混合组网），前面提到目前几大运营商基本上都已经有自己mpls网络，sd-wan与mpls vpn的对接是必须考虑的问题，我们在pop点的vpe如何与 mpls pe节点实现自动化对接上有多重方案可以实现，包括纳管pe， option b，overlay等等；
对于cpe的自动部署与传统路由设备包括线路之间的的备份和负载分担也是sd-wan能否成功的关键因素，由于现在多数厂家的sd-wan 控制器与 cpe盒子是紧耦合，导致后期被厂商锁定，因此有几点建议考虑：如cpe盒子是否支持openwrt？ 小盒子 zt-pnp自动部署机制如何（防火墙穿越能力）？ cpe如何自动选择延时最小或带宽最佳的接入pop点？ 能否做到即插即用、自动连接、自动切换。
对于整个系统的核心是sdn控制器，控制器的可靠性、集群、租户自服务管理 和易用性也不可忽视，作为一个运营商通常还需要 sd-wan 控制器的北向与现有的bss/oss对接集成也是要考虑。 虽然sd-wan没有大的革新技术，但一个完整和成熟的sd-wan方案技术上也不简单，sd-wan带来的部署运维简单易用是明显的，而且企业不再需要专业的ccie人员设计和运维，对于分支机构的扩展和部署，传统的mpls部署可能需要几个月，而现在理论上分钟级就可以了。
第二类部署场景：
面向服务商和大企业的sd-wan核心骨干网调度（包括dci），典型场景：大型运营商 和ott客户的sd-wan骨干调度（包括dci）， 大企业 sd-wan核心骨干网。代表客户案例：google b4的商用部署 sd-wan经典案例项目（2012年 发布）和2018年2月中国工商银行发布基于mpls骨干网的sdn部署。
主要的市场需求：sd-wan骨干调度核心思想是流量调度和基于多租户的服务和管理，有时候我们也称之为sd-wan dci/ core解决方案，这个方案和前面提到的基于互联网的sd-wan edge在功能和定位截然不同，但两个方案定位互补。
主要的技术实现，目前主要有三类方式：
第一类基于白牌机+openflow sdn控制器-google b4就是基于这个方案（2010-2012年），google b4的核心是它的te调度和算法而且它巧妙地避开了openflow的众多缺陷，包括基于源和目的地址配合dscp作为流表的转发策略，但项目其关键技术细节（如sdn控制器平台算法）即不对外公布，也不对外销售，后来者虽然有模仿但也很少能超越，除了google，我说了解到一些客户对这个组合方案反馈还是有些问题，包括白牌机对 srte 支持能力 、 bfd/tunnel 支持性能和数量 ， 路由策略和vpn能力 ，交换机流表和端口缓存的大小 等等，毕竟是交换机的方案也不能勉为其难，更何况连nick mckeown 现在又转向主导的可编程语言p4并创立barefoot networks;当然目前业界有一种新的思路基于白牌机的overlay方案，利用vpe配合白牌机来解决上面提到的问题，vpe与交换机互补来实现流量调度和路由策略等功能，由于篇幅问题这里就不在展开讨论;
第二类有基于 mpls +sdn控制器实现全网的流量调度和vpn租户管理- 类似工行sd-wan骨干网（2017发布），mpls te多年前就有在部署，就目前运营商客户部署情况看，绝大部分抱怨mpls te的部署过于复杂因而真正在生产网te隧道使用的并不多，由于mpls成熟有余先进不足，这里就不想过多的赘述 ;
第三类方案也是笔者更希望看到的，是基于sr（segment routing）实现流量调度和管理sr+sdn控制器，和mpls的网络类似，但是sr可议基于源头组建一个完整的lsp path而且和现有的mpls网络可议兼容， 因为sr也是以标签交换为基础的， 只需要对现有的igp协议进行简单的扩展，就可以实现te、frr、mpls vpn等功能， 包括流量工程te的自动下发、自动计算、自动调整、自动引流和自动调度。
基于srte的sdn控制器目前在业界属于非常领先的技术，sr的基础转发表甚至比ldp更简洁，利用了源路由技术与sdn理念完美结合，在流量te管理方面，srte比rsvp-te状态少很多，也不需要ldp/rsvp信令那么复杂。但是目前各个硬件厂商（包括第三方控制器+sr路由器）在srte具体实现还是有一定差距， 但有几点是部署时需要考虑的：
如何根据链路质量（load/loss/delay）动态实时调整te路径以实现全局负载均衡
隧道快速倒换策略和逃生算法（如思科pbts技术）、
配置回滚的一致性、离线流量规划、
te路径的对称故障检测等等。
各家方案功能差别很大， 在国内能真正完整实现基于srte的sdn控制器更是屈指可数。大地云网作为国内专注于sdn整体架构和软件技术平台，经过2年多技术攻关和研发测试的创业沉默期，终于成功力克这项艰巨的技术挑战，首次实现了完整sr-te的商用控制器平台并开始商业部署。
第三类部署场景：
基于多厂商的sdn协同控制器或业务协同编排器，目前大型运营商和ott客户和超大企业在sd-wan多厂商异构环境下已经开始考虑。
代表客户案例：2018年3月 中国联通宣布”国内首个大型运营商云网融合商业sdn成功上线（基于联通a网的 sd-wan dci系统）”主要的市场需求：在前面两大类sd-wan在部署时，客户往往需要多个厂商设备实现一种平衡，客户是不希望被厂商锁定，但目前多数sd-wan的网络还是封闭的管理系统，基于多厂商的sdn协同控制器或业务协同编排器是一个难题，互操作和资源统一管理问题是需要上层sdn协同控制器来解决，这类解决方案对大型sdn网络运营尤其重要 。目前几大运营商和ott行业都意识到或开始考虑这个问题，相信将来企业客户随着sdn部署也会有类似需求。
主要的技术实现：以某运营商为例，两年前开始预研云环境下mpls骨干网多厂商控制器协同工作问题，经过近两年的设计、研发、测试和联调等各个环节的艰辛努力，该客户成为国内首家在全国骨干广域网上实现云网一体化服务的运营商。 同时，也开创了在国内大型sdn项目中，选择独立的核心sdn软件企业与多家大型网络设备厂商通力合作，以确保运营商能够全面主导、把控sdn运营需求和技术架构方向及决策话语权，为最终云网一体化产品按时商用上线提供了一个成功案例。
但是多厂商的协同控制器需要根据客户的业务实际情况来定制开发，需要sdn软件厂商有非常强的研发能力和行业经验，包括对厂商硬件的北向接口规范、云网技术的深入了解（如 vxlan evpn，l2/l3 mpls，sr te、neutron 、docker cni、odl 等）、主流公有云系统的对接、以及和客户oss/bss业务系统集成等，实际做起来是非常的复杂，不是一般的sdn厂商和公司玩的起的。 如图所示，随着sd-wan多场景和多厂商的部署越来越多，多厂商的协同管理和统一编排将成为未来sd-wan的重要话题。
最后，展望一下sd-wan的未来
sd-wan是在互联网高速发展和云网融合的大背景下的新思路和架构创新，sd-wan在理念上的突破远远大于在技术层面革新， 由于时间和篇幅原因，这次和大家分享的三类sd-wan相关案例和部署场景，表面上看似三个独立sd-wan方案， 但从架构而言，又是一个三维一体的完整架构。
今天sd-wan的旅程已经开始，sd-wan作为一种新的业务模式带来的价值和意义前景不可估量，相信未来的sdn能够更好理解应用并为应用服务（intent-based sdn和 流量智能分析），提供精准的智能调度能力（尤其在srte，pop探测选择算法），能提供更强大的智能运维工具为underlay和overlay保驾护航，除此之外未来的sdn的开放性、通用标准和互操作（不被厂商锁定）也是我们一直在追求的目标，不忘初心，让我们拭目以待。
人工智能与移动医疗：大白真的来了吗？
360手机N6Pro拆解 内部做工如何
安富利赋能电动汽车走上快充、超充之路
FCM32F103CBT6软硬件兼容STM32F103CBT
新型FPGA数据架构的SmartNIC设计方案赋能5G网络和数据中心
SD-WAN三种不同场景的部署和实践
黑鲨5系列中国航天版正式发布
ADAYO华阳精机获得弗迪动力的高度认可
中国联通与宝马就下一代移动通信业务达成合作
NVIDIA 为部分大型亚马逊 Titan 基础模型提供训练支持
无人机试点计划：苹果用无人机来优化地图，已获得测试批准
英飞凌开始批量生产首款全碳化硅模块，在PCIM上推出CoolSiC™系列产品的其他型号
中兴通讯激活行业与市场活力，实现业务较快增长
蚂蚁的定位导航能力给机器人及无人车的设计启示
关于AI医疗企业的行业前景与投资机会详解
多个开关控制一个灯的方法电路图
VR产业未来的发展将走向何方
微软Edge浏览器支持历史记录和选项卡同步
求一种700M干扰分析和规避方案
深开鸿携手行业专家共同完成行业扩展兼容性测评方案设计
感慨之余，2018伊始市场上一系列sd-wan部署案例发布将sd-wan再次掀起一个新高潮，谈到sd-wan，最近网上有很多不错文章，尤其是很多写sd-wan技术原理、发展历史、特色功能等等，但是从sd-wan具体实践部署的角度文章不算太多，作为一位老网工，历经了数次广域网技术的大转型，最近参与几个大型基于sdn的wan重构建设项目，在sdn技术发展十周年之际，抱砖引玉从sd-wan实际部署的角度出发分享一些心得，与大家共勉吧。
本文将分享三种不同场景的sd-wan的部署案例，包括：sd-wan接入-基于internet edge解决方案，sd-wan骨干网-基于srte 流量调度的core解决方案，以及基于多厂商wan的sdn协同控制器或业务协同编排器。这三个场景比较有代表性，也是目前遇到的典型的sd-wan的需求，下图以大地云网的架构示意图做参考，便于大家理解！
第一类部署场景：
sd-wan接入服务 ，也是最典型和最通俗的场景，有时也称为sd-wan edge 解决方案，运营商可以用这个技术作为mpls互补或下一代mpls替代，企业可以利用这个技术实现分支机构按需组网。
代表客户案例：2018年3月 南凌科技宣布“成为国内第一家有能力为客户提供全国范围内集mpls vpn、ipsec vpn、sd-wan等多种应用的广域网解决方案服务商”。
市场需求情况：随着企业上云和广域网按需接入的需求日益增加，传统的mstp和mpls等专线业务由于成本和部署周期长等问题已经难以满足云和互联网时代的需求，面向基于互联网和pop路径选择的sd-wan是技术随之诞生，这是一种面向分支灵活接入的sdn-wan 部署场景。由于目前国内运营商mpls vpn网络的已经大规模部署，短期内运营商不会用sd-wan替换mpls或其他专线业务，但是会利用sd-wan技术丰富mplsvpn业务或者做为最后一公里的接入技术。
主要的技术实现：其实sd-wan在技术上没有本质上的革新，但sd-wan在理念上有了新的突破，融入了sdn控制思想结合pop线路sla探测技术，同时可以实现云网一体的协同部署，技术实现如图所示 ：sd-wan通用技术及通用功能不在这里赘述，前两天有篇文章写的非常详细，这里从实际部署的角度谈谈几点考虑：
在sd-wan设计和部署时，在中国需要考虑南北运营商internet瓶颈的问题，客户部署设计时会选择在多个机房部署多线pop节点，在每个pop节点部署vpe设备，各个pop节点的vpe 通过专线组建骨干网保障sd-wan汇聚上来的流量sla，在这个案例中 pop节点的vpe 通过客户的mpls pe节点来组建（在其他项目中我们采用srte作为骨干网流量调度）。在一个大sd-wan部署时，每个cpe会根据控制器的下发列表探测并选择最佳的pop节点，并连接最佳运营商线路的vpe，在sd-wan设计时edge和core都需要考虑线路的sla保障，再利用sdn控制器的部署全网统一的路由，安全和qos的策略部署和控制，从而解决基于internet接入服务质量问题和全网统一策略部署问题；
另一个要解决的问题是sd-wan的租户如何与现网的mpls租户对接（租户分支机构有可能是sd-wan线路，有的是mpls专线混合组网），前面提到目前几大运营商基本上都已经有自己mpls网络，sd-wan与mpls vpn的对接是必须考虑的问题，我们在pop点的vpe如何与 mpls pe节点实现自动化对接上有多重方案可以实现，包括纳管pe， option b，overlay等等；
对于cpe的自动部署与传统路由设备包括线路之间的的备份和负载分担也是sd-wan能否成功的关键因素，由于现在多数厂家的sd-wan 控制器与 cpe盒子是紧耦合，导致后期被厂商锁定，因此有几点建议考虑：如cpe盒子是否支持openwrt？ 小盒子 zt-pnp自动部署机制如何（防火墙穿越能力）？ cpe如何自动选择延时最小或带宽最佳的接入pop点？ 能否做到即插即用、自动连接、自动切换。
对于整个系统的核心是sdn控制器，控制器的可靠性、集群、租户自服务管理 和易用性也不可忽视，作为一个运营商通常还需要 sd-wan 控制器的北向与现有的bss/oss对接集成也是要考虑。 虽然sd-wan没有大的革新技术，但一个完整和成熟的sd-wan方案技术上也不简单，sd-wan带来的部署运维简单易用是明显的，而且企业不再需要专业的ccie人员设计和运维，对于分支机构的扩展和部署，传统的mpls部署可能需要几个月，而现在理论上分钟级就可以了。
第二类部署场景：
面向服务商和大企业的sd-wan核心骨干网调度（包括dci），典型场景：大型运营商 和ott客户的sd-wan骨干调度（包括dci）， 大企业 sd-wan核心骨干网。代表客户案例：google b4的商用部署 sd-wan经典案例项目（2012年 发布）和2018年2月中国工商银行发布基于mpls骨干网的sdn部署。
主要的市场需求：sd-wan骨干调度核心思想是流量调度和基于多租户的服务和管理，有时候我们也称之为sd-wan dci/ core解决方案，这个方案和前面提到的基于互联网的sd-wan edge在功能和定位截然不同，但两个方案定位互补。
主要的技术实现，目前主要有三类方式：
第一类基于白牌机+openflow sdn控制器-google b4就是基于这个方案（2010-2012年），google b4的核心是它的te调度和算法而且它巧妙地避开了openflow的众多缺陷，包括基于源和目的地址配合dscp作为流表的转发策略，但项目其关键技术细节（如sdn控制器平台算法）即不对外公布，也不对外销售，后来者虽然有模仿但也很少能超越，除了google，我说了解到一些客户对这个组合方案反馈还是有些问题，包括白牌机对 srte 支持能力 、 bfd/tunnel 支持性能和数量 ， 路由策略和vpn能力 ，交换机流表和端口缓存的大小 等等，毕竟是交换机的方案也不能勉为其难，更何况连nick mckeown 现在又转向主导的可编程语言p4并创立barefoot networks;当然目前业界有一种新的思路基于白牌机的overlay方案，利用vpe配合白牌机来解决上面提到的问题，vpe与交换机互补来实现流量调度和路由策略等功能，由于篇幅问题这里就不在展开讨论;
第二类有基于 mpls +sdn控制器实现全网的流量调度和vpn租户管理- 类似工行sd-wan骨干网（2017发布），mpls te多年前就有在部署，就目前运营商客户部署情况看，绝大部分抱怨mpls te的部署过于复杂因而真正在生产网te隧道使用的并不多，由于mpls成熟有余先进不足，这里就不想过多的赘述 ;
第三类方案也是笔者更希望看到的，是基于sr（segment routing）实现流量调度和管理sr+sdn控制器，和mpls的网络类似，但是sr可议基于源头组建一个完整的lsp path而且和现有的mpls网络可议兼容， 因为sr也是以标签交换为基础的， 只需要对现有的igp协议进行简单的扩展，就可以实现te、frr、mpls vpn等功能， 包括流量工程te的自动下发、自动计算、自动调整、自动引流和自动调度。
基于srte的sdn控制器目前在业界属于非常领先的技术，sr的基础转发表甚至比ldp更简洁，利用了源路由技术与sdn理念完美结合，在流量te管理方面，srte比rsvp-te状态少很多，也不需要ldp/rsvp信令那么复杂。但是目前各个硬件厂商（包括第三方控制器+sr路由器）在srte具体实现还是有一定差距， 但有几点是部署时需要考虑的：
如何根据链路质量（load/loss/delay）动态实时调整te路径以实现全局负载均衡
隧道快速倒换策略和逃生算法（如思科pbts技术）、
配置回滚的一致性、离线流量规划、
te路径的对称故障检测等等。
各家方案功能差别很大， 在国内能真正完整实现基于srte的sdn控制器更是屈指可数。大地云网作为国内专注于sdn整体架构和软件技术平台，经过2年多技术攻关和研发测试的创业沉默期，终于成功力克这项艰巨的技术挑战，首次实现了完整sr-te的商用控制器平台并开始商业部署。
第三类部署场景：
基于多厂商的sdn协同控制器或业务协同编排器，目前大型运营商和ott客户和超大企业在sd-wan多厂商异构环境下已经开始考虑。
代表客户案例：2018年3月 中国联通宣布”国内首个大型运营商云网融合商业sdn成功上线（基于联通a网的 sd-wan dci系统）”主要的市场需求：在前面两大类sd-wan在部署时，客户往往需要多个厂商设备实现一种平衡，客户是不希望被厂商锁定，但目前多数sd-wan的网络还是封闭的管理系统，基于多厂商的sdn协同控制器或业务协同编排器是一个难题，互操作和资源统一管理问题是需要上层sdn协同控制器来解决，这类解决方案对大型sdn网络运营尤其重要 。目前几大运营商和ott行业都意识到或开始考虑这个问题，相信将来企业客户随着sdn部署也会有类似需求。
主要的技术实现：以某运营商为例，两年前开始预研云环境下mpls骨干网多厂商控制器协同工作问题，经过近两年的设计、研发、测试和联调等各个环节的艰辛努力，该客户成为国内首家在全国骨干广域网上实现云网一体化服务的运营商。 同时，也开创了在国内大型sdn项目中，选择独立的核心sdn软件企业与多家大型网络设备厂商通力合作，以确保运营商能够全面主导、把控sdn运营需求和技术架构方向及决策话语权，为最终云网一体化产品按时商用上线提供了一个成功案例。
但是多厂商的协同控制器需要根据客户的业务实际情况来定制开发，需要sdn软件厂商有非常强的研发能力和行业经验，包括对厂商硬件的北向接口规范、云网技术的深入了解（如 vxlan evpn，l2/l3 mpls，sr te、neutron 、docker cni、odl 等）、主流公有云系统的对接、以及和客户oss/bss业务系统集成等，实际做起来是非常的复杂，不是一般的sdn厂商和公司玩的起的。 如图所示，随着sd-wan多场景和多厂商的部署越来越多，多厂商的协同管理和统一编排将成为未来sd-wan的重要话题。
最后，展望一下sd-wan的未来
sd-wan是在互联网高速发展和云网融合的大背景下的新思路和架构创新，sd-wan在理念上的突破远远大于在技术层面革新， 由于时间和篇幅原因，这次和大家分享的三类sd-wan相关案例和部署场景，表面上看似三个独立sd-wan方案， 但从架构而言，又是一个三维一体的完整架构。
今天sd-wan的旅程已经开始，sd-wan作为一种新的业务模式带来的价值和意义前景不可估量，相信未来的sdn能够更好理解应用并为应用服务（intent-based sdn和 流量智能分析），提供精准的智能调度能力（尤其在srte，pop探测选择算法），能提供更强大的智能运维工具为underlay和overlay保驾护航，除此之外未来的sdn的开放性、通用标准和互操作（不被厂商锁定）也是我们一直在追求的目标，不忘初心，让我们拭目以待。
人工智能与移动医疗：大白真的来了吗？
360手机N6Pro拆解 内部做工如何
安富利赋能电动汽车走上快充、超充之路
FCM32F103CBT6软硬件兼容STM32F103CBT
新型FPGA数据架构的SmartNIC设计方案赋能5G网络和数据中心
SD-WAN三种不同场景的部署和实践
黑鲨5系列中国航天版正式发布
ADAYO华阳精机获得弗迪动力的高度认可
中国联通与宝马就下一代移动通信业务达成合作
NVIDIA 为部分大型亚马逊 Titan 基础模型提供训练支持
无人机试点计划：苹果用无人机来优化地图，已获得测试批准
英飞凌开始批量生产首款全碳化硅模块，在PCIM上推出CoolSiC™系列产品的其他型号
中兴通讯激活行业与市场活力，实现业务较快增长
蚂蚁的定位导航能力给机器人及无人车的设计启示
关于AI医疗企业的行业前景与投资机会详解
多个开关控制一个灯的方法电路图
VR产业未来的发展将走向何方
微软Edge浏览器支持历史记录和选项卡同步
求一种700M干扰分析和规避方案
深开鸿携手行业专家共同完成行业扩展兼容性测评方案设计