什么是SDN?

VMware笑到最后

Posted by i9u on August 11, 2020

什么是SDN?

注意!!!!这是我读《新一代SDN VMWARE NSX网络原理与实践》的笔记,大部分内容出自该书。

SDN全名是Software-Defined Networking。它不是单一协议,而是一类网络架构和设计思路,强调控制与转发的解耦,以及通过软件接口对网络进行编程和控制。

这里归纳几个常见特征:

  • 转控分离

  • 有可编程API

  • 控制逻辑可以集中,实际控制器可以分布式部署

  • 支持网络业务自动化

    前两点有助于理解SDN的核心,但不能只凑齐两条就给所有网络定性,还要看具体架构怎样控制转发行为。

OpenFlow是SDN中具有代表性的南向接口协议之一,但是SDN≠OpenFlow。因为SDN是一种框架,而 OpenFlow 是这个框架中的一种协议。

网络虚拟化≠SDN,网络虚拟化有多种实现方式,这里主要讨论数据中心中基于“Overlay”的方案。这类技术能够缓解VLAN数量和物理承载网络的MAC表容量限制,跨越三层网络打通二层隧道,适用于超大型数据中心和多租户数据中心以及双活/灾备数据中心。

Overlay可以由物理交换机或服务器hypervisor中的虚拟交换机来封装。封装点的位置不能单独决定它是不是SDN,还要看控制、转发与可编程接口的设计。网络虚拟化与SDN可以结合,但不是同一个概念;书中说的“新一代SDN”,主要是在讨论两者结合的方案。

NFV同样也不是SDN,它的目标是利用虚拟化技术在标准的硬件设备上运行多个网络功能软件来虚拟出多种网络设备(vSwitch、vRouter、vFirewall),它们可能有统一的控制层面,NFV和SDN是互补关系。比如VMware NSX就具备NFV属性——NSX使用x86服务器的软件来实现各种网络功能,这里主要从网络虚拟化的角度理解NSX,不需要把这些分类当成互相排斥的标签。另外,OpenStack和CloudStack是云管理平台,可以与网络控制方案集成;OVS是一款开源虚拟交换机,支持OpenFlow和OVSDB,可以作为SDN方案中的转发组件。

SDN框架

该图是SDN框架中的各个层面,直观阐述了SDN框架:

image-20200811110949644

  • 基础设施:负责转发数据的设备,它可以是物理设备也可以是虚拟化平台里的vSwitch

  • 南向接口:负责控制器和基础设施通信,OpenFlow是其中一种实现。

  • 控制层:负责网络控制逻辑,可以由一个或多个协同工作的控制器实现。

  • 北向接口:供外部应用调用控制器的能力,比如获取状态和下发策略,具体API取决于实现。

  • 应用层:最终的应用程序,它可能是监控运维平台,通过北向接口下发配置或者获取状态,控制器收到后通过南向接口下发到最终转发设备上。

SDN相关组织和厂商对SDN的态度

这一节按书中的历史背景来读,后文的厂商关系和产品演进也一样。组织成员、产品能力以及“主流”的判断会随时间改变;关于厂商动机的表述是读书笔记里的理解,不是已经核实的公司声明。

由于不同厂家和科研机构有不同的见解和利益,SDN的发展涉及多个标准组织、开源社区和厂商,并没有一个组织包办所有工作。不同的IT厂商在产品线、功能和特性上的差异,因此它们看到SDN的角度也不尽相同,应对SDN浪潮的手段也不同。

目前,SDN领域最有影响的组织是ONF(open networking foundation)。由google、facebook、Microsoft等公司共同发起(虽然它们都不是网络设备制造商),成立于 2011 年,最早定义并希望推动SDN标准化的非营利组织,科研和活动经费来自会员公司的赞助和年费,主要工作成果是制定了OpenFlow、OF-Config版本标准。

2013年由于不满ONF制定的游戏规则,18家IT厂商联合推动了ODL(open daylight)的成立。这 18 家厂商包括brocade、Cisco、citrix、ericsson、IBM、Juniper、red hat、Microsoft、操,太多了。这18家绝大多数是IT行业内巨头,多为网络设备制造商。

比较ONF和ODL这两个组织的异同:

image-20200811111129437

ONF想摆脱厂商的限制,标准化协议和硬件,设备商主导的ODL则不同,希望部分接口标准化,保证设备厂商的利益,防止白牌交换机侵蚀市场。虽然设备商发起了ODL组织,但也没完全抛弃ONF。换句话说,由于OpenFlow的影响力大,而设备厂商也没有牛到能完全另起炉灶的程度。Google、Facebook强硬站在ONF这边,没有加入ODL。AWS是特例,两边都没加入,封闭发展自己的AWS。

很多熟悉的厂商既是 ONF 会员,也是 ODL 的黄金、白金会员。它们开放自己的设备接口,但又加入自己特色功能,保持设备的独特竞争力。大多数使用hybrid模式,而非纯OpenFlow方法实现SDN。对于API,除了支持OpenFlow外,还加入JSON API、XMPP、Python API等。而芯片方面,有些使用商用芯片,有些混合使用商用、自研芯片。

在内部研发和并购中,以VMware收购Nicira和Cisco收购Insieme最为重磅,前者收购后推出NSX,后者推出了ACI,两者都是将SDN和近年兴起的网络虚拟化技术完美融合后的成果。Microsoft的Hyper-V在2012版本后增加其自主研发的NVGRE协议网络虚拟化功能,但没强调SDN且刻意淡化OpenFlow。此外Juniper收购SDN初创公司contrail后推出同名的解决方案。

服务器虚拟化的日趋成熟

1999年VMware推出第一套x86虚拟化,2003年存储巨头EMC收购。2008年Microsoft推出基于Windows server的Hyper-V解决方案,底层安装windows server后可以开启虚拟机,Microsoft的公有云Azure就是基于Hyper-V搭建;Citrix公司则叫XenServer,通过收购剑桥大学的Xen开源系统并进行二次开发。此外使用较多的还有Red Hat主导的KVM开源虚拟化技术。

网络虚拟化的起源和发展

现今的网络虚拟化技术(特指主机overlay的网络虚拟化)会兴起,主要因为现今数据中心的三个大问题:

  • 虚拟机迁移范围受到网络架构限制——网络的复杂性

    虚拟机迁移若想尽量不中断已有业务连接,通常需要保持业务IP地址和网络可达性。这里要区分迁移流量使用的网络和虚拟机的业务网络:迁移网络可以走三层,不代表业务地址和网关设计就没有限制,具体还要看vSphere版本及部署条件。也不能简单认为二层交换一定比三层转发效率高。在需要跨位置保持业务网络的场景下,“大二层”技术是其中一种做法。

  • 虚拟机规模受到网络规格限制——网络设备MAC地址数量级不够

    大二层的环境下,为了设备的二层地址表大小决定了云计算环境下虚拟机规模上限。接入交换机一般转发表都较小,更加限制可承载的虚拟机数量,若替换成和核心设备一个档次,则成本又会增加,减少接入设备的压力可以是分离网关,如果采用多个网关分担虚拟机的流量,但是这样也带来成本上升,多买一些核心和网关设备。

  • 网络隔离、分离限制——网络设备的VLAN数量不够

    主流的网络隔离技术是VLAN,受限在VLAN的标准定义中只有12个bit,即可用数量为4000个左右,对于公有云而言是大大不够。

对于小型的数据中心,现在有网络技术如虚拟机感知(VEPA/802.1Qbg)、二层网络扩展(TRILL/SPB/FabricPath)、数据中心间二层技术(EVI/OTV)等,可以很好满足业务,上述限制不会成为瓶颈。缺点是技术完全依赖物理设备本身的技术改良。而对于大型的数据中心,能够更彻底解决这些问题的技术开始出现,它就是名为Overlay的网络虚拟化架构技术。

Overlay是叠加在原本网络上的虚拟网络技术,相对应底层的物理网络则名为Underlay,其大体的框架是对基础网络架构不进行大规模修改的情况下,实现应用在网络上的承载,并能和其他网络业务分离。这种模式是对传统技术的优化而被提出的,行业内早期就有Overlay技术,比如RFC3378(Ether IP)就是早期运行在网络上的二层Overlay技术,后来H3C和Cisco都在开发自己的私有二层Overlay技术,分别是EVI(Ethernet Virtual Interconnection)和OTV(Overlay transport virtualization),EVI和OTV都是用于解决数据中心之间的二层互联和业务扩展问题,对于Underlay,IP可达是基础,还要满足封装后的MTU及具体方案的协议要求。它们主要解决跨数据中心互联,不能据此认为所有规模和隔离问题都已经解决。

对于Overlay的工作机制,这里只简单的表述一下。大体是运行在基于物理网络上的虚拟网络,通过二次封装使报文通过特定的隧道进行通信,它和VPN十分相似。而流量的封装点可以是物理交换机,也可以是虚拟化平台中的vSwitch。

根据封装点,Overlay的部署方式被区分出三种:

  1. Network overlay(物理交换机之间)
  2. Host overlay(vSwitch之间)
  3. Integrated overlay(vSwitch和物理交换机之间)

2008年,Cisco和VMware公司联合开发的虚拟交换机“Nexus 1000v系列”使网络管理员可以有效地管理虚拟机网络,并统一管理物理网络。后来,两家公司联合研发的VXLAN协议被运用在vSphere VDS和Nexus 1000v之上,VXLAN是常见的二层Overlay封装协议之一,公开规范见RFC 7348;协议规范公开和某个实现是否开源是两回事。

这种基于主机虚拟化的Overlay技术出现,解决了以下问题:

  1. 虚拟机迁移范围受到的网络架构限制

    以VXLAN为例,它把二层帧封装后通过三层Underlay传输,可以利用底层的ECMP,但仍要满足VTEP能力、路由可达性和MTU等条件。

  2. 虚拟机规模受到网络规格限制

    封装后,Underlay主要看到VTEP的外层地址,不必在整张物理网络里学习所有虚拟机的MAC。但VTEP或虚拟交换机仍有MAC、邻居和隧道表项容量限制。

  3. 网络隔离、分离能力限制

    VXLAN使用24位VNI(VXLAN Network Identifier),理论标识空间约为1677万。VNI不是VLAN ID,这也不代表一台设备就能同时承载这么多网段,实际规模仍受设备和实现限制。

Nexus 1000v是当时重要的分布式虚拟交换机产品之一,VMware 获得了支持虚拟机所需的高级网络功能,Cisco则通过出售license获得利润。后来,Nicira的横空出世改变了局面,它提出了完整的网络虚拟化平台(NVP),逐渐为AT&T、eBay、NTT以及Rackspace等IT巨头的数据中心提供虚拟交换平台。它基于SDN理念,NVP的网络虚拟化平台做得更好,但不宜把SDN和OpenFlow的发展归结为一家公司

NVP解决方案实现了:

  • Overlay层面的转控分离
  • 自有虚拟交换机OVS系统,更多虚拟化功能
  • OpenFlow集中管控,有可编程API
  • STT私有Overlay技术,能实现类似VXLAN功能

这里更值得关注的是把逻辑网络和策略从物理位置中抽离出来。虚拟机迁移不一定改变业务IP和端口,控制器也不是只能匹配五元组,更不是改用MAC地址就自动解决了所有问题。SDN与网络虚拟化结合,可以让策略随着工作负载的位置变化而调整。

Nicira提出的这个架构引起了业内强烈的震荡,也引来了很多的融资,后来各大IT巨头都想收购这家初创公司,尤其是Cisco和VMware。前者想把Nicira的NVP融入到Nexus 1000v系统中,做到真正的SDN网络虚拟化;后者认为自己是服务器虚拟化的领头羊,收购Nicira能够抢占不成熟的网络虚拟化系统,而且再也不用依靠Cisco的Nexus 1000v,还能和其他网络供应商做更好的融合方案。

最终,VMware笑到了最后。2012年7月它收购了Nicira。2013年VMware发布融合NVP后的产品,即NSX解决方案,这意味着VMware和Cisco的合作基本告一段落。Cisco无奈在后续的Nexus 1000v中逐渐加入了对Hyper-v和KVM的支持,并在2013年发布了ACI解决方案。

总结

  • SDN是为了改变当前IT架构部署和运维复杂而提出的
  • 斯坦福大学的早期OpenFlow研究和Nicira等公司的工作,对SDN的发展有重要影响
  • SDN强调控制与转发解耦、网络可编程,OpenFlow是南向接口的一种实现
  • 网络虚拟化用于抽象和隔离网络资源,Overlay是数据中心里常见的实现方式之一
  • SDN与网络虚拟化可以结合,简化数据中心网络的部署与运维
  • VMware收购了Nicira之后推出了融合SDN 和网络虚拟化的解决方案,即NSX。
分享这篇文章 LinkedIn X