微軟如何降低骨干網(wǎng)的成本

  Iccsz訊 光網(wǎng)絡(luò )非常昂貴，像微軟這一云服務(wù)提供商，在不考慮購買(mǎi)或租用光纖成本的前提下，每提升100Gbps的速度都需花費數萬(wàn)美元。僅微軟美國骨干網(wǎng)就需要在數千英里的光纖上傳播覆蓋35個(gè)城市的每秒數百TB的帶寬，在全球范圍內，為云服務(wù)構建和互聯(lián)數據中心網(wǎng)絡(luò )需要數億美元的資金。隨著(zhù)帶寬需求的增加，光網(wǎng)絡(luò )成本必須降低。

  云運營(yíng)商所需的光纖網(wǎng)絡(luò )比典型的一級運營(yíng)商的需求更加簡(jiǎn)單，對于只承載基于數據包的流量的點(diǎn)對點(diǎn)網(wǎng)段，容量和一致性傳輸比網(wǎng)狀連接或管理更重要。另一方面，微軟骨干網(wǎng)上的網(wǎng)絡(luò )流量十分混亂，Office 365、Azure、OneDrive(云存儲)、Bing以及一系列其他工作負載需要進(jìn)行優(yōu)化。企業(yè)營(yíng)業(yè)程序需要接近完美的可用性、高容量并且能夠靈活地跟上不可預測的用戶(hù)需求。在A(yíng)zure數據中心之間復制存儲會(huì )產(chǎn)生大量流量，但可以加以計劃并圍繞更高優(yōu)先級的流量進(jìn)行調度。

  Azure的網(wǎng)絡(luò )團隊并沒(méi)有采用通過(guò)增加更多波長(cháng)和光纖這一常規方式來(lái)提高容量，在A(yíng)CM網(wǎng)絡(luò )熱點(diǎn)研討會(huì )上，他們解釋了如何利用更高效布線(xiàn)的光纖攜帶更多數據包。

  由于密集波分復用技術(shù)(DWDM)采用可重新配置的多路復用器，可以非常高效地切換端口之間的波長(cháng)，因此彈性光網(wǎng)絡(luò )可以在通常的固定配置下利用頻譜。通過(guò)使用軟件定義廣域網(wǎng)(Microsoft SWAN)將帶寬與可變帶寬收發(fā)器和流量工程相結合，Azure工程師可以混合匹配不同形式的轉發(fā)器線(xiàn)卡和高密度互連。

  早在2015年，微軟就開(kāi)始考慮每隔15分鐘為其整個(gè)北美光纖骨干網(wǎng)收集所有100Gbps線(xiàn)路的信號質(zhì)量，并將其與微軟研究院的4000公里測試網(wǎng)絡(luò )進(jìn)行比較，以確定其光纖能夠提供的容量。光纖網(wǎng)絡(luò )通常對固定容量堅持固定調制，100Gbps線(xiàn)路始終是100Gbps線(xiàn)路。但光纖實(shí)際上可以處理更多的數據嗎?

  回顧前三個(gè)月的數據，該團隊發(fā)現，通過(guò)使用帶寬可變的發(fā)射器配置每個(gè)通道的調制方式，他們可以在相同的光纜上獲得70%的網(wǎng)絡(luò )容量。這種增長(cháng)是100,150甚至200Gbps速度的混合，大多數流量運行在150Gbps。使用25Gb而不是50Gb增量，使速度增加更為細化，能夠更高效的使用光纖，再提供86%的容量，其中大部分流量達到175或200Gbps。

  幾個(gè)月的數據可能存在誤差，所以微軟收集了兩年半的數據?；谶@些數據，微軟北美的骨干網(wǎng)10Gbps網(wǎng)段中的99%可以以150Gbps的速度運行，無(wú)需切換光纖甚至中間放大器，只需改變調制格式即可。實(shí)際上，80%的鏈路可以以175Gbps的速度運行，34%的鏈路可以以200Gbps的速度運行。

  為了獲得整個(gè)網(wǎng)絡(luò )中每秒多達145 TB的數據量，Azure開(kāi)始購買(mǎi)帶寬可變的收發(fā)器，這些收發(fā)器可根據光纖路徑的信噪比在100,150和200Gbps之間進(jìn)行切換，非常方便Wi-Fi或DSL連接，連接速度取決于網(wǎng)絡(luò )的質(zhì)量。

  收集網(wǎng)絡(luò )數據表明，特定網(wǎng)絡(luò )鏈路的信號質(zhì)量通常保持不變，除了由于光纖或光學(xué)硬件問(wèn)題導致的下降。這些下降大多數是因為光纖過(guò)度配置導致的，它只需要6.5dB的信噪比來(lái)承載100Gbps的流量，但微軟的100Gbps鏈路通常有12dB，這也是為什么它可以承載兩倍的流量。數據顯示，故障在175Gbps時(shí)增加不多，但在200Gbs時(shí)它們確實(shí)成為問(wèn)題，其中一些故障可能持續數小時(shí)。

  令人惱火的是，這些收發(fā)器關(guān)閉網(wǎng)絡(luò )鏈路以改變連接的調制平均需要68秒，并且看起來(lái)像網(wǎng)絡(luò )中的故障。大部分時(shí)間都花費在調試發(fā)送光學(xué)數據的激光器上，在不關(guān)閉激光器的情況下，改變調制只需35毫秒。因此，如果調制光纖鏈路的帶寬匹配信號變得很普遍，那么收發(fā)器將需要被設計成幫助網(wǎng)絡(luò )運營(yíng)商最大化容量而不是過(guò)度配置固定容量線(xiàn)路以避免鏈路速度變化帶來(lái)的高延遲。

  還有一個(gè)原因推動(dòng)了改變，在通常情況下，大多數光纖網(wǎng)絡(luò )的故障并不意味著(zhù)光纖根本無(wú)法工作，切斷光纖和電源故障相對較少。

  考慮到Azure光纖網(wǎng)絡(luò )中7個(gè)月的計劃外故障，在90%的情況下，故障鏈路上的信噪比仍超過(guò)3dB，足以傳輸50Gbs的數據，所以能夠根據需要切換鏈路速度可以提高可用性和容量。

  為此，微軟將其網(wǎng)絡(luò )測量和數據分析研究轉變?yōu)獒槍zure網(wǎng)絡(luò )光學(xué)層的實(shí)時(shí)性能和故障監控引擎。它還在研究如何將鏈路信號質(zhì)量提供給SWAN和Google B4等IP流量工程算法，以便他們可以利用動(dòng)態(tài)容量鏈接。

  思科，Arista，Inohi和ADVA在商業(yè)系統中展示了微軟以前向網(wǎng)絡(luò )供應商要求的改變，以提高網(wǎng)絡(luò )速度并降低Azure光纖網(wǎng)絡(luò )的成本和功耗。 即使對于云提供商來(lái)說(shuō)，動(dòng)態(tài)光纖連接仍然是一個(gè)復雜的選擇，但是更進(jìn)一步，它們可以證明是一種以比租賃新光纖更低的成本提高您自己的數據中心之間的容量和可用性的方法。