網(wǎng)訊:借著公司被微軟收購的掩護,LinkedIn已經悄悄開始啟動一項有可能震驚整個數(shù)據(jù)中心硬件市場的內部計劃。
LinkedIn的這項計劃與Facebook通過其“開放計算項目”(OCP)所做的工作有些類似。OCP打算開發(fā)一系列全新的“開源”數(shù)據(jù)中心硬件,為此Facebook已經將很多家公司的工程師集合在一起,讓所有的人暢所欲言,集思廣益。
在過去的5年里,OCP已經顛覆了數(shù)據(jù)中心市場并掀起一場類似邪教的大風暴,以致于蘋果的連網(wǎng)團隊都想要加入該組織,他們向蘋果提出了這一要求但遭到后者的反對,結果整個團隊毅然集體辭職,不久之后蘋果宣布加入OCP組織,但它流失的工程師人才卻找不回來了。
同樣,LinkedIn也想設計和生產數(shù)據(jù)中心所需的所有軟件和硬件,它正在從Facebook和Juniper挖人才。
LinkedIn的基礎設施架構與運作高級總監(jiān)扎伊德·阿里·卡恩(Zaid Ali Kahn)表示:“我們想生產服務器、交換機和數(shù)據(jù)中心需要的一切硬件,但這不是因為我們想在這方面做到精通,而是因為我們相信只有這樣我們才能將命運控制在自己手中!
這是一個能夠令思科和Juniper等專業(yè)連網(wǎng)設備廠商恐懼的趨勢。過去,只有規(guī)模最大的那些互聯(lián)網(wǎng)公司比如亞馬遜、谷歌(微博)和Facebook才會這么做,從零起步設計它們自己的IT基礎設施。
LinkedIn的規(guī)模根本無法與這些巨頭相比。它也有幾個數(shù)據(jù)中心,分別位于加州、德克薩斯州和弗吉尼亞州。它的大部分數(shù)據(jù)中心使用的空間都是從空間供應商那里租借來的,直到最近才開始在新加坡和俄勒岡設計和生產自己的連網(wǎng)設備。它設在俄勒岡波特蘭的數(shù)據(jù)中心是最先進的數(shù)據(jù)中心,其他的數(shù)據(jù)中心最終也將用新技術進行升級。
LinkedIn內部將這項計劃稱作“牛郎星計劃”(Project Altair),設計自己的連網(wǎng)軟件并在廉價商品硬件上運行的計劃被稱作“隼計劃”(Project Falco)。
1美元的超快速網(wǎng)絡
故事源自Facebook一位名叫尤瓦爾·巴卡(Yuval Bachar)的網(wǎng)絡硬件工程師,他在2013年的時候就是Facebook團隊的一員,整個團隊的目標是將超高速計算機網(wǎng)絡的生產成本降低10倍。在加盟Facebook之前,他在思科和Juniper都干過。
他希望只用1美元就能買到1GB的存儲空間,或者只用100美元就能買到一臺連網(wǎng)設備,而現(xiàn)在這樣的連網(wǎng)設備需要2500美元才能買到。他曾在一次行業(yè)會議上公開宣布過他的這個目標。
之后他就幫Facebook研制出改變整個行業(yè)的、廉價的和開源的Wedge交換機,本月早些時候Facebook宣布公司已研制出第二代Wedge交換機。
就在巴卡宣布他的目標時,LinkedIn的連網(wǎng)團隊仍在為它自己的網(wǎng)絡頭疼,他們的網(wǎng)絡已經不能滿足隨著用戶增長而水漲船高的需求。
卡恩在一篇博客文章中寫道:“產品技術運營(PEO)團隊發(fā)現(xiàn),當網(wǎng)絡路由器和交換機全部依賴于商業(yè)化廠商的時候,我們很難滿足各項應用的需求,因為各項功能、配置以及修補漏洞都是由商業(yè)化廠商掌控著!
2015年初,PEO團隊開始研制自己的交換機,他們給這款設備命名為“鴿子”(Pigeon)。同年秋天,卡恩加入了PEO團隊;它從今年初開始測試這款交換機設備。
似曾相識
與此同時,作為OCP的一份子的巴卡提出了一個類似的計劃。OCP開始研制一種由成堆的計算機、存儲驅動器和網(wǎng)絡交換機組成的開放式機架設備。
隨著一家公司的發(fā)展壯大,它只需要在這個開放式機架上添加更多的交換機、服務器和硬盤就行了。但是這種開放式機架本身的價格非常昂貴,有些東西是LinkedIn不需要的。
Facebook也面臨著同樣的問題,于是它又開發(fā)了一款精簡版的21英寸機架,后來又為這款精簡版機架設計了它自己的服務器和存儲設備。
但是幾乎沒有人能夠使用這種21英寸的機架?ǘ髡f:“可能99.5%的公司都在使用19英寸的機架!
這意味著LinkedIn要想使用Facebook的機架,它就必須與供應商談判,定制不同規(guī)格的設備。
這種情況給人一種似曾相識的感覺。巴卡主持了一個名為Open 19的項目,目的是開發(fā)廉價19英寸機架的開放標準。這種機架可以支持最多96臺服務器,總價大約為5萬美元,如果一個數(shù)據(jù)中心配備500臺這樣的機架,就可以省下2500萬美元的成本。
見識到OCP的影響力之后,很多廠商包括某些中國廠商和惠普企業(yè)都加入了進來。
全速前進,絕不后退
微軟預計收購LinkedIn的交易將在今年年底完成,微軟也是OCP組織的成員,它已經將其21英寸機架和其他的OCP技術標準化。
卡恩不愿意評論這項收購交易會帶來什么樣的影響,但是微軟已經承諾會讓LinkedIn獨立運營。據(jù)知情人士透露,牛郎星計劃、隼計劃和Open 19計劃都在全力推進之中。
這位知情人士指出,在9月份即宣布收購交易的3個月之后,公司從Juniper那里挖來了道格·漢克斯(Doug Hanks)。漢克斯是Juniper的產品管理與戰(zhàn)略總監(jiān),編寫過不少與Juniper的技術有關的書。他現(xiàn)在是LinkedIn的工程技術總監(jiān)。
卡恩說:“漢克斯直接向我報告。他最近剛剛加入公司,我們很高興能夠邀得他的加盟!
他說:“他的工作重心是建立網(wǎng)絡工程技術團隊并將它發(fā)展壯大,執(zhí)行很多的計劃,他明白軟件和連網(wǎng)如何融合在一起!
知情人士稱,漢克斯加盟后,LinkedIn計劃在18到24個月內完成自主研發(fā)連網(wǎng)設備的任務,然后義無反顧地前進。
卡恩堅持說LinkedIn的目標與Facebook的目標不同。他不想與思科領導的整個連網(wǎng)設備行業(yè)公開為敵。
實際上,他仍將從很多商業(yè)廠商那里購買連網(wǎng)設備,當然前提是它們允許他刪除商業(yè)連網(wǎng)設備上的軟件再裝上他自己的軟件。
他說:“很多廠商愿意接受這樣的條件,這樣才能滿足不同公司的各種需求!
LinkedIn并沒有像OCP組織那樣承諾將它自主研發(fā)的基礎設施軟件、交換機設計或其他硬件開源。但是卡恩也并不排除他將公開分享其技術的可能性。
卡恩說:“LinkedIn的文化是開源,因此時機合適的時候,我們就會這樣做!
實際上,LinkedIn是惠普企業(yè)的開源項目OpenSwitch的創(chuàng)始成員之一,該項目的目標是開發(fā)一款基于Linux的交換機。OpenSwitch現(xiàn)在由Linux基金會負責執(zhí)行。
與此同時,LinkedIn也一直在分享關于其網(wǎng)絡軟件的技術文章。
處于危險關頭的巨額利潤
使用商業(yè)化網(wǎng)絡設備的互聯(lián)網(wǎng)公司通常每年要花4000萬美元到1.4億美元的資金從思科、Arista和其他廠商那里購買連網(wǎng)設備。
看到一家像LinkedIn這樣的小公司都能開發(fā)自己的連網(wǎng)設備,其他公司一定會受到鼓勵去做類似的嘗試。
另一位跟LinkedIn毫無關聯(lián)但是曾經為全球最大的一家技術公司建了一個巨大的數(shù)據(jù)中心的專業(yè)人士稱,他的公司開始研制自己的網(wǎng)絡設備時,它將數(shù)據(jù)中心的成本降到了原來的十分之一,從4萬美元一臺思科交換機降到了4000美元一臺廉價的商品交換機,這些商品交換機能夠運行它自主研發(fā)的軟件。
知情人士稱:“Arista、思科、Juniper,它們本身也都是推動這場大風暴的一份子。谷歌、亞馬遜和Facebook那些大規(guī)模的互聯(lián)網(wǎng)公司都是為了經濟效益這么做。對它們來說,這關乎利潤。這比開發(fā)它們自己的連網(wǎng)設備代價更低。在LinkedIn,成本根本不是需要最優(yōu)先考慮的事務。它們要的是完全掌控用戶體驗,掌控與用戶體驗有關的一切,然后將它標準化!