紐約時(shí)報(bào):大網(wǎng)絡(luò) 小芯片
導(dǎo)讀:美國(guó)《紐約時(shí)報(bào)》網(wǎng)絡(luò)版撰文稱(chēng),隨著互聯(lián)網(wǎng)規(guī)模不斷擴(kuò)大,數(shù)據(jù)處理量也在持續(xù)增加,因此以往利用標(biāo)準(zhǔn)系統(tǒng)來(lái)處理數(shù)據(jù)的方式已經(jīng)不能適應(yīng)時(shí)代的發(fā)展,而使用一些規(guī)模相對(duì)較小,但數(shù)量龐大的系統(tǒng)來(lái)對(duì)數(shù)據(jù)進(jìn)行分散處理則更符合現(xiàn)實(shí)需求。
以下為文章全文:
技術(shù)浪潮
這里究竟是硅谷還是霍格沃茨魔法學(xué)校(HogwartsSchoolofWitchcraftandWizardry)?
過(guò)去18個(gè)月間,隨著Voldemort、Hadoop和Cassandra等產(chǎn)品名稱(chēng)的出現(xiàn),這個(gè)問(wèn)題變得越來(lái)越難以回答。
它們是一個(gè)新的專(zhuān)業(yè)技術(shù)浪潮的一部分。這個(gè)技術(shù)浪潮包括一系列軟件和硬件,它們是專(zhuān)門(mén)為Facebook、雅虎和谷歌這樣的巨無(wú)霸網(wǎng)站創(chuàng)立的,目的是幫助這些網(wǎng)站將數(shù)據(jù)分割成小塊,并且以盡可能迅速和廉價(jià)的方式來(lái)展示網(wǎng)頁(yè),盡管數(shù)據(jù)處理量還在繼續(xù)增大。例如,F(xiàn)acebook發(fā)明了一種名為Cassandra的技術(shù),用于存儲(chǔ)并搜索用戶收件箱內(nèi)的所有信息。
這些產(chǎn)品多數(shù)都由創(chuàng)業(yè)企業(yè)開(kāi)發(fā)的,但它們卻表明,由于年輕的企業(yè)試圖利用新舊企業(yè)運(yùn)營(yíng)方式的巨大轉(zhuǎn)變獲利,因此在硅谷這個(gè)全球科技行業(yè)的核心地帶有望發(fā)生一場(chǎng)變革。
上周剛剛開(kāi)業(yè)的硬件創(chuàng)業(yè)企業(yè)SeaMicroCEO安德魯·菲爾德曼(AndrewFeldman)說(shuō):“業(yè)內(nèi)的情緒很高漲,這是有關(guān)創(chuàng)意與技術(shù)的泡沫?!?
分而治之
在最初的互聯(lián)網(wǎng)泡沫形成之際,企業(yè)都在購(gòu)買(mǎi)速度最快,價(jià)格最高的系統(tǒng),以便處理不斷增大且日趨集中的數(shù)據(jù)庫(kù)。但事實(shí)證明,對(duì)于谷歌和雅虎這類(lèi)公司目前所從事的業(yè)務(wù)而言,這種方法的成本過(guò)高,而且過(guò)于笨重。
現(xiàn)在的重點(diǎn)變成了分批處理信息,將數(shù)據(jù)分成許多批次,然后將其分配到數(shù)以千計(jì)的電腦和存儲(chǔ)設(shè)備中。這種分而治之(ivide-and-conquer)的方法可以有效管理海量的網(wǎng)絡(luò)數(shù)據(jù)。
為了適應(yīng)軟件設(shè)計(jì)的變化,部分硬件廠商也推出了一些全新的電腦系統(tǒng)。
例如,SeaMicro就推出了一系列搭配英特爾凌動(dòng)(Atom)處理器的電腦服務(wù)器。這類(lèi)芯片通常被用于手持設(shè)備或智能手機(jī)。菲爾德曼表示,這些芯片足以顯示網(wǎng)頁(yè)并處理其他一些基本的上網(wǎng)任務(wù),但能耗卻遠(yuǎn)低于那些功能強(qiáng)大的服務(wù)器芯片。
由于同時(shí)進(jìn)行了其他一些改進(jìn),SeaMicro可以在一個(gè)大小跟冰箱相仿的機(jī)箱內(nèi)放入十倍于傳統(tǒng)服務(wù)器的芯片,同時(shí)還能夠幫助用戶節(jié)約電力和空間成本。
“互聯(lián)網(wǎng)帶來(lái)了這種特殊的流量浪潮,”菲爾德曼說(shuō),“你必須要?jiǎng)?chuàng)建一種獨(dú)特的產(chǎn)品來(lái)處理這些流量?!?
軟件系統(tǒng)
除了SeaMicro外,SchoonerInformationTechnology也提供類(lèi)似的專(zhuān)業(yè)化硬件系統(tǒng)。這些創(chuàng)業(yè)企業(yè)的產(chǎn)品還要與Voldemort、Cassandra、CouchDB和MongoDB等專(zhuān)業(yè)化的軟件相配合。這類(lèi)軟件無(wú)需使用甲骨文、IBM和微軟等公司推出的昂貴而傳統(tǒng)的數(shù)據(jù)庫(kù)便可以組織并存儲(chǔ)信息。
作為Firefox瀏覽器的出品方,Mozilla工程運(yùn)營(yíng)副總裁賈斯汀·菲茨休(JustinFitzhugh)表示,該公司必須要支持4億多用戶使用其技術(shù),因此電力和數(shù)據(jù)中心成本的上升令他們有些抓狂。該公司正在對(duì)SeMicro的系統(tǒng)進(jìn)行測(cè)試,并且發(fā)現(xiàn)該系統(tǒng)在處理一些計(jì)算較少的任務(wù)時(shí)表現(xiàn)不錯(cuò)。
Facebook工程總監(jiān)鮑比·約翰遜(BobbyJohnson)說(shuō):“如果是在10年前,要使用大量的低能耗芯片來(lái)處理任務(wù)根本不可能,因?yàn)檫€沒(méi)有出現(xiàn)配套的軟件。我們已經(jīng)突破了一個(gè)規(guī)模界限,必須將大量的數(shù)據(jù)分散到許多小型設(shè)備中處理,從而提升成本效率。”
大勢(shì)所趨
SchoonerInformationTechnology的系統(tǒng)中裝滿了與iPod和手機(jī)類(lèi)似的高速存儲(chǔ)器,從而創(chuàng)建出一款可以隨時(shí)瀏覽大量信息的設(shè)備。這就使得企業(yè)能夠更快地發(fā)送重要信息,而在傳統(tǒng)技術(shù)中,這一過(guò)程則需要借助速度較慢的數(shù)據(jù)存儲(chǔ)設(shè)備來(lái)完成。
網(wǎng)站管理公司Rackspace的高管喬納森·布萊斯(JonathanBryce)表示,主流企業(yè)已經(jīng)開(kāi)始使用這些新技術(shù),尤其是軟件,因?yàn)樗麄円呀?jīng)被數(shù)據(jù)搞得不知所措。
布萊斯說(shuō):“我們知道有一家大型金融服務(wù)企業(yè)使用Cassandra來(lái)存儲(chǔ)交易模擬系統(tǒng)生成的數(shù)據(jù)。他們需要在倫敦、香港和紐約獲得同樣的數(shù)據(jù),但利用傳統(tǒng)數(shù)據(jù)庫(kù)卻無(wú)法做到。”
科技市場(chǎng)研究公司RedMonk創(chuàng)始人斯蒂芬·奧格雷迪(StephenO’Grady)表示,科技行業(yè)經(jīng)常在標(biāo)準(zhǔn)的計(jì)算系統(tǒng)與專(zhuān)業(yè)化設(shè)備之間反復(fù)。他說(shuō):“很明顯,我們現(xiàn)在正向著專(zhuān)業(yè)化的時(shí)代邁進(jìn)。由于網(wǎng)絡(luò)的規(guī)模開(kāi)始向企業(yè)提出更多要求,因此這是大勢(shì)所趨?!?/P>