IDF:大數(shù)據(jù)處理技術(shù)英特爾發(fā)力
IDF 2012英特爾信息技術(shù)峰會于4月11日、12日在北京國家會議中心隆重舉行,本屆IDF將以“未來在我‘芯’”為主題,作為全球IT技術(shù)的領(lǐng)導(dǎo)者,英特爾再次針對未來的技術(shù)趨勢及發(fā)展做了講解,包括云計算、下一代數(shù)據(jù)中心、以及大數(shù)據(jù)方面的內(nèi)容。
我們正面臨著“大數(shù)據(jù)工業(yè)革命”,大量的數(shù)據(jù)源(包括網(wǎng)絡(luò)日志、點(diǎn)擊流、電話記錄、醫(yī)療記錄、傳感器和監(jiān)控攝像頭)蜂擁而至,世界上充斥著各種形式的巨量數(shù)據(jù)。大數(shù)據(jù)種類豐富,充滿挑戰(zhàn),它們不僅包含傳統(tǒng)的結(jié)構(gòu)化(或關(guān)聯(lián)型)數(shù)據(jù),而且也包含各類非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)不僅尺寸龐大,而且增長速度更快于摩爾定律(每兩年即加倍)。本技術(shù)解析將探索大數(shù)據(jù)對企業(yè)、技術(shù)計算和云的影響,排序業(yè)界必須定為目標(biāo)的基礎(chǔ)性技術(shù),并充分了解可從從這些巨量數(shù)據(jù)中得出的觀點(diǎn)。
大數(shù)據(jù)的浪潮有多迅猛?IDC在2006年估計全世界產(chǎn)生的數(shù)據(jù)量是0.18ZB(1ZB=100萬PB),而今年這個數(shù)字已經(jīng)提升了一個數(shù)量級,達(dá)到1.8ZB,差不多對應(yīng)全世界每個人一塊100多GB的硬盤。這種增長還在加速,預(yù)計2015年將達(dá)到近8ZB。
現(xiàn)今大數(shù)據(jù)呈現(xiàn)出“4V + 1C”的特點(diǎn)。既Variety:一般包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化等多類數(shù)據(jù),而且它們處理和分析方式有區(qū)別;Volume:通過各種設(shè)備產(chǎn)生了大量的數(shù)據(jù),PB級別是常態(tài);Velocity:要求快速處理,存在時效性;Vitality:分析和處理模型必須快速變化,因為需求在變;Complexity:處理和分析的難度非常大。
現(xiàn)在的大數(shù)據(jù)中主要的是非結(jié)構(gòu)化的數(shù)據(jù),這些數(shù)據(jù)不能被很好的管理。現(xiàn)有的技術(shù)對于這些數(shù)據(jù)的管理和利用能力有限,以至于大量的數(shù)據(jù)浪費(fèi)。
大數(shù)據(jù)在物聯(lián)網(wǎng)中有著重要的位置。在技術(shù)發(fā)展中智能城市將會產(chǎn)生大量的需要實(shí)時傳輸?shù)男畔?,面臨著數(shù)據(jù)的雜亂性,本地性,和超大規(guī)模性。
基于大數(shù)據(jù)的盛行,英特爾利用不同級別的處理器架構(gòu)不同的數(shù)據(jù)應(yīng)用架構(gòu),以及相關(guān)的解決方案。幫助用戶從端到端找到完整的解決辦法。