IDF:大數(shù)據(jù)處理技術英特爾發(fā)力
IDF 2012英特爾信息技術峰會于4月11日、12日在北京國家會議中心隆重舉行,本屆IDF將以“未來在我‘芯’”為主題,作為全球IT技術的領導者,英特爾再次針對未來的技術趨勢及發(fā)展做了講解,包括云計算、下一代數(shù)據(jù)中心、以及大數(shù)據(jù)方面的內(nèi)容。
我們正面臨著“大數(shù)據(jù)工業(yè)革命”,大量的數(shù)據(jù)源(包括網(wǎng)絡日志、點擊流、電話記錄、醫(yī)療記錄、傳感器和監(jiān)控攝像頭)蜂擁而至,世界上充斥著各種形式的巨量數(shù)據(jù)。大數(shù)據(jù)種類豐富,充滿挑戰(zhàn),它們不僅包含傳統(tǒng)的結構化(或關聯(lián)型)數(shù)據(jù),而且也包含各類非結構化數(shù)據(jù)。這些數(shù)據(jù)不僅尺寸龐大,而且增長速度更快于摩爾定律(每兩年即加倍)。本技術解析將探索大數(shù)據(jù)對企業(yè)、技術計算和云的影響,排序業(yè)界必須定為目標的基礎性技術,并充分了解可從從這些巨量數(shù)據(jù)中得出的觀點。
大數(shù)據(jù)的浪潮有多迅猛?IDC在2006年估計全世界產(chǎn)生的數(shù)據(jù)量是0.18ZB(1ZB=100萬PB),而今年這個數(shù)字已經(jīng)提升了一個數(shù)量級,達到1.8ZB,差不多對應全世界每個人一塊100多GB的硬盤。這種增長還在加速,預計2015年將達到近8ZB。
現(xiàn)今大數(shù)據(jù)呈現(xiàn)出“4V + 1C”的特點。既Variety:一般包括結構化、半結構化和非結構化等多類數(shù)據(jù),而且它們處理和分析方式有區(qū)別;Volume:通過各種設備產(chǎn)生了大量的數(shù)據(jù),PB級別是常態(tài);Velocity:要求快速處理,存在時效性;Vitality:分析和處理模型必須快速變化,因為需求在變;Complexity:處理和分析的難度非常大。
現(xiàn)在的大數(shù)據(jù)中主要的是非結構化的數(shù)據(jù),這些數(shù)據(jù)不能被很好的管理?,F(xiàn)有的技術對于這些數(shù)據(jù)的管理和利用能力有限,以至于大量的數(shù)據(jù)浪費。
大數(shù)據(jù)在物聯(lián)網(wǎng)中有著重要的位置。在技術發(fā)展中智能城市將會產(chǎn)生大量的需要實時傳輸?shù)男畔?,面臨著數(shù)據(jù)的雜亂性,本地性,和超大規(guī)模性。
基于大數(shù)據(jù)的盛行,英特爾利用不同級別的處理器架構不同的數(shù)據(jù)應用架構,以及相關的解決方案。幫助用戶從端到端找到完整的解決辦法。