當(dāng)前位置:首頁 > 物聯(lián)網(wǎng) > 物聯(lián)網(wǎng)技術(shù)文庫
[導(dǎo)讀] 數(shù)據(jù)安全性是Edge / Fog計(jì)算增長的主要挑戰(zhàn)。了解如何通過引入現(xiàn)代分布式數(shù)據(jù)層EdgeFS來克服問題。 由于減少了帶寬消耗,提高了分析效率,改善了物理世界中事件的必要響應(yīng)時(shí)間,不依

數(shù)據(jù)安全性是Edge / Fog計(jì)算增長的主要挑戰(zhàn)。了解如何通過引入現(xiàn)代分布式數(shù)據(jù)層EdgeFS來克服問題。

由于減少了帶寬消耗,提高了分析效率,改善了物理世界中事件的必要響應(yīng)時(shí)間,不依賴于WAN(廣域網(wǎng)),最大限度地延長了正常運(yùn)行時(shí)間,因此我們一直在明確表示Edge / Fog計(jì)算轉(zhuǎn)型。像有線電視那樣可靠性較差的蜂窩電話,以及更高的安全性。

在安全性方面,好處來自于保護(hù)靠近數(shù)據(jù)源的資產(chǎn),這些資產(chǎn)從未打算連接到更廣泛的網(wǎng)絡(luò),更不用說互聯(lián)網(wǎng)了。

然而,隨著應(yīng)用程序、數(shù)據(jù)、計(jì)算服務(wù)被推離中心位置,數(shù)據(jù)片段必須在越來越多的分布式網(wǎng)絡(luò)中復(fù)制??紤]到這一點(diǎn),數(shù)據(jù)安全性仍然是Edge / Fog計(jì)算增長的主要挑戰(zhàn)。

為了應(yīng)對這些挑戰(zhàn),我們需要概念上新的分布式數(shù)據(jù)分發(fā)和訪問設(shè)計(jì)時(shí)考慮到Edge / Fog安全性的層。

讓我們來比較兩個(gè)可能適合從數(shù)據(jù)安全需求的開源分布式存儲層設(shè)計(jì):EdgeFS(http://edgefs.io,Apache許可證)和IPFS(星際文件系統(tǒng) https://ipfs.io,MIT許可)。

當(dāng)我們設(shè)計(jì)EdgeFS時(shí),數(shù)據(jù)安全性是我們的首要任務(wù)。在EdgeFS中,一旦記錄,任何給定塊中的數(shù)據(jù)都不能追溯地改變,因?yàn)檫@會(huì)使類似區(qū)塊鏈的n-ary樹中先前塊中的所有SHA-3哈希失效,并打破分散位置之間達(dá)成的共識。關(guān)于IPFS也是如此。

EdgeFS建立在體系結(jié)構(gòu)之上,具有不可變的自我驗(yàn)證位置無關(guān)元數(shù)據(jù),引用自我驗(yàn)證的與位置無關(guān)的有效負(fù)載。

雖然兩個(gè)存儲解決方案對有效負(fù)載塊的處理非常相似,但是對象的命名和發(fā)現(xiàn)方式的差異幾乎不同。IPFS主要用于對等分類賬加密交易,而EdgeFS沒有做出這樣的設(shè)定,而是專注于許多本地或遠(yuǎn)程內(nèi)容可尋址網(wǎng)絡(luò)操作的extream高性能。

不可變的有效負(fù)載塊

將數(shù)據(jù)塊放置到IPFS的最終結(jié)果是使用強(qiáng)加密哈希來識別和驗(yàn)證它,并且可以使用加密哈希來查找要檢索的塊。這與EdgeFS非常相似,但存在一些差異:

IPFS接受塊,然后生成其加密哈希。一個(gè)EdgeFS客戶端(通過CCOW“cloud copy》

EdgeFS FlexHash表是本地站點(diǎn)構(gòu)造。它會(huì)自動(dòng)發(fā)現(xiàn)并駐留在本地站點(diǎn)的服務(wù)器內(nèi)存中。FlexHash負(fù)責(zé)I / O路徑,并在動(dòng)態(tài)負(fù)載平衡邏輯中發(fā)揮重要作用。基于發(fā)現(xiàn)的站點(diǎn)拓?fù)洌x了所謂的協(xié)商目標(biāo)組,這些目標(biāo)組通常在8-24個(gè)分區(qū)存儲設(shè)備之間形成,以確保正確的故障域分布。

元數(shù)據(jù)原理的差異

IPFS命名系統(tǒng)仍在開發(fā)中,示例表明IPFS使用了一種非常不同的方法來發(fā)布按名稱訪問的內(nèi)容。

IPFS接受原子對象的加密哈希,并將這些引用嵌入到其他命名對象中,這些對象的基本功能是作為目錄。

這些目錄對象中的每一個(gè)也是不可變的,引用特定的凍結(jié)時(shí)內(nèi)容。目錄對象本身具有加密哈希,可以在更高層目錄中引用。最后,發(fā)布一個(gè)“根”目錄,然后通過一個(gè)可變名稱指向目錄對象映射。我懷疑這種設(shè)計(jì)受到為加密貨幣分類賬算法提供高度安全的持久層的必要性的影響,其代價(jià)是通用存儲靈活性和性能。

EdgeFS采用不同的方法,其目標(biāo)是為版本化內(nèi)容啟用共享數(shù)據(jù)存儲庫,這些內(nèi)容可由數(shù)千個(gè)租戶批準(zhǔn)的用戶同時(shí)訪問和更新,并支持跨站點(diǎn)一致性組。

在EdgeFS中,支持按名稱或其他搜索條件查找存儲對象的信息,總是作為獨(dú)立于有效負(fù)載的元數(shù)據(jù)記錄。它將存儲的有效負(fù)載視為不透明的塊,磁盤上的組織不需要在塊本身內(nèi)查找引用,從而允許客戶端驅(qū)動(dòng)的端對端加密。也就是說,它假定所有的有效負(fù)載都是加密的,并且從不嘗試分析它??勺冊獢?shù)據(jù)信息始終存儲在本地(本地站點(diǎn)群集),從而在不犧牲靈活性或性能的情況下啟用始終本地、立即一致的I/O策略。

不可變版本元數(shù)據(jù)

根據(jù)定義,關(guān)于特定版本對象的大多數(shù)元數(shù)據(jù)必須是不可變的。某些元數(shù)據(jù)可以獨(dú)立于版本內(nèi)容,例如控制對象版本保留的元數(shù)據(jù),本地站點(diǎn)復(fù)制覆蓋,ACL等。

IPFS的優(yōu)點(diǎn)之一是,當(dāng)可變命名引用更改為指向新版本時(shí),它不會(huì)更改目錄對象的存儲。這與EdgeFS處理可變命名引用的方式非常相似,在我看來,這遠(yuǎn)比創(chuàng)建顯式版本化名稱要好。在EdgeFS中,可變命名總是假定為本地的,并在遠(yuǎn)程站點(diǎn)到站點(diǎn)傳輸時(shí)“re-hydrated”。這使得跨地域的傳輸始終是保持不變的,因此可以實(shí)現(xiàn)全局復(fù)制,從而非常有效地避免不必要的網(wǎng)絡(luò)傳輸,即通過WAN進(jìn)行內(nèi)聯(lián)重復(fù)數(shù)據(jù)刪除。

小結(jié)

現(xiàn)代元數(shù)據(jù)存儲子系統(tǒng)還有許多其他功能,這些功能是IPFS似乎尚未解決的版本化內(nèi)容存儲所必需的:

快速查找屬于任何給定文件夾/ directoryPredictable目錄或bucket search timesTenant控件中的名稱,該控件控制租戶元數(shù)據(jù)驅(qū)動(dòng)的對引用負(fù)載的保留的訪問和修改。

雖然我承認(rèn)IPFS的主要和最初目標(biāo)不是為Edge / Fog計(jì)算用例提供服務(wù),但其安全性和全局可擴(kuò)展性優(yōu)勢確實(shí)符合要求。也許有一天它會(huì)滿足其他需求。但為什么要等?EdgeFS現(xiàn)在已經(jīng)可用,它滿足Edge/Fog計(jì)算的最重要需求——數(shù)據(jù)安全性、成本降低和性能。

EdgeFS利用本地站點(diǎn)資源,并將它們呈現(xiàn)為高度可用的群集段,該群集段是地理位置分散的數(shù)據(jù)層的一部分。由于其不可變的數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì),通過基于UDP的低延遲協(xié)議進(jìn)行動(dòng)態(tài)數(shù)據(jù)放置,內(nèi)置多協(xié)議存儲網(wǎng)關(guān)(S3,NoSQL DB,NFS,iSCSI等)以及高度可擴(kuò)展的無共享架構(gòu),使本地站點(diǎn)的性能具有卓越的特點(diǎn)。支持為Edge / Fog計(jì)算時(shí)代設(shè)計(jì)的應(yīng)用程序。

EdgeFS利用本地可用的站點(diǎn)資源,并將它們呈現(xiàn)為高度可用的群集段,該群集段是地理位置分散的數(shù)據(jù)層的一部分。由于其不可變的數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì),通過基于UDP的低延遲協(xié)議進(jìn)行動(dòng)態(tài)數(shù)據(jù)放置,內(nèi)置多協(xié)議存儲網(wǎng)關(guān)(S3,NoSQL DB,NFS,iSCSI等)以及高度可擴(kuò)展性,因此實(shí)現(xiàn)了出色的本地站點(diǎn)性能特性無共享架構(gòu),可以成為專為Edge / Fog計(jì)算時(shí)代設(shè)計(jì)的應(yīng)用程序的真正推動(dòng)者。

來源: 區(qū)塊鏈兄弟

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運(yùn)營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡稱"軟通動(dòng)力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉