前言:隱私計算賽道作為當下的風口賽道,無數企業紛紛涌入,搶跑占道。作為一家專注于區塊鏈隱私計算賽道科普入門的垂直媒體,同時也是針對隱私計算興趣者開放的“純天然”、低門檻入口,我們匯總并分類了隱私計算行業內晦澀難懂的名詞,編寫了「隱私計算詞典」板塊,幫助大家理解、學習。?
此篇,我們來了解隱私計算技術架構的第三部分——聯邦學習。
近年來,從無人駕駛汽車,到AlphaGo擊敗頂尖的真人圍棋手等等,AI人工智能在科技領域的發展著實吸引了足夠多人的眼球。
然而,發展至今的AI人工智能仍面臨兩大現實問題:
行業數據分散且收集困難,數據以孤島的形式存在;隱私得不到保障,安全共享數據成為了一道壁壘。針對此,人們提出了一種名為「聯邦學習」的隱私計算技術。
Partisia Blockchain為Polygon提供基于ZK的隱私計算服務:8月25日消息,結合了多方計算的Partisia Blockchain已開始為Polygon提供基于零知識證明的隱私計算服務,Polygon的開發者可以在Partisia上運行隱私計算,部署智能合約,并通過專用跨鏈橋將其與Polygon上已有的DApp進行連接。目前隱私計算服務已支持Polygon原生的USDC,未來將擴展至其他Polygon原生代幣以及任何Polygon支持的ERC-20代幣。[2022/8/25 12:47:26]
聯邦學習,又名聯邦機器學習、聯合學習。它是AI人工智能的一門分支技術,旨在保障大數據交換時的信息安全、數據保護,在合法合規的前提下,有效幫助多行業的數據進行機器學習建模。
隱私計算網絡Oasis宣布“Sapphire”現已上線測試網:7月21日消息,隱私計算網絡Oasis宣布第一個與EVM兼容的隱私ParaTime “Sapphire”現已上線測試網。
據悉,隱私計算網絡Oasis采用創新性的分層網絡架構,將共識操作與計算分離成兩層,允許多個Para Times并行處理交易,且能夠為開發人員提供新的動態計算環境,實現更好的可擴展性和通用性。此前,Oasis已推出EVM兼容Para Time Emerald。[2022/7/21 2:29:16]
隱私保護是聯邦學習最主要的關注點,在實際的應用中,聯邦學習通過將數據的不同特征在加密的狀態下加以聚合,以增強機器學習模型能力,再通過共享數據模型,避開原始數據共享,進而保證了數據的安全性。?
中國電信賀偉:區塊鏈與隱私計算技術已作為并重的技術創新與應用方向:9月27日消息,2021中國科創企業首席技術官合作交流會9月25日在北京召開,交流會以技術引領科創未來為主題。中國電信翼支付區塊鏈研究院院長賀偉在對話環節進行了分享。賀偉表示,翼支付歷來高度重視數據安全與隱私保護,自成立區塊鏈研究院以來,我們把區塊鏈和隱私計算技術作為解決數據合規互通與數據隱私安全保護的重要技術手段。區塊鏈與隱私計算技術已作為并重的技術創新與應用方向,一方面持續強化隱私計算基礎平臺和區塊鏈BaaS服務平臺的研發,另一方面將相關技術快速服務到自身金融產品線以及集團相關基礎設施建設之中,同步進行金融科技產品對外輸出。[2021/9/27 17:09:26]
利用聯邦學習的特點,即使是不導出企業數據的情況下,也能為三方或多方建立機器學習模型,既充分保護了數據隱私和數據安全,又為客戶提供個性化、有針對性的服務,實現了互惠互利。?
Phala Network宣布加入由Linux基金會、Facebook、微軟等巨頭組成的隱私計算聯盟(CCC):據官方消息,Phala Network在博客宣布正式加入Linux基金會的隱私計算聯盟(CCC,Confidential Computing Consortium),將與業內攜手,共同解決跨行業數據傳輸加密和數據隱私保護問題。
“隱私計算聯盟”(Confidential Computing Consortium)是由Linux基金會和多家巨頭企業組建的聯盟,致力于推進數據隱私并推廣和制定可信執行環境(TEE)技術標準。該聯盟其他成員公司包括Facebook、Google Cloud、微軟、IBM、英特爾、Arm、AMD、英偉達等。[2020/11/10 12:14:06]
同時,我們可以利用不同類別的聯邦學習技術來解決數據異質性問題,突破傳統AI技術的局限性。依照參與建模的數據源分布,聯邦學習可分為橫向聯邦學習、縱向聯邦學習和聯邦遷移學習三類。?
橫向聯邦學習假設收集兩個數據集,這兩個數據集用戶特征重疊多,而用戶重疊少。我們把數據集按照用戶維度切分,取出雙方用戶特征相同,而用戶不完全相同的部分數據作為機器的訓練數據,這種模型稱為橫向聯邦學習。?
例如,兩個不同行政區的銀行,用戶群體分別來自所在行政區,重疊部分少。但是同作為銀行,業務類似,因此數據集收集的用戶特征則大體相同。因此,橫向聯邦學習模型收集的是兩個數據集不完全相同的用戶部分。?
如下圖所示:?
縱向聯邦學習與橫向聯邦學習相反,在兩個數據集用戶重疊多、用戶特征重疊少的情況下,縱向聯邦學習把數據集按照數據特征維度切分,取出雙方用戶相同,而用戶特征不完全相同的部分作為機器訓練數據。?
例如,同一個行政區的銀行和商超,其收集的數據用戶群體大致類似,但銀行和商超收集到的用戶特征基本不同。因此,縱向聯邦學習模型收集的是兩個數據集不完全相同的用戶特征部分。?
如下圖所示:
聯邦遷移學習在用于機器學習的數據集樣本用戶與用戶特征重疊都較少的情況下,通常不對數據進行切分,而是引入聯邦遷移學習,來解決數據不足的問題,從而提升模型的效果。
具體地,可以擴展已有的機器學習方法,使之具有橫向聯邦學習或者縱向聯邦學習的能力。?例如,收集一家位于北京的銀行和一家位于上海的商超的數據,由于受到地域限制,用戶群體交集很小;同時,由于銀行和商超類型的不同,二者收集的數據特征也基本無重合。?
引入聯邦遷移學習,首先可以先讓兩個數據集訓練各自的模型,之后通過加密模型數據,避免在傳輸中泄露隱私。之后,對這些模型進行聯合訓練,最后得出最優的模型,再返回給各個企業。?
如下圖所示:?
多種類別的聯邦學習方式使得機器學習模型更加具有通用性,可以在不同數據結構、不同行業間發揮作用,沒有領域和算法限制,同時具有模型質量無損、保護隱私、確保數據安全的優勢。?
在實際的應用中,類似銷售、金融等行業,由于知識產權、隱私保護和數據安全等因素限制,數據壁壘很難打通。
聯邦學習成為了解決這些問題的關鍵,在不影響數據隱私和安全的情況下,對來自多方的數據進行統一的建模,進行機器學習模型的訓練,這些企業之間就能更好地進行數據協作。?
可以說,聯邦學習為構建跨行業、跨地域的大數據和人工智能生態圈提供了良好的技術支持。?考慮到在整個訓練過程中,進行模型更新的通信仍然可以向第三方或中央服務器顯示敏感信息,因此聯邦學習技術廣泛地與安全多方計算、TEE或者區塊鏈等技術結合應用,來增強聯邦學習的隱私性和去信任。
但目前已有的方法通常以降低模型性能或系統效率為代價提供隱私,因此,如何在理論和經驗上理解和平衡這些權衡,將是實現聯邦學習技術廣泛應用落地的一個相當大的挑戰。
Tags:區塊鏈POLYGONOLY區塊鏈存證是什么意思ethylenecopolymerDragon Infinitypolydoge幣持幣地址
據彭博社12月8日消息,全球資管公司NatixisInvestmentManagers的調查顯示,數字資產是2022年“重大修正”的“首要競爭者”,近四分之三的受訪機構表示.
1900/1/1 0:00:00據Cointelegraph消息,12月13日,緬甸影子政府--民族團結政府財政和投資部在Facebook上發布公告,宣布基于美元的穩定幣Tether為當地使用的官方貨幣.
1900/1/1 0:00:00據Cointelegraph消息,11月29日,以太坊開發者MariusvanderWijden向社區用戶發出了呼吁,以幫助測試以太坊主網和基于PoS的信標鏈之間的合并.
1900/1/1 0:00:00區塊鏈技術從根本上改變了金融機構交換價值和構建市場基礎設施的方式。從廣義上講,資本市場有四類市場參與者,基于區塊鏈的解決方案為他們提供了明顯的好處:發行人、基金經理、投資者和監管者.
1900/1/1 0:00:00原文丨中國電子報 作者丨齊旭 編輯丨連曉東 科幻電影極力渲染,科技巨頭動作頻頻,下一代互聯網——元宇宙的輪廓正在逐漸清晰.
1900/1/1 0:00:00根據微軟聯合創始人比爾·蓋茨的說法,今年是2024年,你的大部分辦公室會議將在元宇宙舉行。 這位科技億萬富翁周四在一份年終報告中表示,蓋茨預測,元宇宙將徹底改變辦公室工作,并補充說,虛擬會議將從.
1900/1/1 0:00:00