比特幣交易所 比特幣交易所
Ctrl+D 比特幣交易所
ads
首頁 > Luna > Info

IOSG :鏈上數據分析平臺現狀與展望_ICS

Author:

Time:1900/1/1 0:00:00

作者:Yang,IOSGVentures

“數”中自有黃金屋,鏈上數據潛藏著無盡的Alpha。當我們跟隨smartmoney聞風而動,當我們夜以繼日地在NFTParadise中尋找trendingNFT,當我們查詢StepN每日新鞋鑄造數據時,你是否好奇這些數據如何而來?面對眾多鏈上數據分析平臺和紛繁復雜的功能,你是否還在尋找最適合自己的那個平臺?

1.背景介紹

隨著鏈上生態的日益蓬勃,如DeFi交易、借貸,NFT的鑄造、交易等,用戶的行為被直接透明地記錄在鏈上。這些鏈上行為的數據對應著鏈上價值的流動,對這些數據的分析和根據分析而得出的洞察和見解變得極為有價值。鏈上數據分析平臺,如Nansen,TokenTerminal,DuneAnalytics,FootprintAnalytics,flipsidecrypto,glassnode,Skew等順應這些日益增長的需求,面向個人和機構用戶推出了側重點略有不同的產品。

本文先將簡述鏈上數據分析平臺背后的數據架構,意在告訴讀者那些鏈上數據分析結果從何而來,如何而來。隨后我們從數據豐富度(覆蓋區塊鏈數量)、數據粒度、數據延遲、平臺易用性和查詢自由度等維度為讀者梳理市場上主流的面向個人用戶的數據分析平臺。最后分享我們對Web3未來鏈上數據索引、查詢和分析的一點暢想。

2.鏈上數據分析平臺數據架構介紹

雖然區塊鏈記錄著所有原始的交易數據,鏈上數據本身都是公開透明的,但當我們提出:過去24小時Uniswap的交易量是多少?當前百分之多少的BAYC持有者也同時持有至少一個Moonbirds?等等問題時,鏈上原始數據并不能給我們答案,我們需要通過索引(indexing),處理(processing),存儲(storage)等等一系列數據攝取(ingestion)的處理過程,再根據所提問題來聚合運算對應的數據,才能得到問題的答案。

區塊鏈技術應用平臺 IOST 現已推出 On-Chain Governance v2.0:2月24日消息,區塊鏈技術應用平臺 IOST 宣布推出 On-Chain Governance v2.0,其升級內容包括:優化提案流程、降低提案門檻,升級鏈上治理 UX。主網賬戶持有 1000 枚以上的 IOST 用戶可自主發起 IOST 生態發展提案,由全節點合伙人全民投票決定。該治理機制還允許所有社區成員通過投票選出 IOST 節點伙伴來間接參與 IOST 治理,節點合伙人獲得的票數將影響其在治理門戶中的決策權重。[2023/2/24 12:27:31]

直接查詢區塊鏈來求得問題答案是非常耗時耗力的,為了讓鏈上數據能夠被快速檢索,當前主流的鏈上數據分析平臺會將索引得到的原始鏈上數據,經過一系列處理后,存入由平臺負責更新和管理的數據倉庫(datawarehouse)中。當用戶在Nansen追蹤smartmoney的交易動態,或在DuneAnalytics上查看可視化分析時,用戶對所謂“鏈上數據”的查詢,實際上是在查詢由項目方中心化控制的數據庫而非區塊鏈本身。

鏈上數據分析平臺的數據倉庫架構大致如下:

數據采集層:?平臺從區塊鏈節點獲取原始鏈上數據,部分平臺會接受第三方提供的數據源,還有的平臺(如FootprintAnalytics)支持用戶上傳鏈下數據來輔助最終的數據分析。

數據處理層:各平臺將原始數據以流式處理或批次處理的方式進行數據抽取、轉換和加載。流式處理中,實時原始數據被源源不斷地輸入并被持續處理,通常意味著數據延遲低,分析結果時效性更高;而批次處理雖然數據延遲會稍高,分析結果時效性稍低,但更適用于大容量的數據處理。

數據存儲層:經過處理后的數據會根據平臺方預先定義的格式存儲進數據集的各數據表中以待后續使用。

意甲聯賽那不勒斯隊與Socios.com達成合作:10月26日消息,意甲聯賽那不勒斯隊(SSC Napoli)宣布與 Socios.com達成合作,將推出官方粉絲代幣NAP。那不勒斯隊成立于1904年,上世紀八十年代曾在球王馬拉多納的帶領下兩次獲得意甲聯賽冠軍。Socios.com 是體育娛樂區塊鏈服務提供商。[2021/10/26 20:59:17]

數據整合層:存儲的數據會被聚合運算。計算可以是根據預先設定好的指標來進行的(metricscomputation),也可以階段性的(periodic)或是根據設定好的條件被觸發的(event-drivenaggregation)等。

數據分析層:運算完成的結果被實時地報告、輸出。對于個人用戶而言,我們主要在數據分析層與鏈上數據分析平臺進行交互,比如Nansen提供的BusinessIntelligence報告界面,DuneAnalytics和FootprintAnalytics上眾多的的可視化圖表,以及部分平臺提供的API接口等。

各平臺采取了不同的方案來建設和維護自己的數據倉庫。比如Nansen借助第三方GoogleCloudPlatform完成數據倉庫的建設和維護。

(https://www.nansen.ai/post/nansen-and-google-cloud-empower-web3-investors-with-high-quality-real-time-market-intelligence)

而DuneAnalytics,FootprintAnalytics,TokenTerminal等平臺則獨立建設和維護自己的數據倉庫。以FootprintAnalytics為例,其數據倉庫架構如下圖所示。

IOST鏈上一站式NFT加密資產發行交易平臺-LOOT掠寶登陸虎符交易所:據官方消息,LOOT掠寶已于2021年3月25日15:00(UTC+8)正式上線虎符,開啟LOOT/USDT交易對。充值已開啟,提現將于2021年3月26日10:00(UTC+8)開啟。上線之后,將開啟LOOT凈買入大賽、掛單激勵、挖礦領福利活動。

作為IOST鏈上首個NFT資產交易平臺,掠寶網成立于2020年1月,由IOST節點合伙人XPET開發團隊開發,是多鏈NFT聚合交易平臺,支持IOST等主流公鏈NFT協議。該平臺旨在促進傳統游戲與區塊鏈游戲的大融合,發揮區塊鏈技術在“游戲資產確權”及“高效流通”的價值,實現同一游戲資產在多個獨立游戲之間的映射與復用。[2021/3/25 19:17:15]

3.主流鏈上數據分析平臺比較

本節以內容視角和用戶視角,從數據豐富度(覆蓋區塊鏈數量)、數據粒度、數據延遲、平臺易用性和查詢自由度等維度來對比幾家主流的鏈上數據分析平臺,包括Nansen,TokenTerminal,DuneAnalytics,FootprintAnalytics。部分平臺給用戶提供標準化的信息報告界面,比如Nansen,TokenTerminal等。

Nansen

Nansen應該是大家最為熟悉的鏈上數據分析平臺之一。

相較于其他平臺,其最為出色的功能是錢包標記(walletprofiler/walletlabeling)。借助錢包標記并結合其他鏈上數據為用戶提煉出極具價值的信息,比如SmartMoney,幫助用戶追蹤巨鯨、重度DeFi玩家的實時動向。其他熱門產品包括HotContract,發現新興熱門的DeFi和NFT合約;NFTParadise,一覽實時NFT鑄造數據等等。

Greencore宣布與IOST合作 用區塊鏈技術賦能新能源行業:今日,Greencore官方宣布與IOST建立戰略合作伙伴關系。Greencore在Greencore Protocol的區塊鏈框架下構建,旨在利用區塊鏈技術重構新能源生態。Greencore將與IOST緊密合作,把研發資源投入到Layer-2擴展解決方案的研發中,并應用IOST的先進公鏈技術來優化Greencore的區塊鏈基礎設施。本次合作中,Greencore還會為IOST提供眾多應用場景資源,例如新能源的交易和結算市場。未來,IOST將與Greencore一起,為新能源行業建立一個更高效、透明且具有流動性的生態。[2020/7/20]

Nansen現在支持Ethereum,Arbitrum,Avalanche,BSC,Celo,Fantom,Optimism,Polygon,Ronin,Terra,Solana共計11條區塊鏈的鏈上數據分析

Nansen普通版僅為用戶提供精選數據

流式處理和批次處理。部分數據分析已實現近乎實時的報告

零門檻

Nansen普通版僅提供標準信息模板界面。針對機構客戶對自定義鏈上數據查詢和分析的需求,Nansen借助GoogleCloudPlatform的BlockchainDatasets發布了NansenInstitutions產品,讓專業/機構用戶能夠編寫滿足定制需求的SQLQueries。

值得一提的是,Nansen在NansenResearch頻道中發布了不少鏈上分析報告。研究報告會對重點事件進行抽絲剝繭般的鏈上追蹤和分析,讀者不妨偶爾閱讀這些報告(如Nansen針對上月stETH脫錨事件發布的報告https://www.nansen.ai/research/on-chain-forensics-demystifying-steth-depeg),對學習鏈上分析的方法大有裨益。

公告 | BM開發的錢包即將推出IOS版本 聲明將解決私鑰問題:據IMEOS消息,BM在EOS治理群中表示IOS版本的錢包即將推出,該錢包利用多簽機制和時間延遲在未來可保證用戶賬號安全,解決私鑰丟失、被盜等問題。[2018/6/27]

TokenTerminal

TokenTerminal以提供準確的協議收入(protocolrevenue)而著名。基于協議收入,TokenTerminal計算了各協議的市銷率,市盈率等數據。這些數據在一定程度上為各協議提供了估值基準。

TokenTerminal追蹤了超過130個協議的數據

TokenTerminal僅為用戶提供精選數據

批次處理。據IOSG團隊近期與TokenTerminal的溝通,目前TokenTerminal平臺上的數據大約有兩天時間的延遲

零門檻

僅提供標準信息界面

另外一些主流鏈上數據分析平臺則向用戶開放數據表,用戶可自由編寫代碼進行查詢,在查詢內容上給予用戶一定的自由度,如DuneAnalytics和FootprintAnalytics。

DuneAnalytics

DuneAnalytics是最早開放用戶自主查詢的鏈上數據分析平臺,擁有最大的分析師團體和用戶社區。DuneAnalytics提供了高度顆粒化的原始鏈上數據,分析師可以自由地利用這些數據寫出自定義的查詢。DuneAnalytics也對項目方團隊開放Abstraction,項目方可以根據自己協議的數據內容創造更適合的數據表供分析師使用。但自主查詢具備一定的門檻,分析師需具備PostgreSQL的編寫能力才能創造滿足自己需求的數據查詢。而且查詢延遲與分析師SQL編寫水平和對DuneAnalytics提供的數據表熟悉程度高度相關。

DuneAnalytics提供了Ethereum,BSC,Optimism,Polygon,GnosisChain,Solana共計6條區塊鏈的鏈上數據

極細

流式處理。數據延遲大約五分鐘

DuneAnalytics對分析師提出了一定的SQLcoding要求

有了高度顆粒化的原始數據,分析師便可以在DuneAnalytics自由創建鏈上分析。如每日StepN新鞋鑄造及歷史積累數據https://dune.com/queries/627689/1170627

DuneAnalytics于2022年5月30日發布了DuneEnginev2。DuneEnginev2在將DuneAnalytics的數據架構進行大改來為用戶提供更快查詢響應和更好查詢表現的同時,也將對用戶體驗的影響降至最低。

FootprintAnalytics

相較于Nansen低使用門檻但僅提供標準化信息界面,DuneAnalytics提供了自由查詢但又要求分析師具備編寫PostgreSQL語言的能力,FootprintAnalytics為用戶提供了兩全其美的解決方案,在給予極大的查詢自由度的同時降低了使用門檻。它是如何做到的?

“鏈上數據錯綜復雜,分析師可能需要寫成百上千行代碼才得以完成一個指標的計算。為了解決分析門檻高的問題,Footprint清理和集成鏈上數據,給數據賦予了業務意義,使得用戶無需SQL查詢和編碼也可以分析區塊鏈數據。任何人都可以通過豐富的圖表界面在幾分鐘內構建自己的自定義圖表,解密鏈上數據,發現項目背后的價值趨勢。”

FootprintAnalytics不僅提供原始區塊鏈數據,更將鏈上數據進行分級。最原始的鏈上數據為銅級別(Bronzedata),經過篩選、清洗和增強的數據為銀級別(Silverdata),進一步整理出具備業務意義的數據為金級別(Golddata)。

已經整理完成的具有商業邏輯和業務意義的金銀級別數據可以直接用于分析。借助金銀級別數據,FootprintAnalytics為用戶提供了通過簡單地拖拽數據表就能自主查詢鏈上數據的服務。不管讀者你是否會寫類SQL語言代碼,你都可以快速創建滿足自己定制化需求的數據分析信息界面,并將所需信息通過直觀且可互動的圖表可視化。

FootprintAnalytics目前提供了Ethereum,Arbitrum,Avalanche,Boba,BSC,Celo,Fantom,Harmony,IOTEX,Moonbeam,Moonriver,Polygon,Thundercore,Solana等共計17條區塊鏈的鏈上數據

FootprintAnalytics既為用戶提供粒度極細的原始數據,也為用戶提供精選數據

目前FootprintAnalytics對采集到的原始數據進行每日一次的批次處理,數據延遲為一天

在FootprintAnalytics平臺,用戶無需SQL查詢和編碼也可自由分析鏈上數據。對于具備SQL代碼能力的分析師,Footprint也提供原始數據供分析師發揮。

讀者不妨現在就前往FootprintAnalytics,幾分鐘即可上手制作一個自己的鏈上分析界面

4.一點暢想——去中心化鏈上數據分析

鏈上數據分析如此重要,當今用戶卻只能依賴Nansen,DuneAnalytics等中心化管理的“鏈上數據”分析平臺來輔助投資決策。在這些平臺上,用戶無法驗證所用數據是否未經篡改,不得不信任平臺所提供的數據集是確鑿真實的。“Don’tTrust.Verify.”在鏈上數據分析這里成了一句空話。

Web3浪潮滾滾而來,鏈上生態越發豐富,未來的智能合約和去中心化應用可能不僅僅需要原始鏈上數據和預言機所提供的數據作為輸入信息,還可能需要輸入基于鏈上原始數據計算得出的分析結果,那時候我們還能信任和使用這些中心化鏈上數據分析平臺作這類用途嗎?答案恐怕是否定的。

IOSG團隊近期看到已有項目團隊在實現去中心化鏈上數據查詢和分析的道路上邁出了第一步。由于篇幅受限,且聽下回分解——通向去中心化鏈上數據分析之路。

參考:

https://www.nansen.ai/post/nansen-and-google-cloud-empower-web3-investors-with-high-quality-real-time-market-intelligencehttps://cloud.google.com/customers/nansenhttps://www.nansen.ai/research/on-chain-forensics-demystifying-steth-depeghttps://docs.dune.com/data-tables/data-tableshttps://docs.dune.com/dune-engine-v2-beta/query-enginehttps://www.footprint.network/@Footprint/Footprint-Datasets-Data-Dictionaryhttps://www.youtube.com/watch?v=Pp9_wgYZB3I

Tags:ICSTICALYLYTLunaticsSTICK幣ALYA幣EtLyteT

Luna
Messari 二季度 Web3基礎設施收入報告:收入僅下降10%,需求依然強勁_COIN

撰文:SamiKassab,Messari研究員編譯:iambabywhale.eth 主要觀點: 許多Web3基礎設施協議通過在Web3生態系統內外提供服務來產生穩定的收入.

1900/1/1 0:00:00
Vitalik 韓國區塊鏈周發言:加密貨幣在未來十年需證明自身的實際效用,ZK 最終會擊敗 OP_ROLL

作者:深潮TechFlow最近,以太坊創始人VitalikButerin到了韓國參加韓國區塊鏈周的活動,在一次非公開的活動,他表達了對以太坊的未來持樂觀態度,但他認為未來會有很大的挑戰.

1900/1/1 0:00:00
新版推出,Axie Infinity 能否重返高光時刻?_AXI

撰文:蜂巢財經News 曾經的區塊鏈游戲龍頭AxieInfinity?不復此前風光,在過去的幾個月間,它接連陷入游戲通證暴跌、鏈上資產被盜等困境,日活躍用戶由高峰時期的百萬人降至數萬人.

1900/1/1 0:00:00
上海市政府:探索分布式數據存儲、端到端加密通信等Web3.0關鍵技術_OPEN

鏈捕手消息,上海市人民政府辦公廳印發《上海市數字經濟發展「十四五」規劃》,該規劃將提升數字新基建納入重點任務,其中提到加強網絡新型基礎設施部署、技術研發和應用創新,打造面向未來的網絡生態.

1900/1/1 0:00:00
Web3“入侵”手機圈_APP

作者:周舟,虎嗅科技組 “消息還沒有正式公開,華為至少有三個部門在研究和探索Web3,鴻蒙團隊便是其一。”一位接近華為的人士向虎嗅透露。華為,只是眾多探索Web3的手機廠商之一.

1900/1/1 0:00:00
三分鐘讀懂 Scroll:ZK Rollup 擴容新銳選手_ZKP

作者:iambabywhale.eth,ForesightNews在基于OptimisticRollup的以太坊二層網絡Optimism和Arbitrum分別因為推出治理代幣和與ProjectG.

1900/1/1 0:00:00
ads