假設您是 web3 新手,開始建立 web3 分析團隊,或者剛剛對 web3 數據感興趣。無論哪種方式,您都應該已經大致熟悉了 API、數據庫、轉換和模型在 web2 中的工作方式。
對于這本就職指南,我將盡量保持簡潔,并突出我對以下三個重要的想法:
1. 思考:為什么開放數據管道會重塑數據工作的完成方式
2. 工具:web3 數據堆棧中工具的概述,以及如何利用它們
3. 團隊:在 web3 數據團隊中應具備的基本注意事項和技能
關于數據思維
讓我們首先總結一下在 web2 中如何構建、查詢和訪問數據(即訪問 Twitter 的 API)。
對于簡化的數據管道,我們有四個步驟:
事件 API 觸發(發送了一些推文)
攝取到數據庫(連接到現有用戶模型/狀態更改)
特定產品/分析用例的數據轉換(隨時間增加回復/參與度指標)
模型訓練和部署(用于管理您的 Twitter 提要)
數據有時是開源的唯一步驟是在轉換完成之后。Kaggle(1000 個數據科學/特征工程競賽)和Hugging Face(26,000 個一流 NLP 模型)等社區使用暴露數據的一部分來幫助企業構建更好的模型。有一些特定領域的案例,例如在前三個步驟中打開數據的開放街道地圖,但這些仍然有寫權限的限制。
香港Web3Hub基金牽頭人:已建議金管局以“穩定幣”形式發行數字港元:4月11日消息,創業加速器G-Rocket共同創辦人吳杰莊牽頭于本周成立香港“Web3Hub” 基金,他表示已向香港金管局建議以“穩定幣”形式發行數字港元,將有助推動未來網上跨境交易,減低出現金融危機的風險。吳杰莊續稱若港府能再造創舉,成為全球首個由官方發行穩定幣,以現金支持提高穩定性,可避免破產風波,亦將港元打入Web3.0市場。[2023/4/12 13:57:44]
并不是說 web2 根本沒有任何開源。與大多數其他工程角色一樣,web2 數據擁有大量用于構建其管道的開源工具( dbt、apache、TensorFlow)。我們仍然在 web3 中使用所有這些工具。總之,他們的工具是開放的,但他們的數據是封閉的。
Web3 也將數據開源——這意味著它不再只是數據科學家在開源中工作,分析工程師和數據工程師也是如此!每個人都參與到一個更連續的工作流程中,而不是一個黑盒數據循環。
工作的形式已經從 web2 數據大壩轉變為 web3 數據的河流、三角洲和海洋。同樣重要的是要注意,這個新周期會同時影響生態系統中的所有產品/協議。
BitRock Capital新基金擬籌集1億美元,投資方向包括Web3等領域:3月22日消息,BitRock Capital首席執行官兼聯合創始合伙人Alfred Shang在接受采訪時表示,在物流房地產運營商GLP Pte的支持下,BitRock Capital的目標是在第三季度關閉新基金,擬籌集1億美元。新基金將瞄準中國的軟件即服務和數字化機會,東南亞的金融科技公司,以及數字資產基礎設施和Web3領域的全球初創公司。
BitRock Capital成立于2018年,投資了20多家公司,包括瑞士數字銀行Sygnum bank、倫敦數字資產交易所Archax和香港虛擬保險公司OneDegree。(彭博社)[2023/3/22 13:19:29]
讓我們看一個 web3 分析師如何協同工作的示例。有幾十個DEX使用不同的交換機制和費用,允許你將通證A換成通證B。如果這些是典型的交易所,比如納斯達克,每個交易所都會以 10k 或一些 API 報告自己的數據,并且然后像 capIQ 之類的其他服務會將所有交換數據放在一起,并收取費用讓您訪問他們的 API。也許偶爾,他們會舉辦一場創新比賽,這樣他們就可以在未來擁有額外的數據/圖表功能來收費。
使用 web3 交換,我們有這個數據流:
鏈游公會YGG聯創Beryl Li作為聯合創始人加入Web3手游Fashion League:10月19日消息,鏈游公會Yield Guild Games(YGG)聯合創始人Beryl Li以聯合創始人身份加入Fashion League。此外,Donald Schneider Studio創意總監Donald Schneider、Alo Yoga副總裁兼營銷與Web3全球主管Angelic Vendette將加入Fashion League顧問委員會。據悉,Fashion League是整合Create-to-Own和Free-to-Play模式的Web3手游,玩家在其中扮演虛擬設計師并建立自己的數字品牌,通過設計、銷售、發送任務模型和參加設計競賽來獲得NFT和代幣激勵。(PRWeb)[2022/10/20 16:30:37]
dex.trades是Dune 上的一張表(由許多社區分析工程師隨時間整理而成),其中匯總了所有 DEX 交換數據 - 因此您可以非常輕松地搜索所有交易所中單個代幣的交換量之類的東西。
一位數據分析師出現并使用一堆社區開源查詢創建了一個儀表板,現在我們對整個 DEX 行業有了一個公開的了解。即使所有的查詢看起來都是一個人寫的,你可以打賭,在某個不和諧的地方有大量的討論可以準確地拼湊起來。
前高盛高管Raoul Pal為Web3技術咨詢公司ScienceMagic.Studios聯創:7月3日消息,前高盛高管Raoul Pal在推特上表示,自己聯合創辦了Web3技術咨詢公司ScienceMagic.Studios,并介紹稱:我們的使命是將世界上最大的文化社區音樂、時尚、電影/書籍/電視特許經營權和體育——代幣化,利用NFT、社交代幣和元宇宙來構建社區、實用性和體驗。全球企業的資產負債表上有63萬億美元的無形資產。代幣化將品牌和社區變成有形的事物,并與社區共享實用性和網絡。這可能是很長一段時間內商業模式的最大變化。
Pal進一步補充道:我們已經暗示這一點很長時間了。這是Web 3中最大的機會之一,幫助大品牌以正確的方式進入Web 3創造性地、謹慎地、一絲不茍地。我們已經在和一些知名人士/品牌洽談了。
此前6月14日消息,ScienceMagic.Studios宣布完成1000萬美元Pre-Seed輪融資, Coinbase Ventures、Digital Currency Group(DCG)和億萬富翁對沖基金經理Alan Howard參投。
該公司由前Guardian Media Group首席執行官David Pemsel領導,致力于為品牌提供如何利用NFT和社交代幣等Web3技術的建議,以增加與粉絲和社區的互動。(Crypto Globe)[2022/7/3 1:47:27]
一位 DAO 科學家查看儀表板并開始在他們自己的查詢中分割數據,查看特定的配對,例如穩定通證。他們研究用戶行為和商業模式,并開始建立假設。
Web3.0 Grants列表中加入Crust Grants:Web3.0 Grants列表中加入Crust Grants,面向廣大Web3.0生態開發者進行推薦。最近,Crust Grants細則公布,可為每位受助者提供最高價值30000美元的資助,以支持開發者在技術棧的細分領域進行開發。更多Crust Grants支持的技術項目類型,可登陸Crust網站進行查看。[2021/4/12 20:11:04]
由于科學家可以看到哪個 DEX 占據了更大的交易量份額,因此他們將提出一個新模型并提出對治理參數的更改,以在鏈上進行投票和執行(s/o Alex Kroeger的提案這里的例子)。
之后,我們可以隨時查看儀表板,了解該提案如何創造出更具競爭力的產品。
未來,如果有另一個 DEX 出來(或升級到新版本),這個過程會提升產品的功能。有人會創建插入查詢來更新此表。這將反過來反映在所有儀表板和模型中(無需任何人返回并手動修復/更改任何內容)。任何其他分析師/科學家都可以在 Alex 已經完成的工作的基礎上再接再厲。
由于共享生態系統,討論、協作和學習發生在更緊密的反饋循環中。這有時會變得非常壓倒性,而且我認識的分析師基本上都在輪換數據時表現得倦怠。然而,只要我們中的一個人不斷推動數據前進(即有人創建了插入 DEX 查詢),那么其他所有人都會受益。
它也不一定總是復雜的抽象視圖,有時它只是實用功能,例如可以輕松搜索 ENS 反向解析器或改進工具,例如使用單個 CLI 命令自動生成大部分 graphQL 映射!所有這些都可以被每個人重用,并且可以適應某些產品前端或您自己的個人交易模型中的 API 使用。
雖然這里解鎖的可能性是驚人的,但是程序還沒有那么順利地運行。與數據工程相比,數據分析師/科學方面的生態系統仍然非常不成熟。我認為這有幾個原因:
數據工程多年來一直是 web3 的核心焦點,從客戶端 RPC API 改進到基本的 SQL/graphQL 聚合。在 theGraph 和 Dune 等產品上的工作確實體現了他們為此付出的努力。
對于分析師來說,理解 web3 獨特的跨協議關系表是一個艱難的過程。例如,分析師可以理解如何僅分析 Uniswap,但隨后難以將聚合器、其他 DEX 和不同的代幣類型添加到組合中。最重要的是,完成所有這些工作的工具直到去年才真正意義上出現。
數據科學家基本上習慣于進入原始數據轉儲并獨自完成所有工作(建立自己的工作風格)。我認為他們不習慣在項目早期與分析師和工程師如此密切和公開地合作。這需要一段時間才能適應這樣的環境。
除了學習合作之外,web3 數據社區還在學習如何在這個新的數據堆棧中工作。您不再需要控制基礎架構或從 excel 中慢慢構建到數據湖或數據倉庫 - 只要您的產品上線,那么您的數據就會無處不在。您的團隊基本上進入了數據基礎架構的精華部分。
關于數據工具
這就是你們大多數人來這里的目的:?
這些工具并不全面——它們只是我發現自己或其他人在以太坊生態系統中一直使用和引用的工具(其中一些還涵蓋了其他鏈)。
“去中心化”標簽意味著有一個基礎設施網絡或指導框架來阻止單方面發生的變化。我喜歡將其視為解耦基礎設施與云基礎設施,但這需要有自己的文章。
讓我們來看看您何時需要使用每個圖層/類別:
交互+數據源:這主要用于前端、錢包和數據攝取到較低層。客戶端:雖然以太坊的底層實現是相同的(使用 Geth 作為規范的 repo),但每個客戶端都有不同的額外功能。例如,Erigon 針對數據存儲/同步進行了大量優化,Quorum 支持啟動隱私鏈。
節點即服務:您無法選擇它們運行的客戶端,但使用這些服務將為您省去自己維護節點和 API 正常運行時間的麻煩。節點有很多復雜性,具體取決于您要捕獲多少數據(輕→完整→存檔)。
查詢 + 數據映射:該層中的數據要么在合約中作為 URI 引用,要么來自使用合約 ABI將交易數據從字節映射到表模式。合約 ABI 告訴我們合約中包含哪些功能和事件,否則我們只能看到已部署的字節碼(如果沒有此 ABI,您將無法對合約交易進行逆向工程/解碼)。交易數據:這些是最常用的,主要用于儀表板和報告。theGraph 和 Flipside API 也用于前端。有些表是合約的 1:1 映射,有些表允許在模式中進行額外的轉換。
元數據“協議”:這些不是真正的數據產品,但存在用于存儲 DID 或文件存儲。大多數 NFT 將使用其中的一個或多個,我認為今年我們將開始越來越多地使用這些數據源來增強我們的查詢功能。
專業提供商:其中一些是非常強大的數據流產品,用于內存池數據的Blocknative和用于鏈上交易數據的 Parsec。其他人聚合鏈上和鏈下數據,例如 DAO 治理或財務數據。
高頻數據提供者:您無法查詢/轉換他們的數據,但他們已經為您完成了所有繁重的工作。“企業”服務:如果您是 VC、調查員或記者,您會經常使用這些服務。您可以使用Nansen 的錢包分析器或Chainanalysis 的 KYT深入了解錢包和錢包關系。或者使用 Tolken 終端在大量項目/鏈上獲得漂亮的開箱即用圖表。
增強的那些API:這些產品將許多查詢捆綁到一個中,例如 ERC20 代幣的所有代幣余額或為給定地址提取合約 ABI。
數據團隊
不言而喻,您希望在這些社區中尋找可以雇用到您團隊的人。讓我們進一步分解重要的 web3 數據技能和經驗,以便您真正知道自己在搜索什么。如果您想被錄用,請將其視為您追求的技能和經驗!
分析師至少應該是使用Etherscan的高手,并且知道如何閱讀 Dune 儀表板。這可能需要 1 個月的時間才能慢慢升級,如果您真的預訂并狂歡學習,則需要 2 周。
您還應該考慮更多背景信息,特別是關于時間分配和技能可轉移性的內容。
在 web3 中,數據分析師大約 30-40% 的時間將用于跟上整個生態系統中的其他分析師和協議。請確保您沒有窒息他們,否則,它將成為對每個人的長期損害。與更大的數據社區一起學習、貢獻和構建是絕對必要的。
關于可轉移性:技能和領域在這個領域都是高度可轉移的。如果我使用不同的協議,那么加速時間可能會很短,因為鏈上數據的表模式都是相同的。如果有的話,我可能在加入之前就已經使用過該協議的數據了!
了解如何使用這些工具并不重要——每個分析師都應該或多或少地能夠編寫 SQL 或創建儀表板。這一切都是關于知道如何為社區做出貢獻和與社區合作。
Tags:WEBWEB3APIDEXMETAWEB3PA價格web3域名.tidMetaPirateAiindex幣怎么樣
NFT全稱為非同質化通證,是區塊鏈上的數字通證,每個通證都擁有獨特的標的物,比如數字藝術品、特殊的游戲物品、稀有的卡牌藏品或任何其他獨一無二的數字/實物資產.
1900/1/1 0:00:00區塊鏈技術在不斷向各行業延伸、拓展的同時,其應用熱點也在發生快速、甚至超乎想象的變化。我們需要對看似復雜的區塊鏈應用場景進行更為細致和前瞻的分析,以求發現規律,超越炒作,并實施靈敏而穩健的行動策.
1900/1/1 0:00:00眼下,數字化轉型可謂如火如荼,數字化轉型最終帶來的一個樂觀的結果就是充分釋放數據要素生產力,然而,知易行難,真正要做起來,卻沒有那么容易,試想.
1900/1/1 0:00:001.以太坊2.0智能合約TVL創歷史新高意味著什么?2022 年對于以太坊來說意義非凡,隨著全球 DeFi 項目和 NFT 的蓬勃發展,以太坊市值從此前 1250 億美元的高位一路高歌猛進.
1900/1/1 0:00:00YC 創始人們好: 本周我們和大量的 YC 投資組合公司進行了交流。他們主動詢問,是否應該根據市場現狀在開支、生命周期、招聘和融資方面做調整.
1900/1/1 0:00:00隨著危機蔓延,與Terra相關的項目損失超過80%。與此同時,隨著交易者尋找其他去中心化穩定幣,Maker (DAI)得到了提振.
1900/1/1 0:00:00