I.引言
Crypto政策在制定時很少會用到真實且細化的數據,原因主要有以下三點:
1.新興技術領域的相關政策大多還停留在理論及定性分析層面,早期階段很少會使用到數據。
2.盡管鏈上數據全部開放透明,但要想訪問這些數據人們需要在短期內完成大量工作,即便對于Crypto原生從業者來說也是如此。
3.區塊鏈「取證」公司和數據供應商有少量的數據產品,但它們都不具備靈活性/可定制性,也不能滿足經濟/金融研究人員的需求。
許多現代經濟學和金融學研究人員錯過了將工具應用于Crypto數據分析的機會。從設計上講,Crypto可以向任何人提供細化數據,但大部分政策在制定時仍依賴于CoinMarketCap等外部預聚合時間序列數據源,而不是直接從數據源獲取數據,這又是什么原因導致的呢?
正如政策制定者可以查詢美國每家主要銀行的資產負債表,并逐秒觀察消費者存款的變化一樣,他們也可以毫不費力地查看整個Ethereum生態系統的Stablecoin發行情況,但大多數分析Stablecoin的政策文件卻采取了一種探討假設事件的分析方法。
我將在本篇中具體闡釋以下幾點內容,希望可以對想要使用鏈上數據的政策研究人員有所幫助:
2020年Twitter黑客因加密貨幣盜竊、SIM交換計劃被判5年徒刑:金色財經報道,一名英國男子通過精心策劃的Twitter黑客攻擊和單獨的與加密貨幣相關的SIM卡交換計劃賺取了約90萬美元,周五被一名聯邦法官判處5年徒刑。周五,美國紐約南區地方法院法官Jed Rakoff在宣判時表示,Joseph O’Connor的行為影響了人們的生活。[2023/6/24 21:57:20]
·鏈上數據的獲取方法
·鏈上數據所采用的結構
·提取和使用鏈上數據的幾個基本工具
在隨后的文章中,我將探討如何使用這里收集的數據來判斷Crypto市場的走勢。同時,我將在結尾發布可供免費使用的數據和代碼。通過闡明如何在區塊鏈中查詢數據,我希望向大家展示Crypto的開放性可以為數據決策開辟的新方法。
如果您就職于一家監管機構或研究機構,并在獲取Crypto數據時遇到了困難,歡迎與我們取得聯系分享你的想法,了解Paradigm可以為您提供哪些幫助。
II.鏈上數據獲取方法
一般來講,數據收集工作應集中在一個區塊鏈及特定項目的子集上,這些項目主要是以美元計價、法幣支持的Stablecoin,具體包括USDC、Tether、BinanceUSD、PaxDollar和GeminiDollar。該方法廣泛適用于鏈上數據,即便你想創建一個不同的數據集。
美國法官批準對SBF父母的手機進行嚴格監控:金色財經報道,根據一份新的法院命令,美國法官批準對SBF父母的手機上安裝監控軟件以對其進行嚴格監控,包括監控他們的互聯網瀏覽記錄、應用程序和消息,一名顧問將每周至少審查 3 次其父母手機的登陸記錄和屏幕截圖。
此前報道,SBF對與其在加密貨幣交易所FTX及其兄弟加密貨幣交易公司 Alameda Research 中的角色有關的刑事指控表示不認罪,正在等待 10 月份的審判。[2023/4/25 14:24:43]
Etherscan這類區塊瀏覽器非常適用于查看交易快照以及收集特定智能合約的信息,但根據我的經驗,它們卻不太能用于生成大型數據集。在收集和處理原始數據時,你基本上有兩個選擇:在本地運行一個完整的節點,或查詢已經從鏈上直接寫入原始數據的數據庫。第一種方法對于專業技能和計算資源的要求比較高,而第二種方法則只需要基本的SQL和Python技能就可以實現,所以這里我們將采用第二種方法。
Dune和谷歌云平臺的BigQuery有最新的鏈上數據,這些數據都以表格的形式存儲在數據庫中,研究人員可使用SQL命令對其進行查詢。Dune還提供免費的數據庫,不過其速度較慢,而且還有些局限性,但它非常適合于A/B測試的數據查詢,也有助于你熟悉數據庫的運行模式,尤其是對于那些不善于使用SQL查詢關聯數據庫的人。BigQuery雖然更加靈活快捷,但谷歌會對計算資源收費,所以其價格也相對昂貴。我在第一次處理數據時,為了節省費用,我會先在Dune中測試查詢語句,然后再將其輸入GCP中運行。在大多數情況下,這種方法都能起到很好的效果
Immutable X協議上線NFT報價功能:12月2日消息,以太坊二層擴容方案Immutable X宣布正式上線NFT報價(Offers)功能,允許NFT買家對資產提出報價,賣家同意買家提出的價格。Offers的推出將調節當前NFT市場,為Immutable X支持的NFT市場增加更多的流動性。目前,Offers處于測試階段,存在部分限制,測試期結束后將全面推出。[2022/12/2 21:17:44]
III.鏈上數據結構
要回答這個問題,你首先需要搞清楚自己處理數據的目的。對于這個測試案例,我決定為主要的法定支持Stablecoin建立一個大型的時間序列數據集,并觀察一些特定的行為:鑄幣,燒毀(即停止流通Stablecoin)和轉移。我之所以選擇以這種方式進行研究,是因為政策制定者和學者目前最為關注法定支持的Stablecoin,所以這些數據在短期內可能相當有用。
以美元計價的幾大Stablecoin都采用了ERC-20Token標準。顧名思義,ERC-20是一種在Ethereum上使用智能合約創建Token的標準化方式。如果你把區塊鏈理解為一個巨大的去中心化Excel表格,那么智能合約就類似于Excel函數。在函數中輸入參數之后,它將使用其內置邏輯產生一個特定的輸出結果。
Rhodium計劃通過與SilverSun Technologies的反向合并上市:金色財經報道,比特幣礦企Rhodium Enterprises已經同意與科技公司SilverSun Technologies(SSNT)合并,這將使該礦業公司進入美國公開市場。
根據合并協議的條款,SilverSun公司的股東將獲得每股不低于1.5美元的現金股息,總額約為850萬美元,以及新成立的容納SilverSun公司傳統業務的子公司的一股股票。
另外該交易計劃在今年年底前完成,投資銀行B. Riley擔任Rhodium的財務顧問。(coindesk)[2022/9/30 6:02:59]
我們可以使用智能合約的Ethereum地址來對它們進行定位,這些地址是區塊鏈數據結構中的唯一標識符:
·?USDC
·?TetherUSD
·?BinanceUSD
·?PaxDollar
·?GeminiDollar
與API類似,智能合約也是可以重復使用的程序。每次智能合約獲得互動指令時,都會產生該互動的記錄,并由Ethereum協議以日志的形式記錄在區塊鏈上,而這些日志則構成了智能合約活動的可靠信息來源。
FTX、Alameda Ventures提出聯合計劃,救助Voyager的客戶:金色財經消息,加密貨幣交易所FTX提出一項計劃,讓Voyager Digital的客戶有機會通過FTX平臺立即收到部分破產索賠。FTX Trading周五宣布,它與West Realm Shires Inc.(FTX.US母公司)以及Alameda Ventures一起提出了上述計劃。據悉,擁有破產索賠權的Voyager Digital客戶將能夠通過開設FTX.com賬戶立即獲得部分資金,這些資金可以提取也可以在FTX上進行交易。該提議需獲得破產法院的批準。FTX在其新聞聲明中表示希望盡快完成,“最好是在8月初”。
此外,FTX表示提出該計劃的公司不會獲取Voyager向三箭資本提供的貸款,而Voyager債務人“可以繼續向三箭資本尋求追償。”(The Block)[2022/7/23 2:32:19]
當智能合同執行一個特定函數時,例如燒毀ERC-20Stablecoin以將其從流通中移除,該函數及其參數將作為交易日志記錄在區塊鏈上。
在下面的交易中,USDCStablecoin的發行商Circle燒毀了價值1056.92美元的USDC。
如果你切換到「日志」標簽,你就可以查看交易事件日志,相應的字段為
·地址:智能合約的合約地址。USDCStablecoin的合約地址是0xa0b86991c6218b36c1d19d4a2e9eb0ce3606eb48。
·名稱:智能合約執行的函數,以及該函數中的參數。在這里,智能合約正在調用燒毀函數,該函數接收的參數指定了所燒毀幣的發送地點和燒毀幣的數量。
Etherscan的輸出結果還會顯示主題和數據字段,這些字段包含了我們在分析交易時需要解析的大部分相關信息。
·Topic0是函數簽名的哈希值。從本質上講,它會將函數及其參數經由單向算法得到一個唯一的函數哈希值。Ethereum使用的是Keccak-256哈希函數,當你通過Keccak-256算法輸入函數簽名時,它總是會產生相同的哈希值,所以任何時候該哈希值出現在日志中,你都能確信是調用了同一個函數。
·Topic1是燒毀函數的一個索引參數。在這里,Topic1是燒毀的Token被發往的地址。(注意:如果燒毀函數有更多的參數,這些參數將作為額外的主題出現)
·這里的數據字段表示所燒毀Token的數量。
既然我們已經了解了鏈上數據的基本結構,就可以開始從Dune和GCP中提取數據了。
IV.提取并處理鏈上數據的基本工具
如前所述,在這個例子中,我選擇從現有數據庫中提取鏈上數據,而不是訪問Ethereum網絡上的活動節點。為了便于理解,我使用SQL從GCP提取了大量原始數據表格,然后在Python中使用pandas庫對其進行清理。
當我們從GCP提取表格時,我們將使用BigQuery,它儲存有很多Ethereum的數據表,如下圖左邊一欄所示。當你點擊一個表格時,相應的數據庫模式就會出現,就如下圖中的ethereum.logs表。與此同時,其中涉及的地址、數據和主題都會記錄到日志數據中去。
下圖中的查詢語句將用于提取日志表中涉及與USDC、TetherUSD、BinanceUSD、PaxDollar或GeminiDollar合約互動的所有記錄。除了ethereum.logs中的信息外,一些額外的信息也很有用,所以我還合并了ethereum.block表中的數據,其中涵蓋了Gas費等信息。
得到的表格可以直接由Python讀取,并借助pandas數據框架細分為以下字段:
·log_index
·transaction_hash
·transaction_index
·address
·data
·topics
·block_timestamp
·block_number
·block_hash
·number
·miner
·size
·gas_limit
·gas_used
·base_fee_per_gas
這些字段中的大多數都可以直接使用,不過第三節中討論的主題字段需要用Python進行一些額外的清理,以便將其分成多列。
V.結語
這篇文章使用的是Ethereum的日志數據,同樣的方法也可以用來訪問鏈上的各種數據。Python和SQL是大多數經濟學家和政策制定者所熟悉的工具,它們可以發揮很大作用。與傳統金融相比,Crypto更具透明度。這樣一來,研究人員就可以利用實時數據來闡明金融體系的運作方式,并及時控制住可能出現的風險。
在下一篇文章中,我將著重分析法幣支持Stablecoin的鑄造與燒毀,并提前準備好相應的數據集。在第三篇文章中,我將以圖表的形式向大家展示精細化鏈上數據可用來研究的問題。
責任編輯:Kate
Tags:THEETHEETHHERtogetherbnb手游下載破解togetherbnb手游下載Diversified Staked Ethereum IndexEthereum Gold
21日一名杭州用戶向吳說爆料:他的FTX賬戶在19日晚突然“瘋狂”地進行交易達5000多次,賬戶資產160萬美金接近歸零,包括10幾個BTC、上百個ETH以及幾千個FTT等.
1900/1/1 0:00:00穩定幣的市值變化,往往反映了市場對加密貨幣的興趣。熊市期間,大量流動性回歸穩定幣。上一輪熊市中USDT脫穎而出,成為霸主.
1900/1/1 0:00:00區塊鏈是果樹,可信數字品牌是果實。NFT是花朵,可信數據是種子,5G、物聯網、人工智能、工業互聯網等等都是給花朵授粉的昆蟲。整個元宇宙就是一個森林生態系統.
1900/1/1 0:00:00這是又一個Web3初創公司快速長成獨角獸的故事——四位華裔創始人用9個月的時間,打造出了Solana上最大的NFT交易市場MagicEden.
1900/1/1 0:00:00在元宇宙中,科技巨頭們看到了巨大的商業機遇。所謂元宇宙,其實是一種能與現實世界連接,具有未來感且更身臨其境的互聯網愿景.
1900/1/1 0:00:00雖然應用程序鏈在2022年才開始流行,但Cosmos在2016年就已提出了"區塊鏈互聯網"的愿景。Cosmos是當今應用鏈革命的發源地,而Celestia+Cosmos應該是應用鏈的最終形態.
1900/1/1 0:00:00