I.引言
Crypto政策在制定时很少会用到真实且细化的数据,原因主要有以下三点:
1.新兴技术领域的相关政策大多还停留在理论及定性分析层面,早期阶段很少会使用到数据。
2.尽管链上数据全部开放透明,但要想访问这些数据人们需要在短期内完成大量工作,即便对于Crypto原生从业者来说也是如此。
3.区块链「取证」公司和数据供应商有少量的数据产品,但它们都不具备灵活性/可定制性,也不能满足经济/金融研究人员的需求。
许多现代经济学和金融学研究人员错过了将工具应用于Crypto数据分析的机会。从设计上讲,Crypto可以向任何人提供细化数据,但大部分政策在制定时仍依赖于CoinMarketCap等外部预聚合时间序列数据源,而不是直接从数据源获取数据,这又是什么原因导致的呢?
正如政策制定者可以查询美国每家主要银行的资产负债表,并逐秒观察消费者存款的变化一样,他们也可以毫不费力地查看整个Ethereum生态系统的Stablecoin发行情况,但大多数分析Stablecoin的政策文件却采取了一种探讨假设事件的分析方法。
P2E游戏Parallel发布提案,将融入Echelon Prime Foundation生态系统:1 月 26 日,P2E 游戏 Parallel 发布提案,宣布将融入 Echelon Prime Foundation 生态系统。Echelon Prime Foundation 是一个专注于开发下一代游戏和 Play to Earn 的去中心化非盈利组织。[2022/1/26 9:14:55]
我将在本篇中具体阐释以下几点内容,希望可以对想要使用链上数据的政策研究人员有所帮助:
·链上数据的获取方法
·链上数据所采用的结构
·提取和使用链上数据的几个基本工具
在随后的文章中,我将探讨如何使用这里收集的数据来判断Crypto市场的走势。同时,我将在结尾发布可供免费使用的数据和代码。通过阐明如何在区块链中查询数据,我希望向大家展示Crypto的开放性可以为数据决策开辟的新方法。
如果您就职于一家监管机构或研究机构,并在获取Crypto数据时遇到了困难,欢迎与我们取得联系分享你的想法,了解Paradigm可以为您提供哪些帮助。
Partisia Blockchain与OriginAll合作以打击非洲假药:金色财经报道,Partisia Blockchain已与在瑞士注册的技术公司OriginAll建立合作伙伴关系,以在非洲阻止制药欺诈。Partisia Blockchain将为OriginAll的防伪解决方案提供技术基础。两个团队创建了代币化平台Origin All Healthies,可跟踪交易、慈善汇款和供应链物流。通过使用Origin All Healthies,可以轻松跟踪药物是否是从授权经销商处购买的。每笔交易都使用一个属于合法产品的唯一标识符(UID)。据悉,根据世界卫生组织的数据,截至2021年,在非洲国家,70%的药品都是假药,假药市场的净收入可能超过4万亿美元。[2021/12/22 7:55:00]
II.链上数据获取方法
一般来讲,数据收集工作应集中在一个区块链及特定项目的子集上,这些项目主要是以美元计价、法币支持的Stablecoin,具体包括USDC、Tether、BinanceUSD、PaxDollar和GeminiDollar。该方法广泛适用于链上数据,即便你想创建一个不同的数据集。
Etherscan这类区块浏览器非常适用于查看交易快照以及收集特定智能合约的信息,但根据我的经验,它们却不太能用于生成大型数据集。在收集和处理原始数据时,你基本上有两个选择:在本地运行一个完整的节点,或查询已经从链上直接写入原始数据的数据库。第一种方法对于专业技能和计算资源的要求比较高,而第二种方法则只需要基本的SQL和Python技能就可以实现,所以这里我们将采用第二种方法。
区块链项目ParaState筹集130万美元种子轮资金:金色财经报道,区块链项目ParaState在种子轮融资中筹集了130万美元。根据一份新闻稿,该轮融资由CMS Trading牵头,Kenetic Capital、FBG Capital和JRR Capital也参与投资。该公司的估值为1200万美元。据悉,ParaState是一个为以太坊开发人员提供访问Polkadot区块链功能的项目。[2021/1/28 14:10:36]
Dune和谷歌云平台的BigQuery有最新的链上数据,这些数据都以表格的形式存储在数据库中,研究人员可使用SQL命令对其进行查询。Dune还提供免费的数据库,不过其速度较慢,而且还有些局限性,但它非常适合于A/B测试的数据查询,也有助于你熟悉数据库的运行模式,尤其是对于那些不善于使用SQL查询关联数据库的人。BigQuery虽然更加灵活快捷,但谷歌会对计算资源收费,所以其价格也相对昂贵。我在第一次处理数据时,为了节省费用,我会先在Dune中测试查询语句,然后再将其输入GCP中运行。在大多数情况下,这种方法都能起到很好的效果
III.链上数据结构
要回答这个问题,你首先需要搞清楚自己处理数据的目的。对于这个测试案例,我决定为主要的法定支持Stablecoin建立一个大型的时间序列数据集,并观察一些特定的行为:铸币,烧毁(即停止流通Stablecoin)和转移。我之所以选择以这种方式进行研究,是因为政策制定者和学者目前最为关注法定支持的Stablecoin,所以这些数据在短期内可能相当有用。
Parity工程师预计平行链将于2021年2月实现产品级交付:在波卡官方Decoded大会上,Parity核心开发工程师和波卡联合创始人Robert Habermeier透露,目前平行链开发已经进入最后阶段,已具备初步公测条件,预计平行链将于2021年1月发布平行链测试网,2021年2月有望实现“产品级交付”。[2020/12/4 23:03:49]
以美元计价的几大Stablecoin都采用了ERC-20Token标准。顾名思义,ERC-20是一种在Ethereum上使用智能合约创建Token的标准化方式。如果你把区块链理解为一个巨大的去中心化Excel表格,那么智能合约就类似于Excel函数。在函数中输入参数之后,它将使用其内置逻辑产生一个特定的输出结果。
我们可以使用智能合约的Ethereum地址来对它们进行定位,这些地址是区块链数据结构中的唯一标识符:
·USDC
·TetherUSD
·BinanceUSD
·PaxDollar
·GeminiDollar
与API类似,智能合约也是可以重复使用的程序。每次智能合约获得互动指令时,都会产生该互动的记录,并由Ethereum协议以日志的形式记录在区块链上,而这些日志则构成了智能合约活动的可靠信息来源。
Parity提出新方案,恢复去年被冻结的2.64亿美元ETH:2017年11月,一名匿名用户无意间删除了与以太坊多重签名钱包Parity相关联的代码库,“意外”触发了一个叫做“自毁”的函数,导致价值2.64亿美元的ETH被冻结,自此之后一直在尝试恢复这些ETH。Parity在16日公布了一种新的方案,旨在使用一种更简单和入侵性更低的方法修复这个问题,提出只需将丢失的钱包代码库还原为不包含自毁功能的代码的版本。[2018/4/18]
当智能合同执行一个特定函数时,例如烧毁ERC-20Stablecoin以将其从流通中移除,该函数及其参数将作为交易日志记录在区块链上。
在下面的交易中,USDCStablecoin的发行商Circle烧毁了价值1056.92美元的USDC。
如果你切换到「日志」标签,你就可以查看交易事件日志,相应的字段为
·地址:智能合约的合约地址。USDCStablecoin的合约地址是0xa0b86991c6218b36c1d19d4a2e9eb0ce3606eb48。
·名称:智能合约执行的函数,以及该函数中的参数。在这里,智能合约正在调用烧毁函数,该函数接收的参数指定了所烧毁币的发送地点和烧毁币的数量。
Etherscan的输出结果还会显示主题和数据字段,这些字段包含了我们在分析交易时需要解析的大部分相关信息。
·Topic0是函数签名的哈希值。从本质上讲,它会将函数及其参数经由单向算法得到一个唯一的函数哈希值。Ethereum使用的是Keccak-256哈希函数,当你通过Keccak-256算法输入函数签名时,它总是会产生相同的哈希值,所以任何时候该哈希值出现在日志中,你都能确信是调用了同一个函数。
·Topic1是烧毁函数的一个索引参数。在这里,Topic1是烧毁的Token被发往的地址。(注意:如果烧毁函数有更多的参数,这些参数将作为额外的主题出现)
·这里的数据字段表示所烧毁Token的数量。
既然我们已经了解了链上数据的基本结构,就可以开始从Dune和GCP中提取数据了。
IV.提取并处理链上数据的基本工具
如前所述,在这个例子中,我选择从现有数据库中提取链上数据,而不是访问Ethereum网络上的活动节点。为了便于理解,我使用SQL从GCP提取了大量原始数据表格,然后在Python中使用pandas库对其进行清理。
当我们从GCP提取表格时,我们将使用BigQuery,它储存有很多Ethereum的数据表,如下图左边一栏所示。当你点击一个表格时,相应的数据库模式就会出现,就如下图中的ethereum.logs表。与此同时,其中涉及的地址、数据和主题都会记录到日志数据中去。
下图中的查询语句将用于提取日志表中涉及与USDC、TetherUSD、BinanceUSD、PaxDollar或GeminiDollar合约互动的所有记录。除了ethereum.logs中的信息外,一些额外的信息也很有用,所以我还合并了ethereum.block表中的数据,其中涵盖了Gas费等信息。
得到的表格可以直接由Python读取,并借助pandas数据框架细分为以下字段:
·log_index
·transaction_hash
·transaction_index
·address
·data
·topics
·block_timestamp
·block_number
·block_hash
·number
·miner
·size
·gas_limit
·gas_used
·base_fee_per_gas
这些字段中的大多数都可以直接使用,不过第三节中讨论的主题字段需要用Python进行一些额外的清理,以便将其分成多列。
V.结语
这篇文章使用的是Ethereum的日志数据,同样的方法也可以用来访问链上的各种数据。Python和SQL是大多数经济学家和政策制定者所熟悉的工具,它们可以发挥很大作用。与传统金融相比,Crypto更具透明度。这样一来,研究人员就可以利用实时数据来阐明金融体系的运作方式,并及时控制住可能出现的风险。
标签:USD区块链USDCUSD币USD价格区块链工程专业学什么区块链存证怎么弄区块链技术发展现状和趋势USDC币USDC价格
现在币圈人们已经把灰度上班和下班当作币价涨跌和买入还是卖出的重要信号了。也难怪,灰度马不停蹄地买买买造成了这一次价格连续上涨是灰度买起来的假像.
1900/1/1 0:00:00以太坊铭文协议火了,它和比特币上的Ordinals协议类似,允许人们在以太坊主网上刻入不同类型的文件,只要大小不超过96KB即可。准确来说,该协议就是在一笔交易上备注信息,然后记录到区块中.
1900/1/1 0:00:00比特币的哈希率达到了320EH/s的ATH,因为稳定的电价和不断增长的需求使美国能够实现更长的正常运行时间。 本周早些时候,比特币网络的计算能力达到了历史新高.
1900/1/1 0:00:00本期看点: 1.比特币任一方向波动都在增强2.为什么狂热的韩国不喜欢DeFi?3.开启加密牛市的四大通道 01重要新闻 1.比特币ETP近四周流入25202枚BTC,达2022年6月以来最高点.
1900/1/1 0:00:00Keep3R是一个聚合类平台,通过提供工作和任务供应和需求的匹配,撮合来聚合项目方和开发者,更进一步,是聚合项目和人才,这是在区块链时代最重要的资源.
1900/1/1 0:00:00每年年初,我总是要预测未来一年三个不为人注意的产品趋势。我们先回顾一下我去年的预测,然后再对2023年做出三项预测.
1900/1/1 0:00:00