原文标题：《UsingOn-ChainDataforPolicyResearch:Part1》
原文作者：BrendanMalone，Paradigm
原文编译：Kxp，BlockBeats
政策在制定时很少会用到真实且细化的数据，原因主要有以下三点：
1.新兴技术领域的相关政策大多还停留在理论及定性分析层面，早期阶段很少会使用到数据。
2.尽管链上数据全部开放透明，但要想访问这些数据人们需要在短期内完成大量工作，即便对于Crypto原生从业者来说也是如此。
3.区块链「取证」公司和数据供应商有少量的数据产品，但它们都不具备灵活性/可定制性，也不能满足经济/金融研究人员的需求。
许多现代经济学和金融学研究人员错过了将工具应用于Crypto数据分析的机会。从设计上讲，Crypto可以向任何人提供细化数据，但大部分政策在制定时仍依赖于CoinMarketCap等外部预聚合时间序列数据源，而不是直接从数据源获取数据，这又是什么原因导致的呢？
链上ChainUP WaaS联盟为Datahighway(DHX)提供全方位托管服务:据官方消息，链上ChainUP WaaS联盟宣布与Datahighway(DHX)达成深度战略合作，为DHX提供全方位的WaaS联盟托管服务，包含主链技术开发维护、钱包资产托管、云节点服务等等，双方就区块链技术应用落地、区块链金融服务、资金安全等方面深度合作。
Datahighway(DHX)是波卡生态官方builder孵化的物联网项目，西湖Westlake主网于4月9日上线。Datahighway(DHX)已于4月13日今天上线BiKi。
链上ChainUP WaaS联盟作为数字资产托管及金融服务平台，是链上集团依托3年时间所服务的600多家企业客户技术服务经验，提供钱包资产托管、云节点服务、主链定制开发、热门币种一键接入、共管钱包、金融衍生品等多种功能服务，联盟内部企业转账 0手续费、实时转帐。目前已有超过500家企业加入链上ChainUP WaaS联盟。[2021/4/13 20:14:22]
正如政策制定者可以查询美国每家主要银行的资产负债表，并逐秒观察消费者存款的变化一样，他们也可以毫不费力地查看整个Ethereum生态系统的Stablecoin发行情况，但大多数分析Stablecoin的政策文件却采取了一种探讨假设事件的分析方法。
人民大学杨东：运用区块链为知识产权提供全方位保护:中国人民大学未来法治研究院教授、区块链研究院执行院长杨东建议，运用区块链技术为知识产权提供从创造、使用到权利救济全流程、全方位的保护，利用区块链可溯源、不能篡改的属性，满足司法证据的需求。还可以尝试基于区块链技术的“共票”机制，将数据生产者、数据加工持有者、数据使用者紧密结合在一起，打破平台对数据生产资料的垄断，使数据原始生产者即广大平台的用户可以加入到与数据相关生产经营中去，分享所获利润。（人民日报）[2020/12/5 14:03:13]
我将在本篇中具体阐释以下几点内容，希望可以对想要使用链上数据的政策研究人员有所帮助：
链上数据的获取方法
链上数据所采用的结构
提取和使用链上数据的几个基本工具
在随后的文章中，我将探讨如何使用这里收集的数据来判断Crypto市场的走势。同时，我将在结尾发布可供免费使用的数据和代码。通过阐明如何在区块链中查询数据，我希望向大家展示Crypto的开放性可以为数据决策开辟的新方法。
金色财经合伙人佟扬：以全方位资讯矩阵挖掘产业最大潜力:金色财经现场报道，9月17日晚21:00-24:00，由IDEX Global独家总冠名；节点咨询主办；金色财经、IPFS100.com联合主办的“佟掌柜喊你来Lim酒”在厦门厦遇Bar曾厝垵店举行。现场，金色财经合伙人、节点咨询CEO、IPFS100.com CEO佟扬为酒会致辞。她介绍说，金色科技集团是一家专注于区块链行业的集团化企业，旗下包括金色财经、节点资本、节点咨询、金色数据、IPFS100.com、金色算力云等子公司。未来，集团将继续秉持着“以技术推动创新、以匠心追求发展”的核心价值观，坚持“规范、创新、高效、务实”的发展理念，挖掘产业最大潜力，创造行业最大价值。[2020/9/18]
如果您就职于一家监管机构或研究机构，并在获取Crypto数据时遇到了困难，欢迎与我们取得联系分享你的想法，了解Paradigm可以为您提供哪些帮助。
USDC、Tether、BinanceUSD、PaxDollar和GeminiDollar。该方法广泛适用于链上数据，即便你想创建一个不同的数据集。
动态 | 中国联通结合区块链等技术实现全方位智慧工地管理:在复工复产大潮中，中国联通正发挥独特的创新技术优势，利用5G、大数据、云网融合、云计算等新技术，结合数据一点集中优势，推动重大项目复工复产。其中，中国联通与中国建筑集团打造的位于亦庄经济技术开发区的“5G智慧工地”项目。“5G智慧工地”项目实现了多项突破：运用“一通多能四驱动”架构，采用定制化5G网络，围绕人、机、料、法、环、测等施工管理，实行5G实名制双防监管系统、5G双360度空间立体实时监控系统、5G智慧信息岛、多维安全监控系、5G作业面监管系统统、5G+智慧图纸技术等大量功能，同时结合了人工智能、区块链、云计算加边缘计算、大数据等技术，开启多项创新应用，实现全方位智慧工地管理。（新华网）[2020/2/19]
Etherscan这类区块浏览器非常适用于查看交易快照以及收集特定智能合约的信息，但根据我的经验，它们却不太能用于生成大型数据集。在收集和处理原始数据时，你基本上有两个选择：在本地运行一个完整的节点，或查询已经从链上直接写入原始数据的数据库。第一种方法对于专业技能和计算资源的要求比较高，而第二种方法则只需要基本的SQL和Python技能就可以实现，所以这里我们将采用第二种方法。
安永与Coinbase达成长期深入合作，前者为后者IPO提供全方位辅导:据悉，全球四大会计师事务所之一的安永于近期与全球知名的数字货币交易所和钱包服务提供商Coinbase达成长期深入合作，安永将组建包括审计部门、咨询部门、并购部门和税务部门的跨条线的Fintech专家团队为Coinbase提供第三方鉴证审计，同时为Coinbase的IPO提供全方位的辅导。[2018/3/27]
Dune和谷歌云平台的BigQuery有最新的链上数据，这些数据都以表格的形式存储在数据库中，研究人员可使用SQL命令对其进行查询。Dune还提供免费的数据库，不过其速度较慢，而且还有些局限性，但它非常适合于A/B测试的数据查询，也有助于你熟悉数据库的运行模式，尤其是对于那些不善于使用SQL查询关联数据库的人。BigQuery虽然更加灵活快捷，但谷歌会对计算资源收费，所以其价格也相对昂贵。我在第一次处理数据时，为了节省费用，我会先在Dune中测试查询语句，然后再将其输入GCP中运行。在大多数情况下，这种方法都能起到很好的效果
III.链上数据结构
要回答这个问题，你首先需要搞清楚自己处理数据的目的。对于这个测试案例，我决定为主要的法定支持Stablecoin建立一个大型的时间序列数据集，并观察一些特定的行为:铸币，烧毁(即停止流通Stablecoin)和转移。我之所以选择以这种方式进行研究，是因为政策制定者和学者目前最为关注法定支持的Stablecoin，所以这些数据在短期内可能相当有用。
以美元计价的几大Stablecoin都采用了ERC-20Token标准。顾名思义，ERC-20是一种在Ethereum上使用智能合约创建Token的标准化方式。如果你把区块链理解为一个巨大的去中心化Excel表格，那么智能合约就类似于Excel函数。在函数中输入参数之后，它将使用其内置逻辑产生一个特定的输出结果。
我们可以使用智能合约的Ethereum地址来对它们进行定位，这些地址是区块链数据结构中的唯一标识符：
USDC
TetherUSD
BinanceUSD
PaxDollar
GeminiDollar
与API类似，智能合约也是可以重复使用的程序。每次智能合约获得互动指令时，都会产生该互动的记录，并由Ethereum协议以日志的形式记录在区块链上，而这些日志则构成了智能合约活动的可靠信息来源。
当智能合同执行一个特定函数时，例如烧毁ERC-20Stablecoin以将其从流通中移除，该函数及其参数将作为交易日志记录在区块链上。
在下面的交易中，USDCStablecoin的发行商Circle烧毁了价值1056.92美元的USDC。
如果你切换到「日志」标签，你就可以查看交易事件日志，相应的字段为
地址：智能合约的合约地址。USDCStablecoin的合约地址是0xa0b86991c6218b36c1d19d4a2e9eb0ce3606eb48。
名称：智能合约执行的函数，以及该函数中的参数。在这里，智能合约正在调用烧毁函数，该函数接收的参数指定了所烧毁币的发送地点和烧毁币的数量。
Etherscan的输出结果还会显示主题和数据字段，这些字段包含了我们在分析交易时需要解析的大部分相关信息。
Topic0是函数签名的哈希值。从本质上讲，它会将函数及其参数经由单向算法得到一个唯一的函数哈希值。Ethereum使用的是Keccak-256哈希函数，当你通过Keccak-256算法输入函数签名时，它总是会产生相同的哈希值，所以任何时候该哈希值出现在日志中，你都能确信是调用了同一个函数。
Topic1是烧毁函数的一个索引参数。在这里，Topic1是烧毁的Token被发往的地址。(注意：如果烧毁函数有更多的参数，这些参数将作为额外的主题出现）
这里的数据字段表示所烧毁Token的数量。
既然我们已经了解了链上数据的基本结构，就可以开始从Dune和GCP中提取数据了。
IV.提取并处理链上数据的基本工具
如前所述，在这个例子中，我选择从现有数据库中提取链上数据，而不是访问Ethereum网络上的活动节点。为了便于理解，我使用SQL从GCP提取了大量原始数据表格，然后在Python中使用pandas库对其进行清理。
当我们从GCP提取表格时，我们将使用BigQuery，它储存有很多Ethereum的数据表，如下图左边一栏所示。当你点击一个表格时，相应的数据库模式就会出现，就如下图中的ethereum.logs表。与此同时，其中涉及的地址、数据和主题都会记录到日志数据中去。
下图中的查询语句将用于提取日志表中涉及与USDC、TetherUSD、BinanceUSD、PaxDollar或GeminiDollar合约互动的所有记录。除了ethereum.logs中的信息外，一些额外的信息也很有用，所以我还合并了ethereum.block表中的数据，其中涵盖了Gas费等信息。
得到的表格可以直接由Python读取，并借助pandas数据框架细分为以下字段：
log_index
transaction_hash
transaction_index
address
data
topics
block_timestamp
block_number
block_hash
number
miner
size
gas_limit
gas_used
base_fee_per_gas
这些字段中的大多数都可以直接使用，不过第三节中讨论的主题字段需要用Python进行一些额外的清理，以便将其分成多列。
原文链接
郑重声明： 本文版权归原作者所有， 转载文章仅为传播更多信息之目的， 如作者信息标记有误， 请第一时间联系我们修改或删除， 多谢。