使用“扫一扫”即可将网页分享至朋友圈。
方法论、工具与团队：如何成为一名Web3数据分析师？
本文假设你是一个刚接触web3的数据分析师，开始组建你的 web3 分析团队，或者刚刚对 web3 数据产生兴趣。无论采用哪种方式，你都应该已经大致熟悉了 APIs、数据库、转换和模型在 web2 中的工作方式。
在这本新指南中，我将尽量简明扼要地阐述我的三个观点:
思考：为什么开放的数据渠道会改变数据发挥效用的方式
工具：web3 数据栈中的工具概述，以及如何利用它们
团队：web3 数据团队的基本考虑和技能
数据思考
让我们先总结一下如何在 web2 中构建、查询和访问数据（即访问 Twitter 的 API）。我们有四个步骤来简化数据渠道:
触发 API 事件（发送了一些推文）
更新到数据库（连接到现有的用户模型/状态更改）
特定产品/分析用例的数据转换
模型训练和部署（用于管理你的 Twitter feed）
当数据是开源的时候，唯一需要的步骤是在转换完成之后。Kaggle（1000个数据科学/特征工程竞赛）和 hugs Face（26,000 个顶级 NLP 模型）等社区使用一些公开的数据子集来帮助企业构建更好的模型。有一些特定领域的情况，比如在前面的三个步骤中开放数据的开放街道地图，但是它们仍然有写权限的限制。
我想声明的是，我只是在这里谈论数据，我并不是说 web2 完全没有开源。像大多数其他的工程角色一样，web2 数据有大量的开源工具来构建他们的管道（dbt, apache, TensorFlow）。我们仍然在 web3 中使用所有这些工具。总之，他们的工具是开放的，但他们的数据是封闭的。
Web3 也将数据开源，这意味着不再只有数据科学家在开放环境下工作，分析工程师和数据工程师也在开放环境下工作！每个人都参与到一个更连续的工作流程中，而不是一个几乎是黑盒的数据循环。
工作的形式已经从 web2 数据大坝到 web3 数据河流、三角洲和海洋。同样重要的是需要注意，生态系统中的所有产品都会同时受到这个循环的影响。
让我们看一个 web3 分析师如何一起工作的例子。有几十家交易所使用不同的交易机制和费用，允许你将代币 A 交换为代币 B。如果这些是典型的交易所，如纳斯达克，每个交易所将报告自己的数据在 10k 或一些 API，然后其他一些服务，比如 capIQ，会把所有交换数据放在一起，然后收取费用，让你访问他们的 API。也许有时候，他们会举办一次创新竞赛，这样他们就可以在未来收取额外的数据/图表功能。
在 web3 交易所中，我们有这样的数据流：
dex.trades 是 Dune 上的一个表格（由许多社区分析工程师随着时间的推移整理而成），所有的 DEX 交换数据都被聚合在一起，所以你可以很容易地在所有交易所中搜索单个代币的交易量。
一名数据分析师通过社区开源查询创建了一个仪表盘，所以现在我们对整个 DEX 行业有了一个公开的概述。即使所有的查询看起来都是由一个人写的，你可以猜测这是在discord上经过大量的争论，才准确地将其拼凑在一起得。
DAO 科学家查看仪表板，并开始在他们自己的查询中分割数据，查看特定的对，比如稳定币。他们会观察用户行为和商业模式，然后开始建立假设。由于科学家可以看到哪个 DEX 在交易量中占据了更大的份额，他们将提出一个新的模型，并提议改变治理参数，以便在链上进行投票和执行。
之后，我们可以随时查看公众查询/仪表板，看看提案如何创造出更具竞争力的产品。
在未来，如果另一个 DEX 出现（或升级到一个新版本），这个过程将重复。有人将创建插入查询来更新这个表。这将反过来反映在所有的仪表板和模型（没有任何人必须回去和手动修复/更改任何东西）。任何其他分析师/科学家都可以以别人已经完成的工作为基础。
由于共享的生态系统，讨论、协作和学习在一个更紧密的反馈循环中发生。我承认这有时会让人难以承受，我认识的分析师基本上都在轮换数据耗尽。然而，只要我们中的一个人继续推动数据向前（例如，某人创建了插入 DEX 查询），那么其他人都会受益。
它并不总是必须是复杂的抽象视图，有时它只是实用功能，如使它容易搜索 ENS 反向解析器或工具的改进，如自动生成大多数 graphQL 映射与一个 CLI 命令！所有这些都可以被每个人重用，并且可以在某些产品前端或您自己的个人交易模型中进行 API 的使用。
虽然这里开启的可能性是惊人的，我确实承认，轮子还没有平稳地运行。与数据工程相比，数据分析师/科学领域的生态系统仍然很不成熟。我认为有以下几个原因：
数据工程是web3多年来的核心焦点，从客户端 RPC API 的改进到基本的 SQL/graphQL 聚合。像 theGraph 和 Dune 这样的产品就是他们在这方面所付出努力的例证。
对于分析师来说，要理解 web3 独特的跨协议关系表是非常困难的。例如，分析人员可以理解如何只分析 Uniswap，但却很难在混合中添加聚合器、其他 DEXs 和不同的代币类型。最重要的是，实现这一切的工具直到去年才真正出现。数据科学家通常习惯于收集原始数据并独自完成所有的工作（建立他们自己的管道）。我认为他们不习惯在开发初期与分析师和工程师进行如此密切和公开的合作。对我个人来说，这花了一段时间。
除了学习如何协同工作之外，web3 数据社区还在学习如何跨这个新的数据堆栈工作。你不再需要控制基础设施，或者慢慢地从 excel 构建到数据池或数据仓库，只要你的产品上线，你的数据就会到处上线。你的团队基本上是被扔到了数据基础设施的最深处。
数据工具
以下是一些数据工具汇总：
下面我们看看每种类型以及用法：
交互+数据源：这主要用于前端、钱包和较低层次的数据摄取。1
客户端：虽然以太坊的底层实现是相同的，但每个客户端都有不同的额外特性。例如，Erigon 对数据存储/同步进行了大量优化，Quorum 支持隐私链。
节点即服务：你不必选择运行哪个客户端，但使用这些服务将为你节省维护节点和 API 正常运行的麻烦。节点的复杂性取决于你想要捕获多少数据（轻节点→全节点→归档节点）。
查询+数据映射：这一层中的数据要么作为 URI 在合约中引用，要么来自使用合约 ABI 将交易数据从字节映射到表模式。合约 ABI 告诉我们合约中包含哪些函数和事件，否则，我们只能看到部署的字节码（没有这个 ABI，你无法反向工程/解码合约交易）。
交易数据：这些是最常用的，主要用于仪表板和报告。theGraph 和 Flipside API 也在前端中使用。有些表是合约的 1:1 映射，有些表允许模式中额外的转换。
元数据“协议”：这些并不是真正的数据产品，而是用于存储 DIDs 或文件存储的。大多数 NFT 将使用其中的一个或多个数据源，我认为今年我们将开始越来越多地使用这些数据源来增强我们的查询。
专业提供商：其中一些是非常健壮的数据流产品，Blocknative 用于 mempool 数据，Parsec 用于链上交易数据。其他的聚合链上和链外数据，比如 DAO 治理或国库数据。
高维度数据提供商：你不能查询/转换他们的数据，但是他们已经帮你完成了所有繁重的工作。
如果没有强大的、杰出的社区来配合这些工具，web3 就不会出现！我们可以看到每种类型对应的杰出社区：
Flashbots：专注于 MEV 上，提供从保护交易的自定义 RPC 到专业白帽服务的所有事宜。MEV 主要指的是枪跑问题，当有人支付比你更多的 Gas（但直接给矿商），这样他们就可以抢先执行他们的交易。
Dune 数据精英：专注于为 Dune 的数据生态做贡献的数据分析精英。
Flipside 数据精英：专注于为 Web3 数据升天做贡献的数据分析精英。
MetricsDAO：跨生态工作，处理多个链上的各种数据奖励。
DiamondDAO：专注于 Stellar 的数据科学工作，主要在治理、财政库以及代币管理方面。
IndexCoop：专注于代币等特定领域的分析，以制定加密货币行业最好的指数。
OurNetwork：每周对各类协议以及 Web3 的数据覆盖。
注：以上 DAO 的参与联系方式详看原文。
每个社区都做了大量的工作来改善 web3 的生态系统。毫无疑问，拥有社区的产品将以 100 倍的速度增长。这仍然是一个被严重低估的竞争优势，我认为除非人们在这些社区中建立了一些东西，否则他们不会获得这个优势。
数据团队
不用说，你也应该在这些社区中寻找可以加入你的团队的人。让我们进一步分析重要的web3数据技能和经验，这样你就能真正知道你在搜索什么。如果你想被雇佣，把这看作是你追求的技能和经验！
至少，分析师应该是 Etherscan 侦探，知道如何阅读 Dune 仪表盘。这可能需要 1 个月的时间来适应悠闲的学习，如果你真的要疯狂学习，则需要2周的时间。
除此之外，你还需要考虑更多的内容，特别是时间分配和技能转移。
时间方面：在 web3 中，数据分析师大约有 30-40% 的时间将花在与生态系统中的其他分析师和协议保持同步上。请确保你不会气晕他们，否则，这将成为对每个人的长期损害。与更大的数据社区一起学习、贡献和构建是必要的。
可转移性方面：在这个领域，技能和领域都是高度可转移的。如果使用不同的协议，可能会减少上手时间，因为链上数据的表模式都是一样的。
记住，知道如何使用这些工具并不重要，每个分析师或多或少都应该会写 SQL 或创建数据仪表盘。这一切都是关于如何做出贡献并与社区合作。如果你正在面试的人不是任何 web3 数据社区的一员（而且似乎对这一块没有任何兴趣），你可能要问问自己这是否是一个危险信号。
原文链接：
https://ath.mirror.xyz/w2cxg5OP1OEcqvSgsEjSSyKRJhPmam0w-fXGogiG-8g
作者 | Andrew Hong
译者：GaryMa 吴说区块链
“广东财经网”的新闻页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题，请与
我们联系删除或处理，客服邮箱1098101642@qq.com，稿件内容仅为传递更多信息之目的，不代表本网观点，亦不代表本网站赞同
其观点或证实其内容的真实性。
- 声音提醒
- 60秒后自动更新
【民政部回应何时恢复婚姻登记】民政部社会事务司二级巡视员杨宗涛表示，婚姻登记场所是人群聚集场所，部分地区暂停婚姻登记工作是对人民群众安全负责。未停止登记的地方推广用电话、网络、qq群预约登记，控制登记人数，分批分段登记，减少人员聚集和在登记机关停留时间。已停止婚姻登记地方将根据当地疫情控制情况逐渐恢复。
15:54欧洲央行副行长金多斯：欧洲央行还没有达到逆转利率。宽松政策的副作用更明显了。
15:54财经网站Forexlive分析师Justin Low评瑞士1月CPI月率：尽管通胀年率保持稳定，但核心通胀率有所下降，这一点令人更加担忧。这只是进一步巩固了瑞士央行维持现有货币政策不变，并可能在未来寻求更多宽松措施的观点。
15:54【武汉两大批发市场商户开业率超过80%】商务部市场建设司司长朱小良10日称，目前武汉生活必需品供应基本正常，除冷鲜肉、鲜叶菜等少数品种存在结构性短缺外，大部分重要生活物资供应充足，未发生明显抢购或脱销断档情况。当地白沙洲和四季美两大批发市场正常营业，商户开业率超过80%，日交易量上升至3000吨以上。（国是直通车）
15:53【日本2019年经常项目顺差增长4.4%】日本财务省10日发布的国际收支初步统计报告显示，主要受外国人入境游消费扩大影响，2019年日本经常项目顺差增长4.4%。报告显示，2019年日本经常项目顺差为20.06万亿日元（1美元约合109.8日元）。其中，商品贸易方面，由于液化天然气价格下跌等因素，进口下降5.6%至75.56万亿日元；由于汽车部件及钢铁等产品出口减少，出口下降6.3%至76.12万亿日元。货物贸易顺差减少53.8%，为5536亿日元。（新华社）
15:53欧元兑美元EUR/USD短线波动不大，现报1.0952。
15:53瑞士1月CPI年率：0.2%，前值：0.2%，预期：0.1%；瑞士1月CPI月率：-0.2%，前值：0%，预期：-0.2%。
15:52英镑兑美元GBP/USD短线走低13点，现报1.2890。
15:52【宁德时代“供电”国产特斯拉 有望拉低售价20%】全国乘联会秘书长崔东树分析认为，“随着特斯拉国产化率提升和产能爬坡，未来特斯拉国产车型的价格下探空间还是很大的。”他预计今年下半年，国产Model 3车型的售价就有望降至25万元，降幅接近20%。（新京报）
15:51【内蒙古：对不裁员或少裁员企业返还上年度50%失业保险费】据内蒙古新型冠状病毒肺炎疫情防控工作指挥部消息，疫情期间，内蒙古对不裁员或少裁员的企业返还上年度实际缴纳失业保险费的50%，对面临暂时性经营困难的中小企业，返还标准提高到上年度6个月企业及其职工缴纳社会保险费的50%。
15:51【商务部：2019年服务进出口总额54152.9亿元 同比增长2.8%】商务部新闻发言人表示，2019年，在服务贸易创新发展试点等政策的激励下，我国服务贸易总体保持平稳向上态势，逆差明显下降，结构显著优化，高质量发展成效初步显现。全年服务进出口总额54152.9亿元（人民币，下同），同比增长2.8%。其中，出口总额19564.0亿元，同比增长8.9%；进口总额34588.9亿元，同比减少0.4%。（第一财经）
15:51【振华股份：疫情导致下游客户开工推迟 产品库存上升】振华化学公告，公司目前生产经营稳定，所有产能均正常开工，原材料采购能基本满足生产需要，由于疫情导致下游客户开工推迟，公司出货量减少，产品库存有所上升。公司将根据客户需求、疫情及市场变化，适度调整生产经营策略，尽可能保持生产经营的稳定。
15:50环旭电子2月10日晚间公告，公司2020年1月合并营业收入为23.27亿元，较去年同期的合并营业收入减少27.83%，较2019年12月合并营业收入环比减少37.23%。
15:49精测电子：与京东方集团签订了多份销售合同，合同累计金额达到6.96亿元。
17:12华夏银行：银保监会同意本公司在全国银行间债券市场发行不超过100亿元人民币的金融债券，募集资金全部用于绿色信贷。
17:03
