在这篇文章中，我们深入研究了数据可用性问题的细节以及它如何影响以太坊的扩展。
什么是数据可用性问题？
数据可用性问题：区块链网络中的节点如何确保新提议区块的所有数据实际上是可用的？如果数据不可用，则该块可能包含被块生产者隐藏的恶意交易。
举个例子，假设Alice是ZK-Rollup(ZKR)的运营商。她在以太坊上提交了经过验证的ZK证明。如果她没有在以太坊上提交所有交易数据，尽管她的证据证明rollup中进行的所有状态转换都是有效的，但rollup的用户仍然可能对其当前账户余额一无所知。由于提交的证明的零知识性质，提交的证明没有说明当前状态。
OptimisticRollup(OPR)设置中有一个类似的例子，Alice在以太坊上提交了一个断言，但OPR的任何参与者都不能挑战它，因为交易数据不可用，因此他们无法重新计算或挑战该断言.
裕信银行：强劲的美国就业数据可能导致美元迅速走高:裕信银行表示，如果美国9月非农就业数据超出预期，相对于G10货币和新兴市场货币，美元需求可能会迅速增加。预测欧元兑美元EUR/USD将迅速跌破1.15，而1.1450代表下一个支撑位。周三美国9月ADP就业人数超预期增长，预计非农数据也将强劲。假如非农就业人数如预期增加50万人，可能足以让美联储按计划在11月开始缩减资产购买规模。裕信银行预计将增加60人。[2021/10/8 5:47:51]
为了应对上述情况，OPR和ZKR的设计都要求operator将以太坊上的所有交易细节作为“calldata”提交。虽然这使他们在短期内避免了DA问题，但随着rollup内部交易数量的增长，需要提交的数据量也会增加，从而限制了这些rollup可以提供的扩展量。
这对如今的区块链有何影响？
隐私及数据保护平台HOPR利用Ceramic提供数据可验证性:9月10日消息，隐私及数据保护平台HOPR宣布，已经开始使用去中心化网络存储协议Ceramic向节点运行者提供链下日志信息，同时保持其数据的隐私性。HOPR协议是新一代去中心化应用程序的第0层隐私基础。HOPR激励混合网允许任何应用程序发送数据，而不会泄露数据或元数据。HOPR节点将依靠Ceramic来追踪节点支付，而不会牺牲用户隐私。[2021/9/10 23:16:21]
为了回答这个问题，让我们首先回顾一下类似以太坊的区块链的一般区块结构以及任何区块链网络上存在的客户端类型。
一个块可以分为两个主要部分：
区块头：一个小区块头包含与区块中包含的交易相关的摘要和元数据。
块体：它包含所有交易数据并占块大小的大部分。
CyberVein全球大使Jack：PoC共识助力DAVE实现数据可信:据官方消息，12月22号上午11点，CyberVein全球大使Jack在《瞰见未来—国际区块链技术创新峰会暨Cointelegraph中文一周年》的首秀现场发表了《DAVE：从代码可信到数据可信》的演讲。
Jack表示：“CyberVein自主研发的PoC贡献量证明机制已从理论落地到实际运用，通过DAVE利用PoC评估数据及数据库对CyberVein生态的贡献，建设大数据互联互通解决方案。主要案例为PoC运用在PISR数据库中，每个数据处理动作都会记为数据贡献。如，AI训练模型、元数据、大数据集等资源，均由大数据提供者上传至PISR数据库并经验资源质量的评估，从而获得相应奖励。
在这样一个生态下，PoC共识机制助力DAVE实现数据可信，所有大数据都被转化成可被深度共享的知识和模型，既能保护数据产生者和数据贡献者的知识产权，也能为全球大数据需求者提供有效的辅助决策，惠及更多行业。”[2020/12/22 16:05:30]
在传统的区块链协议中，所有节点都被视为同步整个区块并验证所有状态转换的完整节点。所有节点花费大量资源来检查交易有效性并存储区块。从好的方面来说，这些节点不会接受任何无效的交易。
金色相对论 | BSN副秘书长李慧：区块链主要解决的是数据可追溯、多方互信等问题:在今日举行的金色相对论中，针对“区块链落地的爆发点会在哪儿”的问题，火币区块链研究院副院长区块链服务网络（BSN）副秘书长李慧表示，区块链主要解决的是数据可追溯、多方协同以及多方互信等问题，涉及到多方的问题，通常都是比较复杂的问题，需要大家一起来配合。但在实际落地实施的过程中总会碰到这样那样的问题，如果没有一个强有力的执行方和推动方，很可能一个很好的项目就会搁置起来，难以落地，我们也不难从很多失败的区块链项目看到这样的情景再现。最好的落地场景，我认为在当前阶段如要满足以下几个特点，才有较高的落地成功概率。
1.有真实的业务痛点和需求，除了区块链技术其它技术是很难解决的；
2.应用场景业务复杂度不高，能够快速做试点，并有良好的可复制性；
3.参与各方利益目标一致，可以实现“共赢”；
4.有实际的推动方，有促成项目成功的强烈愿望和需求。[2020/6/3]
可能还有另一类节点没有资源来验证每笔交易。相反，他们主要对了解区块链的当前状态以及与他们相关的某些交易是否包含在链中感兴趣。这些轻客户端依靠全节点来检查所有交易是否有效。因此，在安全性方面，它们依赖于可信的全节点。
郑磊：区块链提高电子证照管理系统安全性及证照数据可信性、一致性:4月23日消息，国际新经济研究院数字经济研究中心郑磊博士在接受采访时表示，区块链可以提高电子证照管理系统的安全性，证照数据的可信性和一致性。安全性、一致性都是由分布式账本技术特征决定的，任何信息修改都会在所有上链的节点同步更新，所以链上所有信息都是一致的；可信性是因为区块链加密技术和时间戳，任何修改都会被如实记录，无法随意修改或隐藏修改痕迹。郑磊博士认为，正是因为这些特点，决定了电子证照区块链管理系统的稳定性，解决了目前存在的不同证照系统互不兼容问题，形成了完整和方便查找的个人信息档案库，提高了社会治理效能。（北京晚报）[2020/4/23]
但是如果区块生产者没有透露区块背后的全部数据呢？这可以防止全节点验证所有交易。这反过来又阻止了轻节点绝对确定它所看到的由所有合法交易支持的区块头。
为了解决这个问题，我们需要一种轻客户端机制来验证数据可用性。这将确保区块生产者无法通过说服轻客户端来隐藏数据。它还将迫使区块生产者公开部分数据，使整个网络以协作的方式访问整个区块。
让我们借助一个例子更深入地探讨这个问题。假设区块生产者Alice用交易tx1、tx2、……、txn构造了一个区块B。让我们假设tx1是恶意交易。如果tx1被广播，任何完整节点都可以验证它是恶意的，并将其发送给轻客户端，轻客户端会立即知道该块是不可接受的。但是，如果Alice想隐藏tx1，她会显示标头和除tx1之外的所有交易数据。全节点无法验证tx1的正确性。让轻节点查询任意一笔交易，均匀随机。轻客户端查询tx1的概率为1n。因此，Alice能够以压倒性的可能性轻客户端接受恶意交易。由于不可归因的性质，全节点无法以任何方式证明tx1不可用。
那么，我们该怎么办呢？
该问题的解决方案在于在块中引入冗余。总的来说，有大量关于编码理论的文献，特别是擦除编码，可以帮助我们解决这个问题。
简而言之，纠删码允许我们将任何n个数据块扩展为2个数据块，其中2n个数据块中的任何一个都足以重建原始数据块。
如果我们强制区块生产者擦除交易tx1、tx2、...、txn的代码，然后隐藏单个交易，则需要隐藏n+1个交易，因为任何足以构建整个交易集的交易。在这种情况下，恒定数量的查询使轻客户端足以确信底层数据确实可用。
哇，原来如此？
不。虽然这个简单的技巧使隐藏工作变得更加困难，但区块生产者仍有可能故意以错误的方式执行擦除编码。然而，一个完整的节点可以验证这个擦除编码是否正确完成，如果没有，它可以向轻客户端证明这一点。这被称为欺诈证明。有趣的是，轻客户端需要有一个诚实的全节点邻居才能确定如果编码错误，那么它将收到欺诈证明。这确保了轻客户端以极高的概率访问没有恶意交易的链。
但是存在一个问题！如果简单地实现，欺诈证明的大小可以按照块本身的大小排序。但我们对轻客户端的资源预设禁止我们使用这样的设计。通过使用多维擦除编码技术，可以在这方面有所改进，该技术以可接受的大小减少欺诈证明的大小。为简洁起见，我们不涉及这些，但该文献对其进行了详细分析。
基于欺诈证明的解决方案的问题在于，轻客户端永远无法完全确定尚未收到欺诈证明的任何块。此外，他们一直相信其全节点对等方是诚实的。还需要激励诚实的节点不断保持审计区块。
有没有办法避免欺诈证明？
最近，向量承诺重新引起了区块链领域的关注。这些向量承诺，尤其是对多项式的恒定大小的KZG/Kate承诺，可用于设计简洁的DA方案，而无需欺诈证明。简而言之，Kate承诺允许我们使用单个组元素提交多项式。此外，该方案支持我们证明在某个点i使用恒定大小的见证，多项式评估为。承诺方案在计算上是隐藏和绑定的，也是同态的，使我们能够巧妙地避免欺诈证明。
我们强制块生产者获取原始交易数据并将其排列在大小为n,m的二维矩阵中。它使用多项式插值将大小为n的每一列扩展为大小为2n的列。对于这个扩展矩阵的每一行，它都会生成一个多项式承诺，并将这些承诺作为区块头的一部分发送。下面给出了该块的示意图。
轻客户端查询这个扩展矩阵的任何单元格以获得见证，这使它能够立即根据块头验证它。恒定大小的成员证明使抽样非常有效。承诺的同态性质确保只有在正确构造块的情况下才验证证明，并且多项式插值确保成功样本的恒定数量意味着数据以非常高的概率可用。
该方案的更精细细节以及进一步的优化和成本估算超出了本文的范围。
其他选择是什么，以及进一步变更是什么？
更高维的擦除代码和Kate承诺并不是解决DA问题的唯一方法。我们在这里跳过了其他方法，如编码默克尔树、编码交错树、基于FRI和STARK的方法，但每种方法都有其优点和缺点。
我们在Polygon，一直在使用Kate承诺开发数据可用性解决方案。在后面的文章中，我们将介绍实现细节、您现在可以如何使用它以及我们如何致力于转变DA问题空间。
郑重声明： 本文版权归原作者所有， 转载文章仅为传播更多信息之目的， 如作者信息标记有误， 请第一时间联系我们修改或删除， 多谢。