编者按:本文来自NPC源计划,作者:邱飞旸,Odaily星球日报经授权转载。"Randomnessissomethingbeyondhumanbeings."——TheBigQiu序言:
随机是不确定性,而依赖确定性是人的天性。程序本是确定的,而引入随机数这个不确定因素之后,带来了更多的可能性。而随机数在区块链中则更为重要。在区块链的透明之下,随机数生成机制被彻底暴露;而货币成为原生属性之后,所有人都更有激励希望去操作随机的天平导向自己。在应用层,随机数决定游戏规则是否公平,在EOS各类Dapp出现随机数漏洞屡次遭受损失之后,愈加受到重视;而在协议层,随机数能够提升整体的性能,可以决定一条链是否可信,对于如Dfinity、Algorand等以随机数为卖点的项目,甚至决定其生死。不久之前,全国区块链大赛一等奖作品为“DnaRand一个公平的去中心化随机数基础设施”,实现在作恶节点不超过一半的情况下提供去中心化、不可操纵、不可预测的随机数。其设计者即为本文作者。本文为NPC随机数专题第一篇《概述与构造》,enjoy。——Ryan作者介绍:随机性(Randomness)的获取是区块链中非常重要的一个课题。这里的随机性的获取包括但不仅限于:如何在智能合约中引入不可预测的随机数;如何在共识协议中安全地进行随机抽签。显然,上述对于随机性获取的问题描述已经说明了为何这个课题十分重要。而在区块链中获取随机数非常困难,这一方面来自于区块链系统的透明性——从通常意义上来讲,该特性会使得一切算法的输入,输出以及算法本身暴露给所有的系统参与者——因此,在密码学中广泛使用的伪随机数发生器不可以被直接以硬编码的方式或者是智能合约代码的方式应用在区块链系统中来获取安全的随机数,因为透明性,系统参与者能够根据代码预测到随机数甚至操纵随机数,从而让随机源不“随机”。另一方面,随机数获取协议作为区块链系统的一个子协议常常与该系统下的其他协议有紧密的关系,如共识协议,这意味着其他协议很有可能会影响随机数获取协议的安全性。从而使随机数获取协议的设计变得非常复杂,常常需要具体问题具体分析。本篇文章总结了目前主要的应用在区块链的不可预测随机数获取协议,并提炼出它们的设计思想,方法论以及依赖的假设,然后对他们进行比较。本文分为两部分:第一部分介绍基本概念,并从零开始解释构造适用于分布式系统的随机数协议核心;第二部分介绍目前主流的应用在区块链项目中的随机数协议,并分析他们是如何使用第一部分所介绍的某类或者某几类协议核心。本文假设读者已经具有基本的区块链知识,并对以太坊智能合约的基本原理和比特币共识协议的基本原理有大致的了解。随机性的定义
道富银行、Vanguard和Symbiont完成使用DLT技术进行外汇远期交易的试点:12月6日,道富银行(State Street Corporation)、Vanguard和Symbiont完成了使用DLT技术进行外汇远期交易的试点。通过使用Symbiont的分布式账本技术,可以完成一份30天外汇远期合约。这个试点项目测试了公司未来如何在DLT网络上进行场外市场交易。三家公司透露,他们一直在积极探索区块链技术的创新用例,以协助转换资本/远期市场。换句话说,三者一直在研究区块链用例进行外汇远期和交换保证金处理,旨在实现外汇场外交易流程自动化,提高交易效率,同时显著降低交易对手信用风险。(Finance Magnates)[2021/12/7 12:56:55]
在日常生活中,我们经常会听到诸如“随机选择”,“伪随机数”,“随机模型”,“随机序列”之类的词汇,以及“伪随机数”、“真随机数”这样的概念。想要理解这些词汇和概念,必须要搞清楚随机是什么。事实上,与“随机”相对的是“确定”。因此,我们可以将“随机”直观上理解为“不确定”——无论是随机数,还是随机选择,我们都希望这个数或者选择的结果从某种程度上来讲是不确定的。因此,如果直接给出一个数,而不给出这个数的产生方式,它不能被称之为随机数,比如直接给出一个数字1,我们不能说1是随机数,但是如果这个1是通过掷骰子决定的,则可以说这个1是随机的。当然,这些都是非常直观而宽泛的理解。更精确地讲,“随机”,或者我们说“随机数”、“随机序列”,在不同的领域有不同的定义。在数学上,随机数的定义和概率论相关;在计算复杂性理论中,使用描述随机序列的程序长度来定义;密码学会结合统计特性和密码攻击来描述随机数。我们这里先给出随机序列的描述性定义,我们可以称一个序列为随机序列,当它满足:均匀性:该序列服从均匀分布。独立性:该序列的各个元素相互独立。不可预测性:依据该序列的任意片段,不能预测该序列余下的部分。展开来讲,我们可以先考虑如下问题:1、考虑一个每一项要么取1要么取0的数列。假设它的每一项均为1,它显然不是随机序列,因为违反了均匀性。均匀性要求0和1出现的概率相同。2、假设它的每一项都和前一项不相等。比如“0101010101”,它满足了均匀性,但是仍然不是随机序列,因为违反了独立性。3、对于一个满足独立性和均匀性的随机序列。比如从常数e的小数点后第10位开始依次选取数码组成序列。这样的序列在统计上满足独立性和均匀性,但是它的序列是可以被预测的。我们说过,不同的领域对随机性有不同的定义。比如,在仿真当中我们想要模拟顾客到达的间隔时间,用只满足前两条的随机序列是足够的。但是在密码学中,比如生成随机的密钥,仅满足前两条的随机序列是不够的,一个有可能被预测的随机序列用在密钥生成中当然是有安全问题的。比如我们用自然对数的底e的数码作为随机序列。e确实可以被认为在统计上是均匀分布和独立的,用来做仿真是足够的,但是不能用作密码学中的随机种子。因为对手有可能通过一定长度的已知序列猜测到是在使用e。同理,在抽奖、游戏当中使用的随机数也通常是要求不可预测的。鉴于区块链领域中涉及的多是密码学和游戏的场景,接下来的内容都是满足全部三条性质的随机序列。随机序列又可以被分为真随机(TrueRandom)序列和伪随机(Pseudorandom)序列。伪随机序列,顾名思义,就是“不是真的随机,只是看起来是随机的”。因此,根据图灵奖得主姚期智提出的概念,粗略地讲,伪随机序列就是指一个与真随机序列在计算上不可区分的序列。而真随机序列,指的是不可被重现的随机序列,比如通过抛硬币产生的随机序列。我们可以看出来,在这样的定义下,伪随机序列的统计特性应当和真随机序列无法区分,也就是说,伪随机序列同样是满足全部三条性质的随机序列。当然,这样的定义通常用在计算复杂性理论以及密码学当中,在其他领域,只满足前两条性质的随机序列也可以被称作伪随机序列。产生随机序列的发生器叫做随机数发生器(RandomNumberGenerator,RNG)。按照产生的序列的性质,我们可以将其分为真随机数发生器(TrueRandomNumberGenerator,TRNG)和伪随机数发生器(PseudorandomNumberGenerator,PRNG)。此外,还有一种与之正交的分类方法是从随机数发生器的实现方法来分类,可以将随机数发生器分为硬件随机数发生器和软件随机数发生器,它们之间的关系如图1所示:真随机数发生器通常利用一些非确定现象,通过物理手段将其转换为真随机序列。通常的非确定现象包括混沌效应和量子随机过程。其中混沌效应的特点是目前物理学能够明确解释其因果,但是由于结果对于初始值过于敏感,导致无法精确预测其结果。比如,通过收集大气噪声而产生的随机数就是利用混沌效应产生的随机数的例子。而量子随机过程则是利用微观量子态的不确定性,这个不确定性已经被目前物理学理论承认,它能够保证即使输入值完全相同,输出值也是可能完全不同的。比如利用激光器的相位噪声来生成随机数。硬件真随机数发生器,通常使用芯片实现;而软件真随机数发生器,通常利用系统自带的一些非确定现象,譬如硬盘寻道时间、RAM中的内容或者是用户的输入,Linux系统里的/dev/random就是一种软件真随机数发生器,它通过采集机器运行过程中的硬件噪音数据来获取足够的随机性来源,并依此生成随机数。而伪随机数发生器是一段程序,是一种确定性的算法,通常以短的真随机数作为输入,进行扩充,生成更长的和真随机序列非常接近的随机数序列。它的输入被称作种子(Seed)。它同样也有硬件实现和软件实现。如何从区块链上取得随机数
imToken将限制中国境内用户使用DEX、Staking等第三方金融应用:据imToken官方公告,为匹配用户属地国家的监管政策,即日起imToken将限制中国境内用户访问和使用以下第三方金融应用,包括但不限于: -DEX:去中心化币币兑换;-Staking:质押挖矿、流动性挖矿 -借贷、衍生品等DeFi应用。[2021/9/29 17:15:54]
上一节中我们给出了随机性的一个定义,这样的定义也将用于本文余下的部分。并且,我们还给出了伪随机性以及伪随机数发生器的概念。在实际应用中,可用于密码学的伪随机数发生器有很多并且也已经很成熟了,那么我们很自然地想到,能否将伪随机数发生器直接用在区块链,在区块链的共识过程或者应用上面加入随机性,使得这样的随机性满足我们上面提到的三条性质?很遗憾的是,答案是否定的。伪随机数发生器产生的随机序列的不可预测性的前提是伪随机数发生器作为一个黑盒,除了它的输出,外界无法得知其他一切信息。但是区块链上的一切都是公开透明的,包括使用的伪随机数发生器及输入到伪随机数发生器里面的种子也是一样公开透明的。在这样的情况下,所有传统的伪随机数发生器都无法在区块链的环境下产出具有不可预测性的随机数序列。而至于真随机数发生器,的确存在将真随机数发生器的结果通过可验证的不可篡改的通道引入区块链系统内部,这样的通道又被称作Oracle。以太坊现在常用的随机数发生器就是通过Oracle,引入random.org提供的随机数。但是这种方法的问题在于,所谓的“真随机数发生器”往往是中心化的,拥有这样的硬件或者软件的人或者组织拥有篡改随机数发生器结果并且不让用户发觉的能力。这对于主打“去中心化”的区块链系统来说,无疑如鲠在喉。除了伪随机数发生器和真随机数发生器,还有一类随机数发生器会直接利用区块链系统中共识过程所天然产生的随机性。比如,使用未来某个块或者之前某个块的Hash值来作为种子之一生成随机数。这种做法也常见于各种区块链类游戏以及资金盘游戏当中,但是这样的随机数获取过程有着致命的漏洞——用户有可能通过仔细选择交易时间来控制随机数向有利于自己的方向生成;即使用户无法控制,矿工也可以控制随机数的生成,并且这样的攻击成立并不需要太多算力的参与。只要最终随机数牵涉的金额足够,完全可以使用租用算力或者贿赂矿工的方式进行攻击。那么归根结底,在区块链这样的一个系统当中随机性可以来自哪里呢?也就是说,通过上面的分析,我们发现,对于如上做法的随机数发生器,无论规则或者程序设计得如何复杂,它都是确定性的算法。对于一个确定性的算法,算法本身不会对输出的随机性有任何的影响,能够影响最终输出的随机性的,只有算法的输入。因此,在区块链系统当中,我们需要在一个分布式的,公开透明的环境中去仔细选择一个有足够随机性的输入。那么符合要求的输入存在吗?答案是肯定的,这样的输入实际上来源于我们对于区块链系统参与者之间不是一个整体的假设。随机数生成协议模型
Bots Inc宣布现在可以使用DOGE从当地汽车经销商处购买二手特斯拉汽车:区块链和机器人解决方案公司Bots Inc宣布,现在可以使用DOGE从当地汽车经销商处购买二手特斯拉汽车。 (U.Today)[2021/8/17 22:18:19]
我们现在从最简单的情况开始去逐步构造一个区块链上可以使用的公平的随机数发生器。下文所涉及到的在分布式的环境下的协议都可以转换为区块链的环境,因此不对“分布式”和“区块链”做区分。为了更清楚地说明构造分布式随机数协议,也叫分布式随机数信标DistributedRandomnessBeacon,DRB),的方法论,我们首先引入一个随机数协议的抽象模型:下面,我们考虑这样的一个场景:Alice和Bob在网上凑钱一起买了一张彩票,结果中了神秘的头奖,令他们吃惊的是,奖品竟然是一只皮卡丘,如图3所示。但是皮卡丘不可分割,并且由于两人相隔甚远无法见面猜拳,所以他们俩决定设计一个对两个人都公平的随机数生成协议来确定谁能获得这只皮卡丘。v1.0最简单的随机数生成协议
那么这样的协议具体是怎么做的呢?为了构造这样的一个协议,我们需要确定这样的协议需要满足什么样的性质。考虑到每个人之间的输入是相互独立的,这样的协议需要保证每个人自己的输入也应当是和输出相互独立的,但是他们又共同对输出做出了一定贡献。只有这样,才能确保每个人都无法光凭借改变自己的选择来改变输出。同时,协议也需要保证只要有一个人的输入是均匀分布的,那么结果就是均匀分布的。现实中满足这些条件的构造方式有很多,其中一种是异或操作,将两人的输入异或之后输出:在给定Bob选1的情况下,Alice不管选0还是1,输出结果都是0和1各一半的可能性;给定Bob选0的情况同理。另一种方法是利用mod加法,将两人的输入进行模2加法之后输出,也能得到类似的结果。v2.0:带有承诺的版本
v1.0看似解决了我们的问题,实际上它有非常大的漏洞。这个漏洞在于,我们无法保证Alice和Bob“同时”输入。假如Bob等Alice向协议输入她的选择之后再进行选择,那么由于协议的交互对于两人来讲是公开的,Bob可以根据Alice的选择来调整自己的选择。例如,如果Alice的选择是0,那Bob就输入0;如果Alice是1,那他就输入1。这样,无论Alice怎么选择,Bob都可以使得异或的结果永远是1,就能拿走这只皮卡丘。事实上,同时输入是很难保证的,而为了防止这种作弊行为,我们需要保证,协议中的来自其他人的输入对于参与者来讲应该是暂时机密的,不会透露任何他们的选择的信息。与此相应的,应该多出一个去机密化的过程以计算出协议的输出。为了实现这样的需求,我们需要引入新的机制:承诺(Commitment)。这样的协议保证了,在第一个阶段里没有任何人的选择会被除自己以外的其他人获知,并且在第二阶段,即使Bob先知道了Alice揭示出来的选择值然后在自己揭示之前计算出结果,他也无法改变自己的选择了,因为第一个阶段的签名已经做出了“承诺”。这里,数字签名能够保证消息的不可篡改性,不可否认性以及暂时的机密性。如果该协议是运行于区块链之上,由于通常区块链协议都会对交易内容进行数字签名,那么我们的协议也可以将使用数字签名改为使用Hash函数。v3.0a:使用经济惩罚v2.0的版本在对于两个人的情况的时候看起来非常公平,但是对于两人以上的情况,它仍然是有漏洞的。假设Alice、Bob、Clare三个人分一只皮卡丘,其他设定不变,采用v2.0协议。这时,Bob想到了个主意:“在最后的第二阶段,我可以在输入自己的选择进行揭示之前先依据别人的揭示结果计算出输出,如果不是对我有利的输出,我就不进行揭示阶段,假装网线被挖断了。”刚才的协议无法处理这种情况。是重新再来一遍,还是就取剩下两个人的输入呢?这两种方法是都有问题的:如果重新再运行一遍协议,那么攻击者就可以利用这种重新运行的机制在每次自己不利的情况下强行使得协议重新运行;如果只取剩下两个人的输入,攻击者同样可以利用这种机制选择是否放弃输入来趋利避害。因此,我们需要有一种机制来保证参与者不得随意放弃,最简单的方式就是利用经济惩罚。如图6所示,当参与者在第一阶段承诺的时候,必须要向协议锁定一个比特币——如果是在带有智能合约的区块链的环境,这样的操作十分容易。如果Bob不按时揭示他的选择,那么就会没收Bob的比特币分给Alice和Clare,然后重启协议。由于皮卡丘的价值通常并不会超过一个比特币,Bob不会选择这样的方式进行作弊。这样的一个惩罚机制,就是为了防止这样的拒绝服务攻击。需要注意的是,之所以本节一开始所述的攻击对只有两个参与者的协议不奏效,是因为两个人的情况下,在仅剩一个人的时候,我们可以直接给出有利于剩下的参与者的结果,而在多于两个人的情形下,我们仍旧无法保证在剩下的人当中做出选择。这样的规则是一种天然的对拒绝服务的参与者的惩罚。v3.0b:使用门限机制
美国职业棒球联赛发售两张用DOGE购买的门票:美国职业棒球联赛发售了两张用DOGE购买的门票,一张的售价为100 DOGE,而且用DOGE购买的价格相比现金要便宜近50%。(Cointelegraph)[2021/5/4 21:22:31]
除了经济惩罚之外,还有另外一种方式,我们称之为门限(Threshold)机制。门限机制指的是一种协议的某一个指标达到一定阈值就可以执行特定流程的机制。在这里我们引入门限机制,主要是为了使得在协议参与人数有缺失的时候仍然能够给出正常的输出。门限机制的作用在于增强协议的健壮性,使得它能够容忍一定程度的拒绝服务攻击。我们接下来讨论的门限机制都是门限机制,意思就是对于n个参与者的协议,只需要t个参与者的输入即可完成协议的输出,注意这里的n不一定是协议预先规定好的,或者说是协议必须知道的,它也有可能是一个不确定的数字。如果协议必须规定了确切的n才能够保证正确性,那么这样的协议只能用于许可环境(PermissionedSetting)中;如果不需要规定确切的n,那么这样的协议可以被用于非许可环境(PermissionlessSetting)中。如图7和图8所示,我们使用最基本的v1.0版本的Coin-Tossing协议,将门限机制的输出作为Coin-Tossing协议的输入。这样的门限机制总的说来有三种。第一种门限机制是将输入按照某种规则排序之后,简单地取前t个输入。但是这种方式不抗女巫攻击(SybilAttack)——假如Bob是黑客帝国的复制人,他复制了一万个自己,因此Bob通过控制这一万个身份有很大的可能占有前t个输入,从而控制随机数的结果。因此,这种门限机制是无法用在没有抗女巫攻击机制的环境下——譬如,没有身份验证的非许可环境下,但它的优点在于,这样的机制不需要知道n的确切值。女巫攻击简单来讲,指的是一种网络内的少数节点控制多重身份的攻击方式第二种门限机制是无分发者的秘密分享系列的。这一系列协议均需要每产生一个随机数输出都进行一次秘密分享来保证门限机制,属于有状态(Stateful)协议。更直观地讲,比如有n个人,假设只需要有t个人提交了就能输出我们想要的随机数,同时,我们需要r个这样的随机数。那么如果采用无分发者的秘密分享系列的门限机制,我们需要这n个人相互交互至少r轮。另一个局限是,该方案需要在许可环境下实施,也就是说协议必须知道总人数n,才能确定合理的门限t。第三种方法是分布式密钥生成(DistributedKeyGeneration)+门限签名(ThresholdSignature)。门限签名可以理解为秘密分享应用到了数字签名方案中,但是它又不是单纯将两者相叠加。通常的数字签名方案是,一个人用自己的私钥加密了消息获得签名之后,签名可以被公钥等公开参数验证。而该方案使用的门限签名方案里同样有一对公私钥,但是每个参与者分别只有总私钥的其中一个碎片以及相应的公钥碎片;这些私钥碎片集合起来可以恢复出完整的私钥,公钥碎片同理;每个人可以利用自己的私钥碎片进行签名获得签名碎片,这些签名碎片可以被公钥的相应碎片验证;并且,这些签名碎片中的任意t个合起来可以计算出一个总签名,该总签名相当于用总私钥进行签名,因此也能被总公钥验证。故而这样的签名过程并不需要所有人参与,只需要n个人中的t个人的有效签名即可完成签名过程。而且无论是哪t个人参与签名,最后生成的签名是一样的。并且签名过程中涉及到的私钥不会被泄露,每个人分享的只有公钥碎片和自己的签名结果,这使得多轮无交互签名成为可能。当然,这个总的公私钥对以及相应碎片不是任意选取的,它的生成需要所有的n个人在协议第一次运行时运行分布式密钥生成协议才能生成有这样的密码学特性的公私钥对及其碎片。因此,这个方案同样存在协议必须要知道总人数n的问题。参考文献
大型清算机构OCC合作Axoni,旨在利用DLT技术革新现有基础设施:总部位于芝加哥的股票衍生品清算机构OCC已与金融科技初创公司Axoni达成合作,本次合作旨在构建一个新的分布式账本技术框架,以取代OCC现有的证券借贷基础设施。Axoni的分布式账本协议AxCore将分多个阶段进行部署,目标是为衍生品交易建立一个DLT网络,并在各家参与公司之间建立对等节点。新的解决方案有望简化、降低OCC及其客户在处理衍生品交易时的成本。(Finance Magnates)[2020/5/6]
Yao,AndrewC."Theoryandapplicationoftrapdoorfunctions."FoundationsofComputerScience,1982.SFCS'08.23rdAnnualSymposiumon.IEEE,1982.Boneh,Dan,etal."Verifiabledelayfunctions."AnnualInternationalCryptologyConference.Springer,Cham,2018.——————关于NPCNaissanceProjectCore源计划简称NPC,是一个非盈利的分布式社区媒体,主要内容包括项目测评,加密经济研究,区块链前沿技术发展,所有内容均由社区成员完成。进入NPC社区群请加微信:luowei677329,备注标明NPC
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。