金色深核|“高并发”中的“文昌链”_区块链:API

编者按:本文内容源于2022年6月25日BSN月度说明会上边界智能创始人曹恒对文昌链的汇报口述内容,会后边界智能CTO奚海峰为内容增加了更为详细的问题分析和分布式应用开发建议,本文因此成为一篇全面记录文昌链经历高并发过程的文章。

《金色深核》栏目认为开放联盟链将会是中国Web3进程中的重要角色,其基础设施应对互联网级别并发的经验也甚为重要,为此,将文章中进行后期编辑,以更为清晰的叙述过程,为关注开放联盟链的读者、开发者所用。

作者:曹恒、奚海峰,编辑:王航

背景:6月的并发高峰

6月29日,中国区块链基础设施BSN官方发布了一则数据,其NFT基础设施BSN-DDC单日链上交易总数接近百万次,超过了以太坊单日链上交易数。

BSN-DDC是由多个开放联盟链组成的NFT基础设施,以适应中国监管合规环境的特性塑造着与以太坊开源生态相似的应用多样性。

由边界智能搭建的的文昌链,是目前支持BSN-DDC运行的四条开放联盟链之一,在6月,BSN链上数据爆发的表现中,文昌链链上数据爆发尤为突出。

据边界智能创始人曹恒描述,截止到2022年6月21日19点18分,文昌链上活跃链账户数为645万,以链上数据估算,上线应用近250个,进行测试对接的应用约300个。

而此时链上NFT技术支持的可信数据对象总数为797万。通过历史数据分析,所有可信数据对象中,55%产生于6月,约为442万个。

金色晚报 | 今日重要动态一览:1.国家外汇局将重点研究推进跨境区块链平台新场景建设

2.上海市委书记李强:促进区块链等新技术应用

3.中国一汽董事长徐留平:区块链等新技术推进汽车产业增长发展

4.海南区块链试验区将发布「链上海南」计划

5.海南首现由政府、银行、企业参与数据监管的区块链积分发行监管系统

6.北京互联网法院:“天平链”电子数据存证数量超过1000万条

7.当前在全国18个自贸试验区中,已有15个自贸试验区展开区块链实践

8.软银推出内置区块链钱包的借记卡 目前仅在日本发售

9.Telegram被要求在12月16日赴伦敦作证GRAM不具备证券产品属性

10.BTC当前价格为7300美元,今日最低跌至7150美元,最高涨至7474美元[2019/12/2]

文昌链于2021年2月上线,免费稳定试运行一年后,于2022年3月份开始商业化运行,随后文昌链的业务量已开始快速增长,从月度业务量翻倍到6月实现指数级增长。

而伴随着6月业务量飞涨,618前后在并发高峰期,文昌链出现了卡顿、交易排队的情况,区块打包时间最高达到了30秒,有所影响用户体验。

随后,BSN运维团队红枣科技和文昌链技术支持团队边界智能通力合作,在不停服的前提下对系统进行了紧急升级及优化。

调优后,正在以小于4秒的平均出块时间平稳安全地运行。

问题:上链交易缓慢与优化思路

全球公链上的交易堵塞、等待问题很常见。文昌链在高并发情况下出现的此类问题,是区块链在面对商业化应用中必然要面对的。

在传统互联网应用中,平台方可以通过增加计算资源的水平扩展方式和挑战任务并行分配方式来解决,有多大压力,就用多大的计算资源解决。

金色相对论 | 康纳尔大学在国际著名大学区块链教学方面排第一:在今日的金色相对论中,针对“访问美国康奈尔大学区块链教学科研的感受”的问题,北京大学计算机系研究员、博士生导师,肖臻表示我上周刚刚访问康奈尔大学回来,感觉那里区块链的教学科研氛围确实非常好。美国最大的虚拟货币交易所Coinbase对国际著名大学在区块链教学方面做的一个排名。康纳尔大学排第一,国内没有一所大学上榜,说明差距还是存在的。当然,国内很多大学也都在积极开设区块链方面的课程,我当年在康纳尔大学的co-advisor,Robbert van Renesse就是区块链技术的专家。接下来我们打算跟康纳尔大学充分开展区块链领域的教学科研合作,建立起创新创业的良好氛围。[2019/9/12]

而在区块链上,尤其是在与公链同样分布式结构的开放联盟链上,其性能的优化、升级需要经历相对复杂的过程。

性能问题公示

文昌链采用开放应用服务模式,支持多元应用生态。经技术团队进行网络性能分析,其问题和解决方案如下:

问题1:接收用户交易的全节点跟共识节点之间的p2p连接不稳定,造成很多交易不能及时进入共识节点参与出块。

解决方案:优化全节点与共识节点之间p2p连接配置参数,提高连接稳定性。

解决状态:已解决

问题2:全网交易量高峰时段,每个新区块包含交易数很多,共识节点在广播和校验每个区块上耗费时间变长,造成出块间隙时间变长;虽然网络整体吞吐量增加,但单个交易的上链延迟变长,用户体验到的上链等待时间变长。

解决方案:优化共识算法各阶段超时时间配置参数,提高出块速度。

解决状态:已改善,还在持续优化参数和垂直扩展共识节点性能。

COP27宣布推出“以太坊气候平台”,创始成员包括微软、Polygon、ConsenSys:11月20日消息,《联合国气候变化公约》第 27 次缔约方会议(COP27)宣布推出“以太坊气候平台”Ethereum Climate Platform (ECP),区块链软件技术 ConsenSys 和企业软件开发商 Allinfra 召集众多公司成为创始成员,包括:微软、Polygon、AAVE、Art Blocks、Celo、CodeGreen.Org、Enterprise Ethereum Alliance、ERM、Filecoin Green、Gitcoin、Global Blockchain Business Council、Huobi Global、Laser Digital、The Climate Collective、UPC Capital Ventures 和 W3bcloud 等。[2022/11/21 7:50:37]

问题3:EVM相关交易因nonce错误而上链失败,需要用户重试。

解决方案:应用修改上链策略,每个发交易的链账户要串行发送交易,确保前一个交易的上链状态确定后再发送下一个交易;若要提高交易并发性能,则可采用多个链账户并行发送交易。

解决状态:已经发布更新的FAQ和代码示例

分析:为何开放联盟链调优更为复杂?

开放联盟链是结合了公链、联盟链技术优势,能支持非信任环境下的分布式公共账本服务,其可以很好地支持商业级应用的合规需求和良好的应用开发体验。

因此,OPB的调优比公链、联盟链都要复杂许多。

在传统的互联网中心化应用开发中,应用上线前要对数据库进行规划,包括分区,如何给数据表加读写锁,索引等等。应用上线后,中心化数据库的调优可能需要一个月甚至更长的时间,来监控应用访问数据库的模式,针对应用进行进一步的优化。

欧盟委员会将于2023年一季度提出数字欧元相关法律框架:9月29日消息,欧洲央行(ECB)发布《数字欧元调查阶段取得的进展》,在关于用于验证交易的转账机制的设计时,欧洲央行表示,欧元系统将进一步探索数字欧元的解决方案,其中交易将在网上进行,并由第三方验证,理事会还批准继续探索用于离线支付的点对点验证解决方案。

在引入数字欧元之前,还需要采取一些措施,在2023年第一季度,欧盟委员会将提出一项建立数字欧元的法律框架,下一步的设计必须在结算模式、分配模式、中介机构的作用以及筹 /注资等方面做出决定,理事会将在2023年秋季决定是否开始进入实现阶段,以开发和测试数字欧元的技术解决方案和业务安排。

此前7月份消息,欧洲央行表示,预计在2023年秋季完成数字欧元项目的调查阶段。8月份消息,欧洲央行管委Olli Rehn表示,欧洲央行将于明年10月结束调查后决定是否建立数字欧元。[2022/9/29 6:01:39]

而相比中心化数据库的调优,开放联盟链的调优难度近乎是其20倍甚至以上。

区块链应用,又称分布式应用。所以有人说区块链则是分布式数据库,但区块链的难度远远超越了分布式数据库。

原因在于分布式数据库的调优,比中心化数据库增加了数据的同步、多阶段提交以保持数据一致性以及网络通讯优化等多方面的复杂步骤。

而区块链相比分布式数据库,除数据同步、保证数据一致性外,还需要保证网络的安全性。

区块链中以众多节点来共同维护可信数据账本。开放区块链需要假定每一个节点都有作恶的可能性。因此需要识别作恶数据,并可以通过共识算法,对合法交易进行排序和正确执行,并将结果分布式可信地写入账本。

在这个过程中:

金色财经独家现场报道 ICORating合作主管Mikhail Mironov:2018年第一季度资金领先项目是挖矿和隐私安全:金色财经独家现场报道,在火币Pro举办的越南Blockchain Festival千人大会上,ICORating合作主管Mikhail Mironov提供数据显示,有一半的项目没有任何发展,他表示这对于行业来说是一个负面影响。从项目行业来看,在Mikhail Mironov列举的2018年第一季度平均项目资金量排名前20区块链项目行业中,最领先的项目行业是挖矿和隐私安全领域。[2018/5/25]

共识算法可以保证分布式节点以block方式组成链式数据,并保证当有恶意请求、网络不可靠或者黑客攻击的情况下,算法依然可以准确无误地运行。

共识协议的执行,会产生相比分布式数据库更多的网络通讯,需要协调更多节点的信息以及本地运算结果的全网同步。

在这样复杂的过程里,也代表着,优化区块链是优化分布式数据库、中心化数据库的难度的10倍、20倍。

在这样的理解基础上再看OPB。兼顾公链和联盟链特性,让开放联盟链带来了创新性,为开发者和用户带来了友好体验,但也让开放联盟链的参数调优比一般的公链或者联盟链更难。

在公有链上,应用开发者管理自己的节点,根据自己的应用特性优化节点。在联盟链上,普通联盟链一般服务封闭生态的1~2个应用,通过统一中心化的API服务支持应用。

而开放联盟链要面对开放多元的应用读写需求,相比公链和联盟链,OPB面对的是更多不确定的应用访问模式,也扩大了其优化的参数范围。并且在保证安全、开放的基础上,还要保证高性能要求。

文昌链基于Cosmos/Tendermint共识技术开发,兼顾开放、安全、合规、高性能等方面,在调优上不只是几个参数的调整,及简单数据索引的变化,要涉及记账节点和全节点的网络拓扑,共识速度,甚至不同节点的读写带宽,不同通讯类型信息的带宽分配等等。

在过去618的应用高峰期,在调优的过程中,文昌链为了保证网络不停服,选择循序渐进的一个节点一个节点地调整。虽然单个节点调整、重启的过程也会影响文昌链暂时的性能。但即使网络体验会有些许延迟,也能保链账本正确、链资产安全以及链安全持续运行。

后续:正在进行的优化迭代

除了上面实施的方案,文昌链经历了此次高并发后,边界智能团队还梳理了多个层次的优化策略,主要包括:

1.节点配置拓扑的优化:在测试网络验证后,正在文昌链上部署,后续还将持续优化;

2.Tendermint共识对于EVM的优化:文昌链支持Cosmos原生NFT也支持以太坊虚拟机NFT,已经找到了Tendermint共识对于EVM优化的方式。未来边界智能会验证后协调全球相关开源开发者一起验证,预计需要1个多月的时间;

3.多全节点分级的拓扑结构设计:BSN网络计划下半年向社区开放全节点部署,有能力的厂商可自行部署全节点,边界智能已经开始和红枣科技团队协同,部署BSN环境外的全节点,并已经在支持AVATAAPI服务;

4.多语言SDK优化以及AVATA服务性能优化:围绕上述几点,边界智能已在SDK和AVATAAPI服务上进行优化,计划一个月内会在SDK及AVATA中添加包含更多最优实践的实现,提供更多方便的开发接口供应用者使用;

5.节点历史数据压缩:文昌链的数据增长很快,目前已经有节点数据压缩技术,计划两个月内完成其围绕浏览器和相关支持工具的开发和测试;

6.二层网络:边界智能已经在其他大规模网络上实现了二层网络的技术,通过二层网络技术,可满足应用数万级别的TPS需求。未来几个月中会完成其相关支持工具的开发和测试,同时和BSN一起探索其商业化业务模式,以保证一旦有业务需求,就可以及时上线二层网络。

实践建议:如何开发最优的分布式应用

分布式应用又被称为Web3应用,是基于区块链的下一代互联网应用。分布式应用如果希望成为用户体验良好,成本优化的应用,需要基于区块链系统的特性去实现。

区块链系统特性如下:

1.网络状况决定交易处理/上链速度:多个区块链节点根据共识算法对需要上链的事务(transaction,也称为交易)根据请求先后顺序排序,并在各个节点中分布式执行;节点的内存池容量有限,当事务多的时候,可能出现节点忙于其他计算,等待处理的事务无法进入内存池,因此无法得到及时处理并上链的情况,因此应用会需要链外维护队列排队,并对上链失败的事务重试;

2.网络费用:任何涉及链上数据变化的事务(交易)都会产生一定的网络费用;

3.计算需求:对于不同类型的交易而言,根据其需要的计算资源,节点处理速度也不同;

4.多笔交易:每笔交易网络都需要验证,因此对多次请求而言,打包成一笔交易会比多笔交易的处理速度更快、消耗GAS更少;

5.本地状态:在共识过程中,或因为网络通讯有延迟,区块链各个节点可能出现状态不一致,因此分布式应用自己的状态变量最好采取自己本地维护的方式,而不是每次都到链上获取。分布式应用也不能像中心化应用一样假定你发送的链上事务一定会在确定时间内完成。例如文昌链网络畅通时一般出块时间在3秒~10秒间,但如果堵塞的时候就会要等待比较多的区块,等待交易被验证打包。

基于这些特性的理解和实践,有以下几点经验之谈:

1.业务流程:一些比较费资源的、计算量大的业务,例如NFT铸造,业务流程上可以设计为提前铸造,这样其他的场景,例如用户领取NFT时,就只有链上转账交易,会快很多;

2.业务设计:可以学习优秀数藏应用的业务设计。例如鲸探近期开始避免秒杀活动,让用户邀请好友助力来获取购买的资格。这样的设计增强了用户的社交性,更有趣,用户不用掐点去抢,体验好了许多,还避免了系统的高并发;

3.链账户创建:为了用户体验良好,一般都是应用托管用户的链账户,并替用户支付GAS费用。应用则可以提前准备申请好链账户,并完成GAS费代付的链上授权,这样应用用户注册时,应用只在应用系统中进行分配即可,也就是进行应用的本地计算,不用等待链上响应。

4.上链时间选择:避免在网络繁忙的时候进行大批量的链上交易提交,开放联盟链是开放地支持数百个应用。建议提前计划需要大量产生链账户、NFT铸造等链上事务的执行,留出工作时间余量。文昌链提供了非常完善的区块链浏览器,可以通过浏览器非常方便地查看当前网络繁忙情况。出块时间和最近区块包含的交易笔数可以反映网络拥堵程度,可以提前去浏览器了解相关情况,避开链繁忙的高峰时间。

5.上链方式:把多个事务信息打包在一个交易中,又快又省GAS。可以参考文昌链SDK以及API服务AVATA中的multi-msg方法。

6.本地应用状态维护:上链操作是无法实时返回结果的,因此建议应用自己离线维护sequence/nonce或本地保存operationid。

编者结语

中国的开放联盟链目前已经有很多条,除了BSN体系内的泰安链、文昌链等,BAT各有Xuperchain开放网络、蚂蚁链开放网络、腾讯至信链等。

这些开放联盟链,与FISCOBCOS、长安链主张开源的联盟链相比,其更符合“在一条链应用百花齐放”的多元生态愿景,也是应用开发者“放弃重复建链”“选择合规”后更为友好的选择。

相应的,基于各家的技术不同,几家开放联盟链也通过网络架构、基础协议、API平台、业务模块等具备各自的开发优势。

例如文昌链是基于Cosmos企业版IRITA开发的,基于Tendermint共识引擎,并兼顾Cosmos的模块化特点,支持非常多的业务模块。

在本文提及的BSN-DDCNFT业务上,文昌链原生NFT兼容以太坊EVMNFT,并且执行性能优于EVM。原生NFT还具有feegrant的代付GAS费功能,目前该模块正在适配DDC接口。

此外,为了降低开发者的接入难度,文昌链也已经推出API服务平台AVATA,AVATA平台封装了多种链上最优实践。

这恰恰体现了,在不断壮大的行业需求下,开放联盟链在不断降低门槛,不断为开发者建立一个技术上更便捷更低成本的环境,以求得应用规模快速发展,以引导行业变革。

在中国区块链快速发展的过去6年里,中国区块链的ToB产品和ToG产品已经具备庞大的规模,借助ToB产品和ToG产品在技术上的发展速度,开放联盟链出现后体现了自主可控、安全、合规等技术特点,更补足了原来区块链应用在ToC方向的不足,我们在全球公链上看到的多元盛景,将有机会以另一种形式实现。

敬请期待。

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

金宝趣谈

ADA小科普:什么是密码账户_KEY:bithumb交易所中文名

一、什么是密码账户? 随着助记词钱包的普及,几乎人人都知道了“助记词是掌控自己资产的唯一方式”。助记词账户大家已经是非常熟悉了,那什么是密码账户呢?密码账户,是助记词账户在应用上的一种延伸.

[0:0ms0-3:421ms