編者按:本文內容源于2022年6月25日BSN月度說明會上邊界智能創始人曹恒對文昌鏈的匯報口述內容,會后邊界智能CTO奚海峰為內容增加了更為詳細的問題分析和分布式應用開發建議,本文因此成為一篇全面記錄文昌鏈經歷高并發過程的文章。
《金色深核》欄目認為開放聯盟鏈將會是中國Web3進程中的重要角色,其基礎設施應對互聯網級別并發的經驗也甚為重要,為此,將文章中進行后期編輯,以更為清晰的敘述過程,為關注開放聯盟鏈的讀者、開發者所用。
作者:曹恒、奚海峰,編輯:王航
背景:6月的并發高峰
6月29日,中國區塊鏈基礎設施BSN官方發布了一則數據,其NFT基礎設施BSN-DDC單日鏈上交易總數接近百萬次,超過了以太坊單日鏈上交易數。
BSN-DDC是由多個開放聯盟鏈組成的NFT基礎設施,以適應中國監管合規環境的特性塑造著與以太坊開源生態相似的應用多樣性。
由邊界智能搭建的的文昌鏈,是目前支持BSN-DDC運行的四條開放聯盟鏈之一,在6月,BSN鏈上數據爆發的表現中,文昌鏈鏈上數據爆發尤為突出。
據邊界智能創始人曹恒描述,截止到2022年6月21日19點18分,文昌鏈上活躍鏈賬戶數為645萬,以鏈上數據估算,上線應用近250個,進行測試對接的應用約300個。
而此時鏈上NFT技術支持的可信數據對象總數為797萬。通過歷史數據分析,所有可信數據對象中,55%產生于6月,約為442萬個。
金色財經挖礦數據播報 | ETH今日全網算力上漲1.72%:金色財經報道,據蜘蛛礦池數據顯示:
BTC全網算力131.257EH/s,挖礦難度19.16T,目前區塊高度659296,理論收益0.00000682/T/天。
ETH全網算力283.165TH/s,挖礦難度3450.84T,目前區塊高度11357367,理論收益0.00553585/100MH/天。
BSV全網算力1.147EH/s,挖礦難度0.17T,目前區塊高度663489,理論收益0.00078437/T/天。[2020/11/30 22:33:50]
文昌鏈于2021年2月上線,免費穩定試運行一年后,于2022年3月份開始商業化運行,隨后文昌鏈的業務量已開始快速增長,從月度業務量翻倍到6月實現指數級增長。
而伴隨著6月業務量飛漲,618前后在并發高峰期,文昌鏈出現了卡頓、交易排隊的情況,區塊打包時間最高達到了30秒,有所影響用戶體驗。
隨后,BSN運維團隊紅棗科技和文昌鏈技術支持團隊邊界智能通力合作,在不停服的前提下對系統進行了緊急升級及優化。
調優后,正在以小于4秒的平均出塊時間平穩安全地運行。
問題:上鏈交易緩慢與優化思路
全球公鏈上的交易堵塞、等待問題很常見。文昌鏈在高并發情況下出現的此類問題,是區塊鏈在面對商業化應用中必然要面對的。
在傳統互聯網應用中,平臺方可以通過增加計算資源的水平擴展方式和挑戰任務并行分配方式來解決,有多大壓力,就用多大的計算資源解決。
而在區塊鏈上,尤其是在與公鏈同樣分布式結構的開放聯盟鏈上,其性能的優化、升級需要經歷相對復雜的過程。
金色晚報 | 9月11日晚間重要動態一覽:12:00-21:00關鍵詞:歐盟委員會、以太坊2.0、SushiSwap、中關村論壇、YFI
1. 法國財長勒梅爾:歐盟委員會必須為加密貨幣制定強有力的規則。
2. 以太坊2.0測試網參與率過低時巨鯨撤出或可導致故障。
3. 華為云區塊鏈服務平臺BCS2.0發布。
4. 多國聯合聲明:期待歐盟委員會本月關于規范加密資產的提案。
5. Sushiswap的200萬枚代幣空投獎勵將在明日發放。
6. Sushiswap:目前已為LP獎勵68.25萬美元。
7. 中關村論壇下周將發布區塊鏈等領域重大成果。
8. 渣打銀行與ADB等銀行合作完成越南和泰國間首筆區塊鏈跨行信用證交易。
9. YFI創始人:三個基本原則讓YFI不被認定為證券。[2020/9/11]
性能問題公示
文昌鏈采用開放應用服務模式,支持多元應用生態。經技術團隊進行網絡性能分析,其問題和解決方案如下:
問題1:接收用戶交易的全節點跟共識節點之間的p2p連接不穩定,造成很多交易不能及時進入共識節點參與出塊。
解決方案:優化全節點與共識節點之間p2p連接配置參數,提高連接穩定性。
解決狀態:已解決
問題2:全網交易量高峰時段,每個新區塊包含交易數很多,共識節點在廣播和校驗每個區塊上耗費時間變長,造成出塊間隙時間變長;雖然網絡整體吞吐量增加,但單個交易的上鏈延遲變長,用戶體驗到的上鏈等待時間變長。
解決方案:優化共識算法各階段超時時間配置參數,提高出塊速度。
解決狀態:已改善,還在持續優化參數和垂直擴展共識節點性能。
金色晨訊 | ETC預計于7月1日進行Atlantis硬分叉 孫宇晨拍下“巴菲特慈善午餐”:1.ETC預計于7月1日進行Atlantis硬分叉。
2.消息人士:Voice將通過政府下發的身份證對用戶進行身份驗證。
3.孫宇晨花費456.7888萬美元拍下“巴菲特慈善午餐”。
4.美SEC專員:需鼓勵在ETF領域進行創新 拒絕比特幣ETF是錯誤的。
5.趙長鵬:穩定幣發行正在測試階段,目前只鑄造了200英鎊。
6.Zcash或將在區塊高度570000進行友好型分叉。
7.OKEx上線合規透明穩定幣USDK。
8.前美國SEC執法部門負責人:SEC將很快打擊IEO。
9.巴西國有銀行將使用基于以太坊的穩定幣為紀錄片提供資金。[2019/6/4]
問題3:EVM相關交易因nonce錯誤而上鏈失敗,需要用戶重試。
解決方案:應用修改上鏈策略,每個發交易的鏈賬戶要串行發送交易,確保前一個交易的上鏈狀態確定后再發送下一個交易;若要提高交易并發性能,則可采用多個鏈賬戶并行發送交易。
解決狀態:已經發布更新的FAQ和代碼示例
分析:為何開放聯盟鏈調優更為復雜?
開放聯盟鏈是結合了公鏈、聯盟鏈技術優勢,能支持非信任環境下的分布式公共賬本服務,其可以很好地支持商業級應用的合規需求和良好的應用開發體驗。
因此,OPB的調優比公鏈、聯盟鏈都要復雜許多。
在傳統的互聯網中心化應用開發中,應用上線前要對數據庫進行規劃,包括分區,如何給數據表加讀寫鎖,索引等等。應用上線后,中心化數據庫的調優可能需要一個月甚至更長的時間,來監控應用訪問數據庫的模式,針對應用進行進一步的優化。
行情 | 金色盤面:市場整體維持強勢:金色盤面綜合分析:在過去24小時市場整體維持強勢,市值前100的標的, 漲幅最大是達到30%,而跌幅最大的只有3.75%,說明市場整體做多人氣較強,短線機會大于風險。[2018/8/20]
而相比中心化數據庫的調優,開放聯盟鏈的調優難度近乎是其20倍甚至以上。
區塊鏈應用,又稱分布式應用。所以有人說區塊鏈則是分布式數據庫,但區塊鏈的難度遠遠超越了分布式數據庫。
原因在于分布式數據庫的調優,比中心化數據庫增加了數據的同步、多階段提交以保持數據一致性以及網絡通訊優化等多方面的復雜步驟。
而區塊鏈相比分布式數據庫,除數據同步、保證數據一致性外,還需要保證網絡的安全性。
區塊鏈中以眾多節點來共同維護可信數據賬本。開放區塊鏈需要假定每一個節點都有作惡的可能性。因此需要識別作惡數據,并可以通過共識算法,對合法交易進行排序和正確執行,并將結果分布式可信地寫入賬本。
在這個過程中:
共識算法可以保證分布式節點以block方式組成鏈式數據,并保證當有惡意請求、網絡不可靠或者黑客攻擊的情況下,算法依然可以準確無誤地運行。
共識協議的執行,會產生相比分布式數據庫更多的網絡通訊,需要協調更多節點的信息以及本地運算結果的全網同步。
在這樣復雜的過程里,也代表著,優化區塊鏈是優化分布式數據庫、中心化數據庫的難度的10倍、20倍。
在這樣的理解基礎上再看OPB。兼顧公鏈和聯盟鏈特性,讓開放聯盟鏈帶來了創新性,為開發者和用戶帶來了友好體驗,但也讓開放聯盟鏈的參數調優比一般的公鏈或者聯盟鏈更難。
金色快評 | 銀行態度轉彎 加密貨幣打開傳統金融大門:韓國聯合通訊社報道稱韓國商業銀行到2017年12月份為止持有的加密貨幣達20億美元,韓國受監管的金融機構所持的數字資產占其經紀業務資產總額的8%。銀行作為傳統金融機構持有加密貨幣一事似乎是一個信號,意味著傳統金融業對加密貨幣這一新鮮事物的逐步接納。時間回到2017年9月,摩根大通CEO Jamie Dimon稱數字貨幣是“騙局”,“比郁金香泡沫更糟糕”,并稱這不會有好結果,終將破滅。他的這一態度代表著一批傳統金融領域人士對于加密貨幣行業的態度,他們質疑加密貨幣,并不看好其發展。甚至于到今天依然有銀行不愿意為加密貨幣行業相關的企業提供銀行服務,但是我們也能看到隨著加密貨幣行業的發展越來越來的傳統金融機構對其敞開了懷抱,據《華爾街日報》報道,美國Silvergate銀行的資產總額從9.78億美元增長到19億美元以上,主要是緣于對250多家加密貨幣公司的業務支持。韓國第二大商業銀行Shinhan Bank在2017年末宣布支持加密貨幣資產交易,為用戶提供虛擬銀行賬戶及系統為企業進行無縫對接。總部位于紐約的商業銀行大都會銀行(Metropolitan Bank)透露,該行超過15%的存款與加密貨幣投資者客戶相關,該行也愿意繼續支持加密貨幣資產交易者。加密貨幣所涉及到的應用場景正逐漸吸引到傳統金融業者的目光。[2018/7/9]
在公有鏈上,應用開發者管理自己的節點,根據自己的應用特性優化節點。在聯盟鏈上,普通聯盟鏈一般服務封閉生態的1~2個應用,通過統一中心化的API服務支持應用。
而開放聯盟鏈要面對開放多元的應用讀寫需求,相比公鏈和聯盟鏈,OPB面對的是更多不確定的應用訪問模式,也擴大了其優化的參數范圍。并且在保證安全、開放的基礎上,還要保證高性能要求。
文昌鏈基于Cosmos/Tendermint共識技術開發,兼顧開放、安全、合規、高性能等方面,在調優上不只是幾個參數的調整,及簡單數據索引的變化,要涉及記賬節點和全節點的網絡拓撲,共識速度,甚至不同節點的讀寫帶寬,不同通訊類型信息的帶寬分配等等。
在過去618的應用高峰期,在調優的過程中,文昌鏈為了保證網絡不停服,選擇循序漸進的一個節點一個節點地調整。雖然單個節點調整、重啟的過程也會影響文昌鏈暫時的性能。但即使網絡體驗會有些許延遲,也能保鏈賬本正確、鏈資產安全以及鏈安全持續運行。
后續:正在進行的優化迭代
除了上面實施的方案,文昌鏈經歷了此次高并發后,邊界智能團隊還梳理了多個層次的優化策略,主要包括:
1.節點配置拓撲的優化:在測試網絡驗證后,正在文昌鏈上部署,后續還將持續優化;
2.Tendermint共識對于EVM的優化:文昌鏈支持Cosmos原生NFT也支持以太坊虛擬機NFT,已經找到了Tendermint共識對于EVM優化的方式。未來邊界智能會驗證后協調全球相關開源開發者一起驗證,預計需要1個多月的時間;
3.多全節點分級的拓撲結構設計:BSN網絡計劃下半年向社區開放全節點部署,有能力的廠商可自行部署全節點,邊界智能已經開始和紅棗科技團隊協同,部署BSN環境外的全節點,并已經在支持AVATAAPI服務;
4.多語言SDK優化以及AVATA服務性能優化:圍繞上述幾點,邊界智能已在SDK和AVATAAPI服務上進行優化,計劃一個月內會在SDK及AVATA中添加包含更多最優實踐的實現,提供更多方便的開發接口供應用者使用;
5.節點歷史數據壓縮:文昌鏈的數據增長很快,目前已經有節點數據壓縮技術,計劃兩個月內完成其圍繞瀏覽器和相關支持工具的開發和測試;
6.二層網絡:邊界智能已經在其他大規模網絡上實現了二層網絡的技術,通過二層網絡技術,可滿足應用數萬級別的TPS需求。未來幾個月中會完成其相關支持工具的開發和測試,同時和BSN一起探索其商業化業務模式,以保證一旦有業務需求,就可以及時上線二層網絡。
實踐建議:如何開發最優的分布式應用
分布式應用又被稱為Web3應用,是基于區塊鏈的下一代互聯網應用。分布式應用如果希望成為用戶體驗良好,成本優化的應用,需要基于區塊鏈系統的特性去實現。
區塊鏈系統特性如下:
1.網絡狀況決定交易處理/上鏈速度:多個區塊鏈節點根據共識算法對需要上鏈的事務(transaction,也稱為交易)根據請求先后順序排序,并在各個節點中分布式執行;節點的內存池容量有限,當事務多的時候,可能出現節點忙于其他計算,等待處理的事務無法進入內存池,因此無法得到及時處理并上鏈的情況,因此應用會需要鏈外維護隊列排隊,并對上鏈失敗的事務重試;
2.網絡費用:任何涉及鏈上數據變化的事務(交易)都會產生一定的網絡費用;
3.計算需求:對于不同類型的交易而言,根據其需要的計算資源,節點處理速度也不同;
4.多筆交易:每筆交易網絡都需要驗證,因此對多次請求而言,打包成一筆交易會比多筆交易的處理速度更快、消耗GAS更少;
5.本地狀態:在共識過程中,或因為網絡通訊有延遲,區塊鏈各個節點可能出現狀態不一致,因此分布式應用自己的狀態變量最好采取自己本地維護的方式,而不是每次都到鏈上獲取。分布式應用也不能像中心化應用一樣假定你發送的鏈上事務一定會在確定時間內完成。例如文昌鏈網絡暢通時一般出塊時間在3秒~10秒間,但如果堵塞的時候就會要等待比較多的區塊,等待交易被驗證打包。
基于這些特性的理解和實踐,有以下幾點經驗之談:
1.業務流程:一些比較費資源的、計算量大的業務,例如NFT鑄造,業務流程上可以設計為提前鑄造,這樣其他的場景,例如用戶領取NFT時,就只有鏈上轉賬交易,會快很多;
2.業務設計:可以學習優秀數藏應用的業務設計。例如鯨探近期開始避免秒殺活動,讓用戶邀請好友助力來獲取購買的資格。這樣的設計增強了用戶的社交性,更有趣,用戶不用掐點去搶,體驗好了許多,還避免了系統的高并發;
3.鏈賬戶創建:為了用戶體驗良好,一般都是應用托管用戶的鏈賬戶,并替用戶支付GAS費用。應用則可以提前準備申請好鏈賬戶,并完成GAS費代付的鏈上授權,這樣應用用戶注冊時,應用只在應用系統中進行分配即可,也就是進行應用的本地計算,不用等待鏈上響應。
4.上鏈時間選擇:避免在網絡繁忙的時候進行大批量的鏈上交易提交,開放聯盟鏈是開放地支持數百個應用。建議提前計劃需要大量產生鏈賬戶、NFT鑄造等鏈上事務的執行,留出工作時間余量。文昌鏈提供了非常完善的區塊鏈瀏覽器,可以通過瀏覽器非常方便地查看當前網絡繁忙情況。出塊時間和最近區塊包含的交易筆數可以反映網絡擁堵程度,可以提前去瀏覽器了解相關情況,避開鏈繁忙的高峰時間。
5.上鏈方式:把多個事務信息打包在一個交易中,又快又省GAS。可以參考文昌鏈SDK以及API服務AVATA中的multi-msg方法。
6.本地應用狀態維護:上鏈操作是無法實時返回結果的,因此建議應用自己離線維護sequence/nonce或本地保存operationid。
編者結語
中國的開放聯盟鏈目前已經有很多條,除了BSN體系內的泰安鏈、文昌鏈等,BAT各有Xuperchain開放網絡、螞蟻鏈開放網絡、騰訊至信鏈等。
這些開放聯盟鏈,與FISCOBCOS、長安鏈主張開源的聯盟鏈相比,其更符合“在一條鏈應用百花齊放”的多元生態愿景,也是應用開發者“放棄重復建鏈”“選擇合規”后更為友好的選擇。
相應的,基于各家的技術不同,幾家開放聯盟鏈也通過網絡架構、基礎協議、API平臺、業務模塊等具備各自的開發優勢。
例如文昌鏈是基于Cosmos企業版IRITA開發的,基于Tendermint共識引擎,并兼顧Cosmos的模塊化特點,支持非常多的業務模塊。
在本文提及的BSN-DDCNFT業務上,文昌鏈原生NFT兼容以太坊EVMNFT,并且執行性能優于EVM。原生NFT還具有feegrant的代付GAS費功能,目前該模塊正在適配DDC接口。
此外,為了降低開發者的接入難度,文昌鏈也已經推出API服務平臺AVATA,AVATA平臺封裝了多種鏈上最優實踐。
這恰恰體現了,在不斷壯大的行業需求下,開放聯盟鏈在不斷降低門檻,不斷為開發者建立一個技術上更便捷更低成本的環境,以求得應用規模快速發展,以引導行業變革。
在中國區塊鏈快速發展的過去6年里,中國區塊鏈的ToB產品和ToG產品已經具備龐大的規模,借助ToB產品和ToG產品在技術上的發展速度,開放聯盟鏈出現后體現了自主可控、安全、合規等技術特點,更補足了原來區塊鏈應用在ToC方向的不足,我們在全球公鏈上看到的多元盛景,將有機會以另一種形式實現。
敬請期待。
Tags:聯盟鏈區塊鏈NFT聯盟鏈幣是什么幣區塊鏈工程專業學什么區塊鏈存證怎么弄區塊鏈技術發展現狀和趨勢NFT價格NFT幣
比特幣目前的第一頂部、第二頂部都已經顯現出來,第三頂部的落點最高不會超過37000美金;第二底部已經跌破30000美金,那么第三底部一定會低于30000美金.
1900/1/1 0:00:00NFT在2021年3月進入主流市場并引起了空前轟動。不過隨著加密市場從5月中旬開始遭遇熊市,NFT市場也隨之受到重創.
1900/1/1 0:00:00OkfineCoin已經于北京時間11月10日晚24點正式上線,11月11日1點開啟了上線交易功能,可以上線購買和提現,目前HIBI交易所官網已能看到交易K線圖.
1900/1/1 0:00:00滬指午后跳水失守2900點,價格直逼2800,兩市近300股跌停,其中主要因素還是收到上海疫情對經濟的沖擊;人民幣對美元的匯率從6.3失手到6.5,千萬不要覺得這0.2沒什么影響.
1900/1/1 0:00:00如《道德經》所說:”勝人者有力,自勝者強。”投機這個行當最大的敵人在于自己的內心,想要在這場游戲中勝出和自身人性的修煉是分不開的;其中最影響人的是希望和恐懼心理.
1900/1/1 0:00:00從這些天的表現來看,BTC和山寨幣出現背馳現象,包括前面的行情下跌都是BTC在托住整個市場,在現在的關鍵點位區間更是BTC在把整個市場往上拽,這也使得整個市場一直有著向上的推動勢能.
1900/1/1 0:00:00