GPT-4發布一天之后,壓力全部給到百度這邊。
就在剛剛,百度交卷。
文心一言,百度全新一代知識增強大語言模型,正式在百度總部會議室里發布。
在一片靜寂的氛圍里,李彥宏小步登場,語氣里帶著點緊張:
大家的期望值,是我們對標ChatGPT,對標GPT-4,這個門檻有點高(笑)。
十月懷胎,我們就帶大家來看看這個AI大模型文心一言長什么樣。
此前,有人狂轉meme圖把百度比作GPT-4旁邊的垃圾箱。
也有人鼓吹百度是全村的希望。
而在發布會進行的同時,百度港股市值大幅下跌,相關話題還沖上了微博熱搜。
但直播彈幕中也有網友點贊:
那么這個中國版ChatGPT到底實力如何?
咱們就用百度發布會演示的預錄制Demo,對比一下嶄新出爐的GPT-4,先憑實力說話。
文心一言 vs GPT-4
和GPT-4一樣,文心一言是一個多模態大模型。
李彥宏開場就展示了文心一言具備的5種能力,包括文學創作、商業文案創作、數理邏輯推算、中文理解、多模態生成。
文心一言甚至還現場秀了一口接地氣的四川話,現場網友發出一片笑聲:
其他能力如何?我們具體展開來看。
IMF:美聯儲需要以超過預期的幅度加息來遏制通脹:金色財經報道,IMF預計美國通脹率在一直到2024年底都高于美聯儲2%的目標;美國需要采取更多措施來降低公共債務;美聯儲需要以超過預期的幅度加息來遏制通脹。[2023/5/27 9:45:11]
在文學創作上,李彥宏一開場就搬出了《三體》作者劉慈欣坐鎮。
先讓文心一言介紹一下大劉,畢竟我也是劉慈欣老鄉嘛:
看起來沒什么問題。同樣的問題問問GPT-4呢?
嗯???直接把劉慈欣的老家挪到了湖北省洪湖市。湖北人狂喜。
隨后,李彥宏又展示了從哲學的角度對這段文章進行續寫的demo:
看起來中規中矩,比較理性。老樣子,我們也來與GPT-4進行一波對比:
這波你是想看GPT-4續寫的《三體》,還是文心一言的?
再來看看《三體》電視劇中扮演史強和汪淼的老搭檔,于和偉和張魯一,有什么共同點?
也沒什么問題。
就是看起來展示的速度有點快,比李彥宏的語速還要快上那么一點點(手動狗頭)。
Coin98 Labs宣布已收購鏈游CyBall:12月8日消息,Coin98 Labs宣布已收購鏈游CyBall,進一步進入Web3游戲,將對其注入新的資金和資源。
此前消息,CyBall融資180萬美元,Bitkraft Ventures領投。[2022/12/8 21:31:53]
接下來,李彥宏又展示了一下文心一言在商業文案創作上的能力。
比如給新公司起個名字。
并且這個名字它還不是瞎起的:
再來看看GPT-4起名的效果?
看起來,GPT-4對中文的掌控能力相比之下還是少了一點精髓。
至于寫個公司成立的新聞稿?對文心一言來說似乎也不成問題:
數學能力,是考驗生成式大模型的一大難題。ChatGPT剛上線時,也翻了不少車。
不過在現場,文心一言處理的數學問題不算復雜,是小學數學競賽常見的雞兔同籠問題。
彩蛋是,李彥宏現場展示的第一題,引得文心一言說出了《狂飆》里高啟盛的經典臺詞:這題出得不對。
Shiba Inu市值重返100億美元上方:金色財經報道,據最新數據顯示,meme token Shiba Inu(SHIB)8月15日市值重返100億美元上方,且已經先去四周上漲(上一次出現這種情況在2021年9月,當時Shiba Inu達到了0.000088美元歷史高點)。截至本文撰寫時,SHIB市值小幅下挫至9,979,450,708美元。最近社區對 Shibarium(Layer 2)和 Shiba Inu 金融生態系統(SHIBFE)的推出寄予厚望,同時Shibarium Public Beta TestNet 預計將于本季度推出,而元宇宙和 Shiba Inu NFT 生態系統的發布定于 2022 年第四季度。另據WhaleStates數據,排名前 2000 位的以太坊鯨魚一直在積極地持有SHIB,截至 8 月 13 日,這些鯨魚持有價值超過 1.7934 億美元的 Shiba Inu。[2022/8/15 12:25:39]
修改一下題目,OK,再扔給文心一言試試:
看起來,答案還算是有理有據,一步步邏輯推理出來的那種。
李彥宏表示,這些題不敢說百分之一百能做對,但至少體現了文心一言的思考歷程。
接下來,李彥宏著重展示了一下文心一言對中文的理解能力,并特意強調:
文心一言對中國文化的了解,理應超出任何一個預訓練大模型。
一上來就是一個成語,洛陽紙貴到底有多貴?
這是文心一言的效果展示:
還解釋了一下這個成語背后的經濟學原理:
以太坊網絡當前已銷毀超252.39萬枚ETH:金色財經報道,據Ultrasound數據顯示,截止目前,以太坊網絡總共銷毀2,523,964.01枚ETH。其中,ETHtransfers銷毀232,825.21枚ETH,OpenSea銷毀230,049.97枚ETH,UniswapV2銷毀134,751.10枚。注:自以太坊倫敦升級引入EIP-1559后,以太坊網絡會根據交易需求和區塊大小動態調整每筆交易的BaseFee,而這部分的費用將直接燃燒銷毀。[2022/7/10 2:02:42]
那么,將這個問題拋給GPT-4呢?首先問問它,知不知道洛陽紙貴是什么意思:
接下來,再問問他對應的經濟學理論是什么:
這波看起來,GPT-4的中文理解似乎也不輸文心一言啊。
那么,再來看看二者寫藏頭詩的能力?
首先是文心一言的效果展示:
接下來,我們再看看GPT-4怎么說:
誒,看起來反而是GPT-4沒有真正理解藏頭詩的含義。
這波文化理解上,屬實是文心一言小勝一籌了。
不過在英文上,李彥宏也承認,雖然文心一言也能處理,但能力是顯著不如中文的。
前TheBlock研究員提出改善Uniswap并為UNI賦能的方案:7月6日消息,前TheBlock研究員Mika Honkasalo提出了一套改善Uniswap使其進一步去中心化,減少對UniswapLabs的依賴同時為UNIToken賦能的方案。該方案大致分為四個步驟,即:收入調整實驗、建立公認的代表計劃、在UniswapLabs之外組建團隊和制定開發路線圖。
收入調整實驗是指Uniswap擁有一個交易費用開關,可以打開給指定池10-25%的LP費用。交易費用收入可以收集到國庫或向UNI持有者分發,具體細節需要一份數據驅動的研究報告;建立公認的代表計劃,參考MakerDAO為其代表支付年薪的治理方案,鼓勵UNI持有者將投票權委托給更優秀的代表并給予薪水,以提高治理水準;在UniswapLabs之外組建團隊,引入更多的團隊建設Uniswap生態,UNI持有者將通過標準化流程對入職開發團隊和預算批準進行投票;制定開發路線圖,制定易于UNI持有者理解的項目發展路線圖和愿景,與UniswapLabs合作實現戰略協同,避免出現重復工作。[2022/7/6 1:54:17]
這也和百度目前能用到的訓練數據有關。
最后,李彥宏還簡單展示了一下文心一言多模態生成的能力。
首先來看看,為即將到來的2023世界智能交通大會創作海報。
而除了前文展示過的文字轉四川話能力,文心一言還能文字轉視頻。
李彥宏一句指令,將以上內容生成視頻,很快啊,不到幾秒鐘,文心一言就把字幕和視頻做好了:
有些遺憾的是,在ChatGPT被頻頻稱贊的編程方面,文心一言并沒有現場展示相關能力。
但王海峰透露,文心一言的訓練數據中同樣包括代碼。
正如ChatGPT脫胎于OpenAI的GPT系列,百度這次推出的文心一言(ERNIE Bot),背后也正是基于文心大模型技術打造。
據王海峰介紹,文心一言主要脫胎于兩大模型:
百度ERNIE系列知識增強千億大模型,以及百度大規模開放域對話模型PLATO。
在此基礎上,主要采用了六項核心技術。
其中三個是廣為人知的大模型技術,包括有監督精調、人類反饋強化學習(RLHF)和提示構建。
p.s. 人類反饋強化學習也是ChatGPT的關鍵技術。
另外三個,則是百度比較有特色的技術,包括知識增強、檢索增強和對話增強技術。
首先來看與ChatGPT類似的技術:有監督精調、RLHF和提示構建。
有監督精調,尤其指中文方面的數據精調。百度基于對中國語言文化和中國應用場景的理解,篩選了特定的數據來訓練模型。
至于人類反饋的強化學習(RLHF)和提示構建,操作上也與ChatGPT大差不差。
隨后是百度提出的、用于進一步改善模型效果的技術。
知識增強,包括知識內化和知識外用兩個部分。其中,知識內化即將知識滲透進模型參數中;知識外用指的是模型可以直接使用外部的知識。
檢索增強,則與百度搜索引擎積累的檢索技術有關。
百度將把檢索技術和生成技術結合起來,先對內容進行檢索后,將比較有用的部分用于生成,再整合輸出結果:
最后是對話增強部分,包括之前百度積累的記憶機制、上下文理解和對話規劃等技術:
概括來看,文心一言表現出的能力,被李彥宏稱為智能涌現:當參數達到千億量級,訓練語料達到足夠多的情況下,這種現象就會發生。
目前,百度擁有的AI技術可以分為四個部分,芯片(昆侖芯)、框架(飛槳)、模型(文心)和應用。
之所以軟硬件都要布局,百度稱,是為了降低成本:生成式AI需求的算力非常高,費用相當昂貴。
因此,如果在四層架構之間相互進行協同優化,就能讓它的效率比別人更高,從而顯著降低成本。
李彥宏認為,這也正是百度的優勢所在:四層都有領先產品的公司,絕無僅有。
這次文心大模型背后的硬件算力,也是通過百度智能云提供服務。
目前,文心一言已經接入百度搜索,目的在于提升搜索資源效率。
同時,包括小度和自動駕駛Apollo等產品,以及愛奇藝等公司也已經接入百度的文心一言模型。
網友:看來還不用提前退休
截至發稿,百度港股股價在一波明顯下跌之后,有所回彈。
發布會結束,網友反應最多的是提前錄制有點敗好感:
對于這一點,李彥宏的解釋是,給出的問題都比較長,為了節約現場時間,所以才用了提前錄制的形式。
還有不少網友對文心一言展示出的能力不太滿意。有人調侃,看完之后感覺提前退休的日子看起來還可以緩一緩:
離GPT-4還差了20個老胡。
還有網友感覺,文心一言的發布會像極了畢業答辯的自己(doge):
不過也有網友表示,希望能給國產產品一點時間一點耐心。
發布會末尾,王海峰宣布,文心一言將從今天開始對外進行測試,包括個人用戶和企業用戶。
是騾子是馬,相信接下來,會得到更多驗證。
對了,有網友表示,已經拿到了文心一言的內測資格:
你好,感謝您體驗文心一言,體驗地址: https://yiyan.baidu.com/welcome,希望您在體驗當中給予更多意見,文心一言邀請碼:KFCVME50RMB,2023年3月16日24:00前有效。
嗯,萬物瘋狂星期四。
量子位
個人專欄
閱讀更多
金色財經 善歐巴
金色早8點
白話區塊鏈
Arcane Labs
Odaily星球日報
MarsBit
歐科云鏈
深潮TechFlow
BTCStudy
Tags:GPTUNISHISHIBGGPTUnicly CryptoPunks CollectionShiba BankSHIBAW
作者:Chloe 目前以太坊基于零知識證明的擴容方案是ZK-rollup,但其實還有另外兩種解決方案——Validium和Volitions。本文簡單介紹以上3種基于零知識證明的擴容方案.
1900/1/1 0:00:00NFT 交易市場將再迎新選手,DEX 聚合器1inch近期發起了創建 NFT 交易聚合器的提案投票,不出意外或以高票通過.
1900/1/1 0:00:00本文來自公號:美國宗人府金融界的衍生工具有很多種,真正能掀起金融海嘯的,一般不是普通看漲看跌期權,而是各種“互換”.
1900/1/1 0:00:00前天新聞發布時,我正在下班的路上。雖然與 Bitget 的交割已有一段時間,但正式向媒體公開的 2023 年 3 月 22 日,便成了我正式離開 BitKeep 的日子.
1900/1/1 0:00:00過去兩周,生成式人工智能 (AI) 領域是毫無疑問的熱點,突破性的新版本和尖端集成不斷涌現。 OpenAI 發布了備受期待的 GPT-4 模型,Midjourney 發布了最新的 V5 模型,S.
1900/1/1 0:00:00在加密銀行Silvergate Bank清算、美國監管機構起訴 KuCoin 等多方利空消息影響下,加密市場情緒惡化.
1900/1/1 0:00:00