-
騰訊混元文生圖大模型宣布開源,未來還將跟QQ、企微和游戲做聯(lián)動
-
周毅是故意的還是不小心?
文/觀察者網(wǎng) 周毅 編輯 張廣凱
5月14日,騰訊宣布旗下混元文生圖大模型全面升級并對外開源。據(jù)悉,這是業(yè)內(nèi)首個中文原生的DiT架構(gòu)文生圖開源模型。它支持中英文雙語輸入及理解,參數(shù)量15億。目前,該大模型已在Hugging Face平臺和Github上發(fā)布,包含模型權(quán)重、推理代碼、模型算法等完整模型,可供企業(yè)與個人開發(fā)者免費商用。
不同模型在圖文一致性等方面的表現(xiàn) 圖源Hugging Face
騰訊混元文生圖負責(zé)人蘆清林對觀察者網(wǎng)表示,提升技術(shù)能力和更廣泛的應(yīng)用,是該大模型未來的兩個方向。
“從技術(shù)能力的提升來說,如何讓圖片生成的速度更快,生成的質(zhì)量更好,是我們永遠都會追求的一個技術(shù)方向,它似乎是沒有止境的?!碧J清林表示,項目團隊也希望該大模型,能在騰訊內(nèi)外更廣泛的業(yè)務(wù)場景應(yīng)用起來。事實上,從去年開始,騰訊混元文生圖就和騰訊的廣告業(yè)務(wù)進行了一些協(xié)作。
“今年會跟社交業(yè)務(wù),包括QQ、企業(yè)微信等很多業(yè)務(wù)場景做聯(lián)動。跟他們合作做一些新的技術(shù)能力?!碧J清林透露,同時,該大模型也會跟騰訊游戲做一些深入的技術(shù)合作,希望能夠在美術(shù)場景中應(yīng)用起來。包括QQ音樂等在內(nèi),也都是該大模型未來將會提供支撐的業(yè)務(wù)場景。
大模型的優(yōu)異表現(xiàn),往往離不開先進的技術(shù)架構(gòu)。過去,視覺生成擴散模型主要基于U-Net架構(gòu),但隨著參數(shù)量的提升,基于Transformer架構(gòu)的擴散模型展現(xiàn)出了更好的擴展性,有助于進一步提升模型的生成質(zhì)量及效率。升級后的騰訊混元文生圖大模型采用了全新的DiT架構(gòu)(即Diffusion With Transformer),這也是Sora和Stable Diffusion 3的同款架構(gòu)和關(guān)鍵技術(shù),它就是一種基于Transformer架構(gòu)的擴散模型。
公開資料顯示,在DiT架構(gòu)的基礎(chǔ)之上,騰訊混元文生圖大模型還在算法層面優(yōu)化了模型的長文本理解能力,能夠支持最多256字符的內(nèi)容輸入,同時賦予其多輪生圖和對話能力:在一張初始生成圖片的基礎(chǔ)上,用戶通過自然語言描述,即可對其進行調(diào)整。
用戶通過“對話”,即可調(diào)整文生圖的具體內(nèi)容 測試截圖
此外,“中文原生”也是騰訊混元文生圖大模型的一大亮點,此前,像Stable Diffusion等主流開源模型核心數(shù)據(jù)集以英文為主,對中國的語言、美食、文化、習(xí)俗理解有限。作為首個中文原生的DiT模型,混元文生圖具備中英文雙語理解及生成能力,在古詩詞、俚語、傳統(tǒng)建筑、中華美食等中國元素的生成上表現(xiàn)出色。
混元文生圖大模型的部分能力展示 圖源Hugging Face
本文系觀察者網(wǎng)獨家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 周毅 
-
搭載英特爾處理器,華為再推AI PC等10余款新品
2024-05-15 18:50 觀網(wǎng)財經(jīng)-科創(chuàng) -
“比行業(yè)便宜99.3%”,字節(jié)打響大模型價格戰(zhàn)
2024-05-15 18:06 觀網(wǎng)財經(jīng)-科創(chuàng) -
GMV兩位數(shù)增長,淘寶天貓真的在回歸用戶了
2024-05-15 17:59 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
杭州市臨安區(qū):收購一批商品住房用作公共租賃住房
2024-05-15 16:19 觀網(wǎng)財經(jīng)-房產(chǎn) -
美國征收關(guān)稅翻倍,多家光伏頭部企業(yè):基本沒有影響
2024-05-15 13:31 觀網(wǎng)財經(jīng)-消費 -
成都高投集團收購鼎橋通信
2024-05-15 08:57 華為 -
深圳建筑設(shè)計新要求:減少公攤面積
2024-05-14 19:17 觀網(wǎng)財經(jīng)-房產(chǎn) -
騰訊公布2024一季報:利潤大漲62%,視頻號用戶時長增長超80%
2024-05-14 18:16 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
手機巨頭激烈混戰(zhàn),vivo再推6nm芯片加碼影像
2024-05-14 14:49 觀網(wǎng)財經(jīng)-科創(chuàng) -
碧桂園楊惠妍:房地產(chǎn)行業(yè)一定會迎來春天
2024-05-13 21:31 觀網(wǎng)財經(jīng)-房產(chǎn) -
“鲇魚”來襲!特斯拉上海儲能超級工廠獲開工許可
2024-05-13 16:07 觀網(wǎng)ESG -
女子收到7年前1414元滴滴賬單,滴滴致歉
2024-05-12 23:01 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
創(chuàng)始人稱創(chuàng)維汽車能治病延壽?官方回應(yīng):斷章取義
2024-05-11 16:55 觀網(wǎng)財經(jīng)-汽車 -
最快本月申請?Shein或選擇倫敦上市
2024-05-11 11:40 觀網(wǎng)財經(jīng)-海外 -
Visa難以進入中國市場,是因為中國的“科技民族主義”嗎?
2024-05-11 08:02 -
中芯國際凈利大跌68%,但當務(wù)之急并非利潤
2024-05-10 22:30 觀網(wǎng)財經(jīng)-科創(chuàng) -
連平:釋放購房需求,接下來應(yīng)從供給端入手
2024-05-10 21:52 觀網(wǎng)財經(jīng)-房產(chǎn) -
匯率跌至歷史新低,誰背刺了越南?
2024-05-10 21:38 -
璩靜風(fēng)波后,百度資深副總裁高調(diào)談?wù)摗按髲S病”
2024-05-10 16:25 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng) -
“百度大廠病問題,管理層也急”
2024-05-10 15:39 觀網(wǎng)財經(jīng)-互聯(lián)網(wǎng)
相關(guān)推薦 -
-
特朗普喊話:俄烏別打了,一起跟美國做大生意發(fā)大財 評論 205MAGA基本盤還能“忍”特朗普多久? 評論 164從2000兆帕潛艇級熱成型鋼的“登天”說開去…… 評論 100美媒焦慮:哪怕只為跟上中國,美政府都不能這么干啊 評論 154最新聞 Hot
-
“MAGA巨星”唱反調(diào),“中國制造真的很棒”
-
“美國太自滿,恐在這三方面落后中國”
-
泄密不止一次,美防長在“家人群”也發(fā)了
-
特朗普喊話:俄烏別打了,一起跟美國做大生意發(fā)大財
-
中方出手,日歐車企“慌了”
-
她被提名為聯(lián)大主席,“德國完了”
-
美媒焦慮:哪怕只為跟上中國,美政府都不能這么干啊
-
特朗普“抱怨”后,日本考慮放寬汽車進口安全標準
-
“五角大樓里完全崩潰了”,3名美國防部高官被解雇
-
“趁納瓦羅不在,他們沖進白宮勸說特朗普暫停關(guān)稅”
-
澤連斯基回應(yīng):?;?0小時太短,建議30天
-
韓國一戰(zhàn)機飛行訓(xùn)練中掉落機炮吊艙和空油箱
-
“美國在地球上跟中國爭,卻把太空主導(dǎo)地位拱手讓出”
-
內(nèi)塔尼亞胡:摧毀哈馬斯前不會結(jié)束軍事行動
-
超900人簽署“反關(guān)稅宣言”,包括兩位諾貝爾獎獲得者
-
“中國正投入萬億美元,我們卻在這胡搞”
-