本報訊 (記者李豪悅)2月27日,騰訊控股有限公司(以下簡稱“騰訊”)混元自研的快思考模型Turbo S正式發(fā)布。區(qū)別于Deepseek R1、混元T1等需要“想一下再回復(fù)”的慢思考模型,混元Turbo S能夠?qū)崿F(xiàn)“秒回”,吐字速度提升一倍,首字時延降低44%,同時在知識、數(shù)理、創(chuàng)作等方面也有突出表現(xiàn)。通過模型架構(gòu)創(chuàng)新,Turbo S部署成本也大幅下降,持續(xù)推動大模型應(yīng)用門檻降低。
有研究表明,人類約90%至95%的日常決策依賴直覺,快思考正如人的“直覺”,為大模型提供了通用場景下的快速響應(yīng)能力,而慢思考更像理性思維,通過分析邏輯提供解決問題思路。快思考和慢思考的結(jié)合和補充,可以讓大模型更智能、更高效地解決問題。
在業(yè)界通用的多個公開Benchmark上,騰訊混元Turbo S在知識、數(shù)學(xué)、推理等多個領(lǐng)域展現(xiàn)出對標(biāo)DeepSeek V3、GPT 4o、Claude3.5等業(yè)界領(lǐng)先模型的效果表現(xiàn)。
據(jù)介紹,通過長短思維鏈融合,騰訊混元Turbo S在保持文科類問題快思考體驗的同時,基于自研混元T1慢思考模型合成的長思維鏈數(shù)據(jù),顯著改進(jìn)了理科推理能力,實現(xiàn)模型整體效果提升。
架構(gòu)方面,通過創(chuàng)新性地采用了Hybrid-Mamba-Transformer融合模式,混元Turbo S有效降低了傳統(tǒng)Transformer結(jié)構(gòu)的計算復(fù)雜度,減少了KV-Cache緩存占用,實現(xiàn)訓(xùn)練和推理成本的下降。新的融合模式突破了傳統(tǒng)純Transformer結(jié)構(gòu)大模型面臨的長文訓(xùn)練和推理成本高的難題,一方面發(fā)揮了Mamba高效處理長序列的能力,也保留Transformer擅于捕捉復(fù)雜上下文的優(yōu)勢,構(gòu)建了顯存與計算效率雙優(yōu)的混合架構(gòu),這是工業(yè)界首次成功將Mamba架構(gòu)無損地應(yīng)用在超大型MoE模型上。
作為旗艦?zāi)P停琓urbo S未來將成為騰訊混元系列衍生模型的核心基座,為推理、長文、代碼等衍生模型提供基礎(chǔ)能力?;赥urbo S,通過引入長思維鏈、檢索增強和強化學(xué)習(xí)等技術(shù),騰訊自研了推理模型T1,該模型已在騰訊元寶上線,用戶可以選擇Deepseek R1或騰訊混元T1模型進(jìn)行回答。騰訊混元有關(guān)人士表示,正式版的騰訊混元T1模型API也將很快上線,對外提供接入服務(wù)。
(編輯 張鈺鵬)
多地召開“新春第一會” 高質(zhì)量發(fā)展、改革創(chuàng)新等被“置頂”
隨著春節(jié)假期結(jié)束,全國多地在蛇年首個工作……[詳情]
17:14 | 中聯(lián)重科德國工廠二期項目奠基 深... |
17:07 | 金丹科技:公司乳酸及其系列產(chǎn)品出... |
17:07 | 潤建股份:截至3月31日公司股東戶... |
17:07 | 潤建股份:公司暫無與潤光智行公司... |
17:07 | 潤建股份:公司擬于2025年4月26日... |
17:07 | 瑞納智能:公司產(chǎn)品并不應(yīng)用于人造... |
17:07 | 啟迪設(shè)計:截至2025年3月31日股東... |
17:07 | 平潭發(fā)展:公司2025年第一季度報告... |
17:07 | 南興股份:子公司唯一網(wǎng)絡(luò)不涉及互... |
17:07 | 名雕股份:截至2025年3月20日股東... |
17:07 | 隴神戎發(fā):截至2025年3月31日股東... |
17:07 | 隴神戎發(fā):公司將持續(xù)關(guān)注行業(yè)政策 |
版權(quán)所有《證券日報》社有限責(zé)任公司
互聯(lián)網(wǎng)新聞信息服務(wù)許可證 10120240020增值電信業(yè)務(wù)經(jīng)營許可證 京B2-20250455
京公網(wǎng)安備 11010602201377號京ICP備19002521號
證券日報網(wǎng)所載文章、數(shù)據(jù)僅供參考,使用前務(wù)請仔細(xì)閱讀法律申明,風(fēng)險自負(fù)。
證券日報社電話:010-83251700網(wǎng)站電話:010-83251800 網(wǎng)站傳真:010-83251801電子郵件:xmtzx@zqrb.net
安卓
IOS
掃一掃,加關(guān)注
掃一掃,加關(guān)注