2025年2月24日——由360與北京大學(xué)聯(lián)合研發(fā)的中等量級推理模型Tiny-R1-32B-Preview正式亮相,僅以5%參數(shù),逼近Deepseek-R1-671B的性能。

核心突破:小模型,大能量
? 數(shù)學(xué)領(lǐng)域:以78.1分(AIME 2024評測)逼近原版R1模型(79.8分),遠超Deepseek-R1-Distill-Llama-70B(70.0分);
? 綜合性能:在編程(LiveCodeBench 61.6分)、科學(xué)(GPQA-Diamond 65.0分)領(lǐng)域全面領(lǐng)先最佳開源70B模型Deepseek-R1-Distill-Llama-70B;
? 效率躍遷:僅需5%參數(shù)量,性能達原版R1的95%以上,推理成本大幅降低。
技術(shù)革新:領(lǐng)域?qū)>?模型融合
研究團隊使用「分治-融合」策略:
? 基于DeepSeek-R1生成海量領(lǐng)域數(shù)據(jù),分別訓(xùn)練數(shù)學(xué)、編程、科學(xué)三大垂直模型;
? 通過Arcee團隊Mergekit工具智能融合,突破單一模型性能上限,實現(xiàn)多任務(wù)均衡優(yōu)化。
開源承諾:推動技術(shù)普惠
? 模型倉庫:https://huggingface.co/qihoo360/TinyR1-32B-Preview
? 即將公開完整技術(shù)報告、訓(xùn)練代碼及部分數(shù)據(jù)集;
? 踐行開源精神,助力AI社區(qū)共筑高效推理新生態(tài)。
研發(fā)團隊表示:「Tiny-R1-32B-Preview是蒸餾技術(shù)的里程碑,未來將持續(xù)探索更輕量、更強大的通用模型,推動AI技術(shù)普惠化進程。」
360 團隊: Lin Sun, Guangxiang Zhao, Xiaoqi Jian, Weihong Lin, Yongfu Zhu, Change Jia, Linglin Zhang, Jinzhu Wu, Sai-er Hu, Xiangzheng Zhang
北大團隊: Yuhan Wu, Zihan Jiang, Wenrui Liu, Junting Zhou, Bin Cui, Tong Yang


星空人工智能技術(shù)網(wǎng) 倡導(dǎo)尊重與保護知識產(chǎn)權(quán)。如發(fā)現(xiàn)本站文章存在版權(quán)等問題,煩請30天內(nèi)提供版權(quán)疑問、身份證明、版權(quán)證明、聯(lián)系方式等發(fā)郵件至1851688011@qq.com我們將及時溝通與處理。?。?a href="/">首頁 > 星空人工智能產(chǎn)業(yè) > AI大模型 » 360聯(lián)合北大震撼發(fā)布!5%參數(shù)量逼近Deepseek-R1滿血性能
力納克跨界協(xié)作 加速家具包裝綠色
國內(nèi)首個“全棧式AI安全中樞”:Deep
昇騰MindStudio模型量化方案,助力企
打造以人為本的新智造,卡奧斯以AI賦
中科視語亮相昇騰APN伙伴大會,共探
Soul App生態(tài)安全報告:技術(shù)賦能,全方
九聯(lián)科技鴻蒙系列產(chǎn)品全面接入Deep
AI時代如何破局高校網(wǎng)絡(luò)建設(shè)挑戰(zhàn)?來