PGµç¾º

±¾Õ¾µãʹÓÃCookies£¬¼ÌÐøä¯ÀÀ±íʾÄúͬÒâÎÒÃÇʹÓÃCookies¡£ CookiesºÍÒþ˽Õþ²ß>

¼òÌåÖÐÎÄ
English
Ê×Ò³ > ¹ØÓÚÎÒÃÇ > ÐÂÎÅÖÐÐÄ > Ô´Yuan 3.0 Flash»ù´¡´óÄ£ÐÍ¿ªÔ´·¢²¼£º¶àģ̬¡¢¸üÉÙËãÁ¦¡¢¸ü¸ßÖÇÄÜ

Ô´Yuan 3.0 Flash»ù´¡´óÄ£ÐÍ¿ªÔ´·¢²¼£º¶àģ̬¡¢¸üÉÙËãÁ¦¡¢¸ü¸ßÖÇÄÜ

2025-12-30

YuanLab.ai ÍŶÓÕýʽ¿ªÔ´·¢²¼ Ô´Yuan3.0 Flash ¶àģ̬»ù´¡´óÄ£ÐÍ¡£Yuan3.0 Flash ÊÇÒ»¿î 40B ²ÎÊý¹æÄ£µÄ¶àģ̬»ù´¡´óÄ£ÐÍ£¬²ÉÓÃÏ¡Êè»ìºÏר¼Ò£¨MoE£©¼Ü¹¹£¬µ¥´ÎÍÆÀí½ö¼¤»îÔ¼ 3.7B ²ÎÊý¡£Yuan3.0 Flash´´ÐÂÐÔµØÌá³öºÍ²ÉÓÃÁËÇ¿»¯Ñ§Ï°ÑµÁ··½·¨£¨RAPO£©£¬Í¨¹ý·´Ë¼ÒÖÖÆ½±Àø»úÖÆ£¨RIRM£©£¬´ÓѵÁ·²ãÃæÒýµ¼Ä£ÐͼõÉÙÎÞЧ·´Ë¼£¬ÔÚÌáÉýÍÆÀí׼ȷÐÔµÄͬʱ£¬´ó·ùѹËõÁËÍÆÀí¹ý³ÌµÄ token ÏûºÄ£¬ÏÔÖø½µµÍËãÁ¦³É±¾£¬ÔÚ ¡°¸üÉÙËãÁ¦¡¢¸ü¸ßÖÇÄÜ¡± µÄ´óÄ£ÐÍÓÅ»¯Â·¾¶Éϸü½øÒ»²½¡£

Yuan3.0 Flash ÓÉÊÓ¾õ±àÂëPGµç¾º¹ÙÍø¡¢ÓïÑÔÖ÷¸ÉÍøÂçÒÔ¼°¶àģ̬¶ÔÆëÄ£¿é×é³É¡£ÓïÑÔÖ÷¸ÉÍøÂç²ÉÓþֲ¿¹ýÂËÔöÇ¿µÄAttention½á¹¹£¨LFA£©ºÍ»ìºÏר¼Ò£¨MoE£©½á¹¹£¬ÔÚÌáÉý×¢ÒâÁ¦¾«¶ÈµÄͬʱ£¬ÏÔÖø½µµÍѵÁ·ÓëÍÆÀíµÄËãÁ¦¿ªÏú¡£¶àģ̬·½Ã棬²ÉÓÃÊÓ¾õ±àÂëPGµç¾º¹ÙÍø£¬½«ÊÓ¾õÐźÅת»¯Îªtoken£¬ÓëÓïÑÔtokenÒ»ÆðÊäÈëµ½ÓïÑÔÖ÷¸ÉÍøÂ磬ͨ¹ý¶àģ̬¶ÔÆëÄ£¿éʵÏÖ¸ßЧ¡¢Îȶ¨µÄ¿çÄ£Ì¬ÌØÕ÷¶ÔÆë¡£Í¬Ê±£¬ÒýÈë×ÔÊÊӦͼÏñ·Ö¸î»úÖÆ£¬ÔÚÖ§³Ö¸ß·Ö±æÂÊͼÏñÀí½âµÄͬʱ£¬ÓÐЧ½µµÍÏÔ´æÐèÇó¼°ËãÁ¦¿ªÏú£¨Èçͼ1£©¡£

Ô´yuan3.0 flashÕûÌå¼Ü¹¹ºÍ»ùÓÚMoEµÄÓïÑÔÖ÷¸É.jpg

ͼ1£ºYuan 3.0ÕûÌå¼Ü¹¹ºÍ»ùÓÚMoEµÄÓïÑÔÖ÷¸É

×ó²àΪYuan 3.0¼Ü¹¹£¬º¬Èý¸ö×é¼þ£º(1) ViT±àÂëPGµç¾º¹ÙÍø´¦ÀíͼÏñ£»(2) ÇáÁ¿¼¶MLPͶӰPGµç¾º¹ÙÍø¶ÔÆëÊÓ¾õÓëÎı¾ÌØÕ÷£»(3) »ùÓÚMoEµÄÓïÑÔÄ£ÐÍ¡£ÓÒ²àΪ²ÉÓþֲ¿¹ýÂË×¢ÒâÁ¦(LFA) µÄÔ´3.0ÓïÑÔÖ÷¸ÉÍøÂç¡£

¸üÖµµÃ¹Ø×¢µÄÊÇ£¬ÔÚÆóÒµ³¡¾°µÄ RAG£¨ChatRAG£©¡¢¶àģ̬¼ìË÷£¨Docmatix£©¡¢¶àģ̬±í¸ñÀí½â£¨MMTab£©¡¢ÕªÒªÉú³É£¨SummEval£©µÈÈÎÎñÖÐ, Yuan3.0 Flash µÄ±íÏÖÒÑÓÅÓÚ GPT-5.1£¬ÌåÏÖ³öÆäÔÚÆóÒµÓ¦Óó¡¾°ÖеÄÃ÷ÏÔÄÜÁ¦ÓÅÊÆ¡£ÔÚ¶àÄ£Ì¬ÍÆÀíÓëÓïÑÔÍÆÀíÆÀ²âÖУ¬Yuan3.0 Flash£¨40B£©¾«¶È½Ó½üQwen3-VL235B-A22B£¨235B£©ÓëDeepSeek-R1-0528£¨671B£©£¬µ« token ÏûºÄ½öԼΪÆä 1/4 ~ 1/2£¬ÏÔÖø½µµÍÁËÆóÒµ´óÄ£ÐÍÓ¦Óóɱ¾£¨Èçͼ2£©¡£

Ô´Yuan3.0 FlashÔÚÆóÒµ¼¶¡¢¶àģ̬ºÍÓïÑÔģ̬ÉϵĻù×¼²âÊÔ±íÏÖ.jpg


ͼ2£ºYuan3.0 FlashÔÚÆóÒµ¼¶¡¢¶àģ̬ºÍÓïÑÔģ̬ÉϵĻù×¼²âÊÔ±íÏÖ

Yuan3.0 Flash È«Ãæ¿ªÔ´£¬È«ÏµÁÐÄ£ÐͲÎÊýºÍ´úÂë¾ù¿ÉÃâ·ÑÏÂÔØÊ¹Óãº

https://github.com/Yuan-lab-LLM/Yuan3.0

²»×·Çó¡°¸ü³¤Ë¼¿¼¡±£¬¶øÊÇ¡°¸üÓÐЧ˼¿¼¡±

½üÄêÀ´£¬³¤Ë¼Î¬Á´£¨Chain-of-Thought£©³ÉΪÌáÉý´óÄ£ÐÍÍÆÀíÄÜÁ¦µÄÖ÷Á÷·¶Ê½£¬µ«ÔÚʵ¼ÊÓ¦ÓÃÖÐÒ²´øÀ´ÁËеÄÎÊÌâ£ºÍÆÀí¹ý³ÌÈß³¤¡¢ËãÁ¦ÏûºÄ´ó¡¢²¿Êð³É±¾¸ß£¬ÉõÖÁÔڵõ½ÕýÈ·´ð°¸ºóÈÔ³ÖÐø´óÁ¿Éú³ÉÈß³¤µÄÄÚÈÝ£¨Èçͼ3£©¡£

DeepSeek-R1µÄÖØ¸´·´Ë¼ÐÐΪʾÀý.jpg

ͼ3£º DeepSeek-R1µÄÖØ¸´·´Ë¼ÐÐΪʾÀý

Õë¶ÔÍÆÀíÄ£ÐÍÆÕ±é´æÔÚµÄ ¡°¹ý¶È˼¿¼£¨Overthinking£©¡±ÎÊÌ⣬Yuan3.0 Flash ´´ÐÂReflection-aware Adaptive Policy Optimization£¨RAPO£© Ç¿»¯Ñ§Ï°Ëã·¨£¬Ìá³ö·´Ë¼ÒÖÖÆ½±Àø»úÖÆ£¨RIRM£©£¬´ÓѵÁ·²ãÃæÒýµ¼Ä£ÐͼõÉÙÎÞЧ·´Ë¼£¬×¨×¢ÓÚ±ØÒªÍÆÀí²½Ö裨Èçͼ4£©¡£

Ô´Yuan3.0 FlashÌá³ö·´Ë¼ÒÖÖÆ½±Àø»úÖÆ£¨RIRM£©.jpg

ͼ4£º·´Ë¼ÒÖÖÆ½±Àø»úÖÆ£¨RIRM£©

¸Ã»úÖÆÄܹ»Ê¶±ðÄ£ÐÍÊ״εõ½ÕýÈ·´ð°¸µÄ¹Ø¼ü½Úµã£¬²¢¶ÔºóÐøÈßÓàÍÆÀíÐÐΪ½øÐÐÒÖÖÆ£¬Ê¹Ä£ÐÍÔÚ±£Ö¤´ð°¸ÕýÈ·ÐÔµÄǰÌáÏ£¬´ó·ùѹËõÊä³ö³¤¶È¡£ÊµÑé½á¹û±íÃ÷£¬ÔÚÊýѧ¡¢¿ÆÑ§Ó븴ÔÓÍÆÀíÈÎÎñÖУ¬Yuan3.0 Flash ÔÚ׼ȷÂÊÌáÉýµÄͬʱ£¬ÍÆÀí token ÊýÁ¿×î¸ß¿É¼õÉÙÔ¼ 75%£¬ÏÔÖø½µµÍÍÆÀí³É±¾¡£

Yuan3.0 Flash²ÉÓÃRIRMµÄÇ¿»¯Ñ§Ï°ÑµÁ·ÓëDAPO+³¤¶È³Í·£µÄ¾«¶ÈÓëÊä³ötokenÊýÁ¿¶Ô±È.jpg

±í1£ºYuan3.0 Flash²ÉÓÃRIRMµÄÇ¿»¯Ñ§Ï°ÑµÁ·ÓëDAPO+³¤¶È³Í·£µÄ¾«¶ÈÓëÊä³ötokenÊýÁ¿¶Ô±È

ÔÚ RAPO ¿ò¼ÜÏ£¬Ä£ÐÍͬʱ֧³ÖÉî¶ÈÍÆÀíÈÎÎñÓë¿ìËÙÍÆÀíÈÎÎñµÄͳһѵÁ·£¬²¢Í¨¹ý£º

¡ö ×ÔÊÊÓ¦¶¯Ì¬²ÉÑù£¨ADS£©

¡ö ¸ßìØ Token Ñ¡ÔñµÄ 80/20 ѵÁ·²ßÂÔ

¡ö ÓÅ»¯µÄË«ÖØ²Ã¼ô»úÖÆ

¡ö ³¤¶ÌÊä³ö·Ö×é½»ÌæÑµÁ·

ÔÚ´ó¹æÄ£ MoE Ä£ÐÍÉÏʵÏÖÁ˸üÎȶ¨µÄÇ¿»¯Ñ§Ï°ÑµÁ·£¬ÑµÁ·Ð§ÂÊÌáÉý52.91% ¡£Yuan3.0 FlashÄܹ»ÔÚĬÈÏÍÆÀíģʽϼ´¿ÉÂú×ã¾ø´ó¶àÊýÆóÒµ³¡¾°ÐèÇ󣬶øÎÞÐè¶îÍ⿪Æô¡°Éî¶È˼¿¼Ä£Ê½¡±£¬ÕæÕýʵÏÖ¡°Ä¬Èϼ´¸ßЧ¡¢¼´ÖÇÄÜ¡±¡£

ÆóÒµ³¡¾°ÏÂÄ£ÐÍÄÜÁ¦µÄÌáÉý£¬Àë²»¿ª¸ßÖÊÁ¿Êý¾ÝÖ§³Å

Yuan3.0 FlashµÄÓÅÐã±íÏÖ£¬²¢·Ç½öÒÀÀµËã·¨±¾Éí£¬¶øÊǽ¨Á¢ÔÚÃæÏòÆóÒµÕæÊµ³¡¾°µÄÊý¾Ý×¼±¸¹¤×÷Ö®ÉÏ¡£ÓëͨÓöԻ°»ò»¥ÁªÍøÓïÁϲ»Í¬£¬Ä£ÐÍÔÚѵÁ·½×¶ÎÖØµãÒýÈëÁË´óÁ¿Ìù½üÆóÒµÉú²ú»·¾³µÄÊý¾ÝÐÎ̬£¬°üÀ¨£º

¡ö ³¤Æª¼¼ÊõÎĵµ¡¢½â¾ö·½°¸²ÄÁÏ¡¢²Ù×÷ÊֲᡢͶ±êÎļþµÈ¸´ÔÓÎı¾

¡ö ²ÆÎñÓëÒµÎñ±¨±í¡¢¶à¼¶±íÍ·±í¸ñ¡¢Ç¶Ì×±í¸ñÓëͼÎÄ»ìÅÅÒ³Ãæ

¡ö ¿çÒ³Ãæ¡¢¶àģ̬ÐÅÏ¢ÁªºÏÀí½âµÄÕæÊµÒµÎñ³¡¾°

Î§ÈÆÕâЩÊäÈëÐÎ̬£¬ÑµÁ·Êý¾ÝÖØµã¸²¸Ç¶àģ̬ÐÅÏ¢¼ìË÷¡¢¶Ô±È·ÖÎö¡¢ÕªÒªÉú³É¡¢±í¸ñ·ÖÎöÓëÀí½âµÈÆóÒµ¸ßƵÈÎÎñ¡£Í¬Ê±£¬ÔÚÊý¾Ý¹¹½¨½×¶Î£¬ÍŶÓÏÔÊ½Çø·ÖÁËÎÞÐèÉî¶ÈÍÆÀí¼´¿ÉÍê³ÉµÄÈÎÎñÓëÈ·Ðè¶à²½ÍÆÀíµÄ¸´ÔÓÈÎÎñ£¬ÎªºóÐøÇ¿»¯Ñ§Ï°½×¶ÎÓÅ»¯ÍÆÀíЧÂÊÌṩÁËÃ÷È·µÄÊý¾Ý»ù´¡¡£

ÃæÏòÆóÒµ³¡¾°µÄ¶àģ̬»ù´¡ÄÜÁ¦

ÔÚÄÜÁ¦²ãÃæ£¬Yuan3.0 Flash ²¢·ÇÎ§ÈÆµ¥Ò» Benchmark ÓÅ»¯£¬¶øÊÇÕë¶ÔÆóÒµÕæÊµÒµÎñÐèÇó½øÐÐÁËϵͳÉè¼Æ¡£ÔÚ¶àÏîÆóÒµ¼¶ÆÀ²âÖУ¬Ä£ÐÍÔÚÒÔÏÂÄÜÁ¦ÉϱíÏÖÍ»³ö£º

¡ö ¼ìË÷ÔöÇ¿Éú³É£¨RAG£©£ºÔÚ ChatRAG¡¢Docmatix µÈÆÀ²âÖÐÈ¡µÃÁìÏȳɼ¨

¡ö ¸´ÔÓ±í¸ñÓëÎĵµÀí½â£ºÔÚ MMTab µÈ¶àÈÎÎñ»ù×¼ÖÐÕ¹ÏÖÁìÏÈÄÜÁ¦

¡ö ¸ßÖÊÁ¿×ܽáÉú³É£ºÔÚ SummEval Éϼæ¹ËÓïÒåÒ»ÖÂÐÔÓëÊÂʵ׼ȷÐÔ

¡ö ¶àÄ£Ì¬ÍÆÀíЧÂÊ£ºÔÚ ChartQA¡¢DocVQA µÈÈÎÎñÖУ¬ÒÔ¸üÉÙtoken ´ïµ½±È¼çÇ°ÑØ´óÄ£Ð͵ľ«¶È

½áºÏ¶Ô128K³¤ÉÏÏÂÎĵÄÎȶ¨Ö§³Ö£¬Yuan3.0 Flash Äܹ»Ê¤ÈÎÆóÒµ¼¶³¤Îĵµ·ÖÎö¡¢¿çÒ³ÃæÐÅÏ¢¼ìË÷Óë¶àԴ֪ʶÈÚºÏÈÎÎñ£¨Èçͼ5£©¡£

Ô´Yuan3.0 FlashÔÚ_´óº£ÀÌÕë_²âÊÔÖÐʵÏÖ100%¾«¶ÈÕÙ»Ø.jpg

ͼ5£ºYuan3.0 FlashÔÚ"´óº£ÀÌÕë"²âÊÔÖÐʵÏÖ100%¾«¶ÈÕÙ»Ø

¿ªÔ´»ù´¡Ä£ÐÍ£¬Íƶ¯¿ÉÂ䵨µÄ´óÄ£ÐÍÖÇÄÜ

Yuan3.0 Flash´óÄ£ÐÍÈ«Ãæ¿ªÔ´£¬²»½ö°üÀ¨Ä£ÐÍÈ¨ÖØ£¨16bitÓë4bitÄ£ÐÍ£©¡¢¼¼Êõ±¨¸æ£¬Ò²º­¸ÇÍêÕûµÄѵÁ··½·¨ÓëÆÀ²â½á¹û£¬Ö§³ÖÉçÇøÔÚ´Ë»ù´¡ÉϽøÐжþ´ÎѵÁ·ÓëÐÐÒµ¶¨ÖÆ¡£YuanLab.aiÍŶÓÏ£Íûͨ¹ýÕâÒ»¿ªÔ´»ù´¡Ä£ÐÍ£¬Íƶ¯´óÄ£ÐÍ´Ó¡°ÄÜÁ¦Õ¹Ê¾¡±×ßÏò¡°¹æÄ£»¯Â䵨¡±£¬ÎªÆóÒµÌṩ¿É¿Ø³É±¾¡¢¿ÉÔ¤²âÐÔÄÜ¡¢¿É³ÖÐøÑݽøµÄ¶àģ̬ÖÇÄܵ××ù¡£

¡°¸üÉÙËãÁ¦£¬²¢²»ÒâζןüÈõÄÜÁ¦£»¸ü¸ßÖÇÄÜ£¬Ò²²»Ò»¶¨ÒÀÀµ¸ü´óÄ£ÐÍ¡£¡± Yuan3.0 Flash ÕýÊÇÔÚÕâÒ»ÀíÄîÏ£¬¶ÔÏÂÒ»´ú»ù´¡´óÄ£ÐÍÐÎ̬µÄÒ»´Î̽Ë÷Óëʵ¼ù¡£

Ô´Yuan 3.0»ù´¡´óÄ£Ðͽ«°üº¬Flash¡¢ProºÍUltraµÈ°æ±¾£¬Ä£ÐͲÎÊýÁ¿Îª40B¡¢200BºÍ1TµÈ£¬ÎÒÃǽ«Â½Ðø·¢²¼Ïà¹Ø¹¤×÷¡£

¡¸¿ªÔ´µØÖ· ¡¹

´úÂ뿪ԴÁ´½Ó

https://github.com/Yuan-lab-LLM/Yuan3.0

ÂÛÎÄÁ´½Ó

https://github.com/Yuan-lab-LLM/Yuan3.0/blob/main/docs/YUAN3.0_FLASH-paper.pdf

Ä£ÐÍÏÂÔØÁ´½Ó

1)Huggingface£º

https://huggingface.co/YuanLabAI/Yuan3.0-Flash  

https://huggingface.co/YuanLabAI/Yuan3.0-Flash-4bit

2)ModelScope£º

https://modelscope.cn/models/Yuanlab/Yuan3.0-Flash

https://modelscope.cn/models/Yuanlab/Yuan3.0-Flash-int4


ÊÛǰ×Éѯ

ÊÛºó·þÎñ

Òâ¼û·´À¡

AIStore

»Øµ½¶¥²¿

»Øµ½¶¥²¿

ÊÕÆð
»Øµ½¶¥²¿ »Øµ½¶¥²¿
ÇëÑ¡Ôñ·þÎñÏîÄ¿
ÊÛǰ×Éѯ
ÊÛºó·þÎñ
·ÃÎÊ AIStore

ɨÂë·ÃÎÊAIStore

¡¾ÍøÕ¾µØÍ¼¡¿¡¾sitemap¡¿