跳到文章正文
大模型 编辑推荐

韩国游戏公司 KRAFTON 开源 30B 模型 Raon-1 mini:主打韩语,官网开放限时免费试用

韩国游戏企业 KRAFTON(魁匠团)旗下 AI 分支 KRAFTON AI 公布了 Raon-…

韩国游戏企业 KRAFTON(魁匠团)旗下 AI 分支 KRAFTON AI 公布了 Raon-1 mini 的预览版本。这个模型是从头训练的,采用混合专家架构,以 Apache 2.0 许可开源,官网还提供限时免费的 API 试用。正式版和更大的后续模型也在路上。

一分钟速览

  • Raon-1 mini 是 KRAFTON AI 从零训练的模型,目前处于预览阶段。
  • 体量为 30B-A4B,采用混合专家架构,导入线性注意力,支持推测解码。
  • 重点照顾韩语,同时兼顾英语;以 Apache 2.0 许可开源。
  • 官方称其在编程与智能体任务上与 Meta 的 Muse Glimmer 30B 相当,速度更快、内存更省。

30B-A4B 是什么意思

这串数字说的是参数规模。30B 指模型总共有约 300 亿参数,A4B 指每次推理只激活其中约 40 亿参数。混合专家架构的思路,是把模型拆成许多各有所长的子网络,遇到问题时只调用其中一部分,而不是把整张网络都跑一遍。

好处很直接:总容量大,能装下更多知识;实际计算量小,跑起来更快、更省显存。这也是近两年中小体量模型普遍选择这条路的原因。

至于线性注意力和推测解码,前者是为了让处理长文本时开销增长得更慢,后者则是先快速猜出几个词,再统一校验,猜对了就省下计算。两项技术都指向同一个目标:在有限的硬件上把速度提上去。

为什么强调韩语

主流开源模型大多以英语数据为主,韩语这类语种在训练中占比有限,实际用起来常常出现表达生硬、本地知识不足的问题。KRAFTON 把韩语列为重点,本质上是做差异化:通用能力追平第一梯队很难,但在特定语言和使用场景上做得更顺手,就有明确的落点。

对一家游戏公司来说,这条路也说得通。游戏里的对话、客服、内容生成,都需要稳定的本地语言能力,自研模型可以按自己的需求调整,不必完全依赖外部接口。

开源意味着什么

Apache 2.0 是一个相对宽松的开源许可,允许商用和修改,对想自己部署的团队比较友好。配合限时免费的 API,KRAFTON 显然希望先让更多人上手试,积累反馈和使用案例,再谈生态。

不过预览版终究是预览版,真实表现要看第三方在实际任务里的测试结果,官方给出的对比数据只能作为参考。

趋势洞察

模型竞赛正在分层。一头是不断堆规模的旗舰模型,另一头是几十亿到几百亿参数、主打效率和场景的中小模型。后者更容易被企业私有化部署,也更容易在某个垂直领域做出优势。

KRAFTON 的入局说明,做模型不再是少数几家大厂的专利。游戏、金融、医疗这些行业里,只要数据和使用场景够具体,自研一个够用的模型并不遥远。真正的门槛,从能不能训出来,变成了训出来之后有没有人愿意长期用。

本文地址:https://www.163264.com/18034