Trillion Labs 推出韩国首个 70B 法学硕士项目和模型检查点

-Tri-70B(700 亿个参数),韩国从零开始开发的最大模型,作为极少后期学习的基础模型发布。

– 同时宣布启动开源周”,并发布最开放的许可证Apache 2.0,覆盖5亿、18亿、7亿、70亿,为科研和工业界提供商业用途的开放性。

-提供全球研究标准,通过全面公开所有检查点来提高培训过程的透明度,从而实现研究的可重复性和学习动态的分析。

超智能AI初创公司Trillion Labs(CEO:Jaemin Shin)发布了Tri-70B,这是韩国首个拥有700亿(70B)个参数的大规模语言模型(LLM)。该模型意义重大,因为它是迄今为止韩国从零开始开发的最大的语言模型。此外,它以基础模型的形式发布,后期训练工作极少,方便研究人员和企业轻松定制,预计将为学术界和产业界做出贡献。

此外,随着 70B 模型的发布,Trillion Labs 宣布“开源月”,并根据 Apache 2.0 许可证发布了其全部 0.5B、1.8B、7B 和 70B 模型产品线。这使得 Trillion Labs 的语言模型产品线以尽可能开放的形式,涵盖从研究用途到商业用途,超越了简单的成果共享,提供了可用于研究和工业环境的资产。

值得一提的是,在本次开源月期间,Trillion Labs 不仅将全面公开最终模型,还将公开训练过程中生成的中间检查点。这将使学术界和工业界能够深入研究大规模模型的训练过程,并开展高效的再训练和应用研究。

即使在全球范围内,这都是一项罕见的举措。此前,只有像AllenAI和Hugging Face这样的非营利组织开展过此类工作,而Trillion Labs是全球第三家、韩国首家开展此类工作的机构。Trillion Labs被认为建立了新的研究标准,通过研究公开确保整个学习过程的透明度和可重复性,这在韩国尚属首例,也是全球同类项目中规模最大的之一。

此版本还包含专门用于多语言翻译和实时搜索的模型。特别是搜索模型,可以与 DuckDuckGo 等搜索引擎集成,实时反映最新信息,展现了大规模语言模型持续学习和利用新知识的潜力。

Trillion Labs 首席执行官 Shin Jae-min 强调:“我们并非简单地创建语言模型,而是公开训练流程和核心技术,以确保研究透明度,为韩国乃至全球 AI 研究生态系统的发展奠定基础。” 他补充道:“此次公开是韩国首次尝试的一项意义深远的挑战,它将成为展示韩国 AI 企业如何通过卓越的技术和开放的研究文化确保全球竞争力的重要起点。”

与此同时,成立于2024年8月的Trillion Labs是韩国唯一一家从零开始独立设计并实施韩语法学硕士(LLM)项目的初创公司。在生成式人工智能先驱、首席执行官Jaemin Shin的带领下,团队由来自国内外的顶尖人工智能工程师和研究人员组成,其中包括来自韩国科学技术院(KAIST)、牛津大学、伯克利大学、亚马逊和Naver的毕业生。该公司于2024年9月获得580万美元(约90亿韩元)的种子轮融资,并于2025年3月开源了其预发布模型Trillion-7B(Trillion-7B-preview),并于7月开源了Tri-21B。