百川智能发布千亿级参数的大语言模型Baichuan3

观点网讯:1月29日,百川智能发布了超千亿参数的大语言模型Baichuan3。该模型采用“动态数据选择”、“重要度保持”及“异步CheckPoint存储”等技术,显著提升了性能,相较业界主流框架提升超过30%。其稳定训练时间长达一个月以上,且故障恢复迅速,不超过10分钟。在多项能力测评中,如CMMLU、GAOKAO、AGI-Eval以及数学和代码专项评测MATH、HumanEval、MBPP等,Baichuan3均表现出色。

在医疗领域权威评测MCMLE、MedExam、CMExam中,它更成为中文医疗任务最佳大模型。Baichuan3通过“迭代式强化学习”技术,进一步增强了语义理解和生成能力。

本文源自观点网