蚂蚁开源混合线性架构的万亿参数思考模型Ring-2.5-1T

2月13日,蚂蚁发布并开源首个混合线性架构的万亿参数思考模型Ring-2.5-1T。据介绍,相比此前发布的Ring-1T,Ring-2.5-1T在生成效率、思考深度、长程执行上均有大幅提升,在超过32 … Continue reading 蚂蚁开源混合线性架构的万亿参数思考模型Ring-2.5-1T

蚂蚁开源万亿参数强化学习高性能权重交换框架Awex

11月20日,蚂蚁集团宣布开源万亿参数强化学习高性能权重交换框架Awex。据介绍,今年10月,蚂蚁集团开源了两款万亿参数旗舰模型,包括非思考的Ling-1T和思考模型Ring-1T。其中Ring-1T … Continue reading 蚂蚁开源万亿参数强化学习高性能权重交换框架Awex