摩尔线程国产GPU重大里程碑!千卡集群完成30亿参数大模型实训
摩尔线程国产GPU重大里程碑!千卡集群完成30亿参数大模型实训
快科技5月27日消息,摩尔线程、无问芯穹联合宣布,双方已经正式完成MT-infini-3B3B(30亿参数)规模大模型的实训,基于摩尔线程国产全功能GPUMTTS4000组成的千卡集群,以及无问芯穹的AIStudioPaaS平台。本次实训充分验证了夸娥千卡智算集群在大模型训练场景下的可靠...
摩尔线程千卡GPU集群!憨侯完成700亿参数大模型训练
摩尔线程千卡GPU集群!憨侯完成700亿参数大模型训练
快科技5月17日消息,摩尔线程、憨猴科技集团联合宣布,基于摩尔线程的夸娥(KUAE)千卡智算集群,憨猴集团成功完成了7B、34B、70B不同参数量级的大模型分布式训练。经双方共同严苛测试,兼容适配程度高,训练效率达到预期,精度符合要求,整个训练过程持续稳定。这充分验证了夸娥智算集群作为国产全功能GP...