TaoTian Group联合AiCheng科技开源的大模型训练框架Megatron-LLaMA能够提升大语言模型的训练性能，降低训练成本，并保持与LLaMA社区的兼容性，在32卡训练上能够取得176%的加速。