Meta作为Llama基础语言模型的开发者，指出未来训练模型所需的计算力将显著增加，预计训练Llama4的计算量将是Llama3的10倍。面对这一趋势，Meta强调了提前构建训练模型能力的重要性，以避免在竞争中落后。Meta已发布拥有800亿参数的Llama3和其升级版Llama3.1，参数达到4050亿，成为其最大的开源模型。为适应未来模型需求，Meta正在考虑不同数据中心项目，并预计这将增加2025年的资本支出。训练大型语言模型成本高昂，Meta在服务器、数据中心和网络基础设施方面的投资在2024年第二季度增长了近33%，达到85亿美元。