Llama-3 70B Gradient 524K Adapter
Llama-3 70B模型的LoRA适配器,扩展上下文长度至超过524K。
普通产品编程LoRATransformers
Llama-3 70B Gradient 524K Adapter是一个基于Llama-3 70B模型的适配器,由Gradient AI Team开发,旨在通过LoRA技术扩展模型的上下文长度至524K,从而提升模型在处理长文本数据时的性能。该模型使用了先进的训练技术,包括NTK-aware插值和RingAttention库,以高效地在高性能计算集群上进行训练。
Llama-3 70B Gradient 524K Adapter 最新流量情况
月总访问量
17788201
跳出率
44.87%
平均页面访问数
5.4
平均访问时长
00:05:32