在2022年全球生成式 AI 浪潮的背景下，元始智能（RWKV）于2023年12月完成数千万人民币的天使轮融资，由天际资本投资。此次融资后，公司估值翻倍，资金将用于团队扩展、新架构研发及产品商业化。RWKV 的出现，是对传统 Transformer 架构的一次有力挑战。随着大语言模型（LLM）的发展，虽然模型的参数规模日益庞大，但其在幻觉和准确率等问题上的短板始终难以解决。因此，RWKV 的创始团队决定探索一种全新的架构，以期实现更高的效率和灵活性。RWKV 的设计理念与 Transformer 截然不同。联合

深圳元始智能有限公司近日宣布，公司已于2024年12月25日完成数千万级人民币的天使轮融资，投资方为天际资本。此次融资将加速元始智能在生态发展、技术实力增强以及面向C端的AI应用推出方面的步伐。元始智能成立于2023年6月，是一家专注于大模型架构和AI应用研发的高新技术企业。公司以其创新技术和清晰的发展战略，持续获得资本市场的青睐。在此次融资之前，元始智能已于2024年1月完成了由奇绩创坛领投的种子轮融资，展现了其在人工智能领域的强劲发展势头和市场潜力。

近期，RWKV团队宣布推出了专为中文小说创作设计的“AI小说模型”——RWKV-6-ChnNovel系列。这一模型在小说续写和扩写方面展现出卓越的性能，并且在使用角色扮演任务时，效果也显著优于RWKV-World系列基

格灵深瞳开源了RWKV-CLIP模型，这是一个结合了Transformer和RNN优点的视觉语言表征学习器。该模型通过图文预训练任务，使用从网站获取的图像-文本对扩展数据集，显著提高了视觉和语言任务的性能。为了解决噪声数据问题并提高数据质量，研究团队引入了一个多样化的描述生成框架，利用大型语言模型（LLM）从基于网络的文本、合成字幕和检测标签中合成和细化内容。

2024年7月19日, RWKV开源基金会全球开源了其最新最强的稠密纯RNN大语言模型RWKV-6-World14B。此模型在性能测试中体现出与拥有213亿个参数的Llama相当的英文性能，并在100多种语言与代码上表现出显著的多语言优越性，支持全球100种以上的语言和代码。RWKV-6-World14B通过基准测试显示了出众的性能，特别是在Uncheatable Eval评测中超越了Llama213B和Qwen1.514B。优点在于，该模型在训练过程中未受特殊优化困扰，基于从RWKV-4到RWKV-6的架构改进。在当前的评价排名中，该模型不仅展示了强大的实际能力，还能够在包括arXiv论文、新闻、ao3小说和GitHub代码等实时数据上进行评估，表明了其在模型能力和泛化能力上的真实性。提供下载的平台有Hugging Face、ModelScope和WiseModel等，不支持safetensor（.st）格式的Ai00用户则可以下载都在Ai00HF仓库中转换的版本。部署所需显存约为10G至28G。此款模型在多个领域展现出潜力，涉及自然语言处理、文学创作、代码处理、学术建议以及教育指令的自动化等复杂的实际应用，并且所有开源的RWKV模型在指令与对话方面有所提供，但尚无专门针对特定任务的优化训练。

元智能 OS 是一个由彭博创立的创业公司，其基于开源模型 RWKV 开发了一系列大模型，并致力于成为大模型时代的安卓。RWKV 模型在推理任务中具有优越的性能和低成本，因此吸引了金融、律所、智能硬件等行业的客户。元智能 OS 的商业模式是基于私有数据的模型定制和内部 AI Agent 开发。该公司希望通过在终端设备上部署大模型，解决 API 调用的延迟和数据安全问题。目前，RWKV 已在 Windows、Mac 和 Linux 电脑上提供版本，安卓和 iOS 版本也在开发中。元智能 OS 正在进行融资，并与芯片公司和算力平台合作，打造标杆客户。罗璇表示，大模型的决战战场是在硬件上，终端设备和云端都需要专用芯片。