最近，韩国的电子通信研究院（ETRI）宣布，他们成功研发了一项名为 “Dejaview” 的技术。这项新技术利用实时监控摄像头(CCTV)和人工智能(AI)，不仅能侦测犯罪行为，还能预测犯罪的可能性，标志着监控系统的角色由单纯的监视转变为主动预防犯罪的工具。图源备注:图片由AI生成，图片授权服务商Midjourney“Dejaview” 技术的核心在于分析犯罪发生的模式。研究团队发现，犯罪往往在某些特定的时间、地点和方式下重复发生。因此，通过比较当前的环境和社会模式与以往的犯罪案例，系统可以

佐治亚理工学院与英伟达的两位华人学者最新共同研发了一款名为RankRAG的创新微调框架，该框架针对复杂RAG流程实现了显著简化，使用单一的LLM对检索、排名及生成任务进行统一操作，效果远超传统流程。RAG技术在辅助大规模文本生成时普遍使用，然而，原有流程敏锐地识别到了如k值选择的局限性：当k值过大使长上下文处理变得吃力，或k值偏小削弱了检索效率。RankRAG创新性地通过微调与扩展LLM能力，使LLM能够自我适应进行检索和排名。相较于常规流程，该框架在数据效率和性能方面都有显著提升。实验证明，通过微调更高效的Llama模型，在多个通用和生物医学领域基准测试中，RankRAG的表现具有一定竞争力，甚至超越了前代顶级模型约10%的水平。这项技术引入了高度交互性和可编辑性的元素，允许用户在生成内容后进行实时编辑与迭代，显著提升工作效率，并且被推广至可与任何平台分享的成果。RankRAG的微调方案分为指令监督与多阶段强化训练两个阶段，旨在提升LLM在不同指令、检索与上下文排名能力上的综合性。通过该框架，AI生成的内容在通用领域性能上超过了目前开源顶级系统。尤其在长尾QA及多跳QA任务中有超10%的性能提升。在适应性应用如生物医学RAG基准Mirage上，即使是未经专门训练的模型，RankRAG也展现出对专业领域任务的超越。随着RankRAG的不断优化与普及，我们期待AI与人类协作流程更加顺利，技术及应用得到更大幅度的发展与创新。欲深入了解RankRAG技术，请访问论文：https://arxiv.org/abs/2407.02485

北京大学与快手AI团队合作，成功攻克了复杂视频生成的难题。他们提出了一种名为VideoTetris的新框架，能够像拼图一样轻松组合各种细节，生成高难度、指令复杂的视频。该框架在复杂视频生成任务中超越了Pika、Gen-2等商用模型。