Q-RWKV-6 32B Instruct Vorschau ist die neueste RWKV-Modellvariante von Recursal AI, die in mehreren englischen Benchmarks alle vorherigen RWKV-, State Space- und Liquid AI-Modelle übertrifft. Dieses Modell wurde entwickelt, indem die Gewichte des Qwen 32B Instruct-Modells auf die maßgeschneiderte QRWKV6-Architektur übertragen wurden. Dabei wurden die bestehenden Transformer-Aufmerksamkeitsköpfe erfolgreich durch RWKV-V6-Aufmerksamkeitsköpfe ersetzt – ein Prozess, der in Zusammenarbeit zwischen dem Recursal AI-Team und der Open-Source-Community von RWKV und EleutherAI entwickelt wurde. Zu den Hauptvorteilen des Modells gehören eine deutliche Reduzierung der Rechenkosten im großen Maßstab und umweltfreundliche Open-Source-KI-Technologie.