phixtral-2x2_8 दो microsoft/phi-2 मॉडल से बना पहला संकर विशेषज्ञ मॉडल है, जो mistralai/Mixtral-8x7B-v0.1 आर्किटेक्चर से प्रेरित है। इसका प्रदर्शन प्रत्येक अलग-अलग विशेषज्ञ मॉडल से बेहतर है। यह मॉडल AGIEval, GPT4All, TruthfulQA, Bigbench आदि कई मूल्यांकन मापदंडों पर उत्कृष्ट प्रदर्शन करता है। इसने mergekit लाइब्रेरी (mixtral शाखा) के एक कस्टम संस्करण और विशिष्ट कॉन्फ़िगरेशन का उपयोग किया है। उपयोगकर्ता मुफ्त T4 GPU पर 4-बिट परिशुद्धता के साथ Colab नोटबुक पर Phixtral चला सकते हैं। मॉडल का आकार 4.46B पैरामीटर है, और टेंसर प्रकार F16 है।