Mixtral 8x7B Instruct è un modello generativo pre-addestrato di miscela sparsa di esperti, sviluppato da Mistral AI, per l’utilizzo in chat e per scopi didattici. Incorpora 8 esperti (reti feed-forward) per un totale di 47 miliardi di parametri. Il modello Instruct è stato ottimizzato da Mistral. #moe