Architecture, points forts et usages
Command R+ 08-2024 est une version officielle auto-hébergeable de Cohere dans la branche Command R Général. Elle utilise Dense Transformer avec 104B et un contexte vérifié de 131,072 tokens.
Command R+ 08-2024 utilise Dense Transformer avec 104B. Le profil vérifié indique 64 couches, une largeur cachée de 8192 et 64 têtes d’attention lorsque ces valeurs sont publiées.
Architecture Dense Transformer vérifiée
Contexte certifié de 131,072 tokens
Provenance officielle du checkpoint
Inférence LLM privée
Flux agentiques
Traitement de documents longs