Un LLM de 3,8 milliards de paramètres entraîné pour moins de 1000 dollars
Un chercheur indépendant, Hugo Vergnes, a entraîné un modèle de langage de 3,8 milliards de paramètres pour 998 dollars, atteignant 0,384 CORE.
entraînement
xAI aurait entraîné ses modèles de code sur Claude d’Anthropic
xAI, la startup d’Elon Musk, aurait entraîné ses modèles de codage sur les sorties de Claude d’Anthropic pendant des mois, même après la coupure d’accès.