Marin udostępnia wszystkie 57 checkpointów z pretreningu modelu Mochi 535B-A23B
W poście na X dlwh ogłasza udostępnienie wszystkich 57 pośrednich checkpointów z pretreningu Marin „Mochi” 535B-A23B, opublikowanych na Hugging Face przez open-athena. Dziesięć z nich pochodzi z etapu rozszerzania kontekstu. Według posta trening obejmował 18,2 bln tokenów, a wagi zajmują około 61 TB. Publikacji towarzyszy wpis na blogu Open Athena.
17 listopada post miał 347 punktów i 17 komentarzy na X.
Źródła
Otrzymuj takie wiadomości jako push.
AI Tracker powiadomi Cię, gdy coś zmieni się w narzędziach, których używasz.