Moonshot gibt Kimi K3 frei: 2,8 Billionen Parameter zum Herunterladen.

Ende Juli hat Moonshot AI aus China sein bisher stärkstes Modell offengelegt: Kimi K3. Offen heißt hier, dass das fertig trainierte Modell frei auf Hugging Face liegt, zusammen mit dem Code und einem ausführlichen technischen Bericht.

Die Eckdaten laut Moonshot:

• 2,8 Billionen Parameter. Für jedes Wortstück rechnen davon jeweils rund 104 Milliarden, der Rest ruht.
• Es versteht Bilder direkt, ohne Umweg über ein zweites Modell.
• Es verarbeitet bis zu einer Million Token auf einmal, grob gerechnet weit über tausend Seiten Text.
• Eine neue Bauweise soll pro Rechenaufwand rund 2,5-mal so viel herausholen.

In den veröffentlichten Tests kommt Kimi K3 nahe an die großen Modelle aus den USA heran, bei mehreren liegen diese aber vorne.

Die Lizenz ist großzügig, hat aber Bedingungen. Im eigenen Betrieb darfst du das Modell frei nutzen und anpassen. Wer damit einen KI-Dienst für andere anbietet und mehr als 20 Millionen Dollar im Jahr umsetzt, braucht einen eigenen Vertrag mit Moonshot. Sehr große Produkte müssen „Kimi K3“ sichtbar nennen.

Klein ist das Ganze nicht: Die Dateien sind weit über ein Terabyte groß, betreiben lässt sich das nur auf mehreren starken Servern.