Meta* freigegeben neues Open-Source-Neuronales Netzwerk Llama 3.1 mit mehr als 400 Milliarden verschiedenen Parametern. Das Modell kann Bilder und Text generieren.

„Im Gegensatz zu geschlossenen Modellen stehen alle Llama-Modelle zum Download zur Verfügung. Entwickler können neuronale Netze vollständig an ihre Bedürfnisse und Anwendungen anpassen, an neuen Datensätzen trainieren und zusätzliche Anpassungen vornehmen.“sagte das Unternehmen in einem Blogbeitrag.

Laut den Entwicklern übertrifft Llama 3.1 außerdem alternative KI-Modelle – GPT-4o und Claude 3.5 Sonnet von OpenAI bzw. Anthropic – in der Leistung bei Aufgaben wie Argumentation, Führung, Mathematik und mehrsprachiger Übersetzung.

Meta* gibt an, dass Llama 3.1 auf mehr als 16.000 Nvidia H100-GPUs sowie auf mehr nicht-englischen Daten, „mathematischen Daten“ und Code (um die mathematischen Denkfähigkeiten des Modells zu verbessern) und den neuesten Webdaten (um das Wissen darüber zu verbessern) trainiert wurde aktuelle Ereignisse).

„Wie von den Skalierungsgesetzen für Sprachmodelle erwartet, übertrifft unser neues Flaggschiffmodell kleinere Modelle, die mit demselben Verfahren trainiert wurden. Wir haben auch das 405B-Parametermodell verwendet, um die Qualität unserer kleineren Modelle nach dem Training zu verbessern.“ – stellte das Unternehmen fest.

Benutzer können Llama 3.1 auf der Website von Meta AI*, dem Chatbot des Unternehmens und in ausgewählten Ländern auf Facebook*, Instagram* und WhatsApp testen. Außerdem ist das neuronale Netzwerk, wie die Entwickler sagen, bei den Partnern des Unternehmens erhältlich, darunter AWS, Nvidia, Databricks, Groq, Dell, Azure und google Cloud.

Zuvor zeigte OpenAI ein neues neuronales Netzwerk für die Arbeit mit großen Datenmengen. Es wird als „kostengünstige Version“ von GPT4o präsentiert.

*Das Unternehmen Meta gilt als extremistisch und ist in der Russischen Föderation verboten