Das Beanbao-Modell soll GPT-4 erreicht haben und erstmals seine Fähigkeit offengelegt haben, 3 Millionen lange Texte zu verarbeiten.

Doubao Big Model, eine Tochtergesellschaft von ByteDance, hat heute seinen jährlichen Technologiefortschrittsbericht 2024 veröffentlicht und enthüllt, dass seine neueste Version, Doubao-pro-1215, hinsichtlich der Gesamtleistung vollständig an GPT-4 angepasst ist und stärkere Fähigkeiten gezeigt hat einige Berufsfelder. Dieser Fortschritt markiert, dass Chinas Großmodelltechnologie offiziell die erste Stufe der Welt erreicht hat.

Seit seinem Debüt im Mai dieses Jahres hat das große Sitzsackmodell in nur 7 Monaten eine Kapazitätssteigerung von 32 % erreicht. Laut der offiziellen Einführung hat Doubao durch die Optimierung der Massendatenverarbeitung und die Innovation der Modellarchitektur, einschließlich der Verbesserung der Modellsparsität und der Einführung von Reinforcement Learning und anderen technischen Mitteln, erhebliche Fortschritte beim Verständnis von Genauigkeit und Generierungsqualität erzielt. Insbesondere in komplexen Szenarien wie Mathematik und Fachwissen übertrifft seine Leistung sogar GPT-4, während der Servicepreis nur ein Achtel davon beträgt.

Es ist erwähnenswert, dass Doubao zum ersten Mal seine Verarbeitungskapazität für ultralange Texte von 3 Millionen Wörtern offengelegt hat, was bedeutet, dass es den Inhalt von „Hunderten“ wissenschaftlichen Berichten gleichzeitig verarbeiten kann. Durch die Verwendung kontextbezogener Datenalgorithmen wie STRING sowie optimierter Sparsifizierungs- und Verteilungslösungen kontrolliert Doubao die Verarbeitungsverzögerung von Millionen von Token innerhalb von 15 Sekunden und verbessert so die Verarbeitungseffizienz des Modells für massives externes Wissen erheblich.

Dieser technologische Durchbruch zeigt nicht nur die rasante Entwicklung der chinesischen KI-Technologie, sondern deutet auch darauf hin, dass die Popularisierung großer Modellanwendungen aufgrund einer besseren Kostenleistung beschleunigt werden könnte.