SAN FRANCISCO / MÜNCHEN (IT BOLTWISE) – Die jüngste Enthüllung über die finanzielle Beteiligung von OpenAI an der Entwicklung des Mathematik-Benchmarks FrontierMath hat in der KI-Community für Aufsehen gesorgt. Diese Unterstützung wurde erst bekannt, als OpenAI mit seinem neuen Modell o3 einen Rekord aufstellte.
Die Nachricht, dass OpenAI die Entwicklung des als unabhängig geltenden Mathematik-Benchmarks FrontierMath finanziert hat, kam für viele überraschend. Diese Information wurde erst am 20. Dezember öffentlich, als OpenAI sein neues Modell o3 vorstellte, das mit 25,2 Prozent gelösten Aufgaben einen neuen Rekord aufstellte. Bisherige Modelle hatten lediglich zwei Prozent erreicht, was die Bedeutung dieses Fortschritts unterstreicht.
Der Benchmark, entwickelt von Epoch AI, testet die mathematisch-logischen Fähigkeiten von KI-Modellen anhand komplexer Aufgaben. Die Tatsache, dass OpenAI an der Finanzierung beteiligt war, wurde erst in einer Fußnote der fünften Aktualisierung des wissenschaftlichen Papiers erwähnt. Diese späte Offenlegung wirft Fragen zur Transparenz auf, insbesondere da die mehr als 60 Mathematiker, die an der Entwicklung beteiligt waren, nicht systematisch über die Finanzierung informiert wurden.
Epoch AI räumte Kommunikationsfehler ein. Tamay Besiroglu von Epoch AI erklärte, dass man sich stärker für Transparenz hätte einsetzen müssen. OpenAI hatte vor der Veröffentlichung des Modells o3 Zugang zu einem Großteil der Aufgaben und Lösungen, jedoch blieb ein separater Datensatz unter Verschluss, um unabhängige Überprüfungen zu ermöglichen.
Eine mündliche Vereinbarung soll verhindern, dass OpenAI das bereitgestellte Material zum Training von Modellen verwendet. Diese Maßnahme soll eine Optimierung speziell für den Benchmark und die weitere Verbreitung der Aufgaben verhindern. Besiroglu betonte, dass man in Zukunft bei Kooperationen von Anfang an auf volle Transparenz bestehen wolle.
Die mangelnde Transparenz stellt nicht zwangsläufig die Qualität und Bedeutung des Benchmarks in Frage. Elliot Glazer, leitender Mathematiker bei Epoch AI, erklärte, dass OpenAI die Ergebnisse korrekt dargestellt habe, jedoch könne Epoch AI dies erst bestätigen, wenn das Modell mithilfe eines in der Entwicklung befindlichen Testdatensatzes unabhängig evaluiert wurde.
Bei einem so bedeutenden Instrument zur KI-Bewertung wäre von Anfang an maximale Offenheit wünschenswert gewesen. KI-Benchmarking ist ein komplexes Gebilde, bei dem die realen Auswirkungen eines Modells anhand von Benchmark-Resultaten schwer zu prognostizieren sind. Die Resultate hängen stark von Messmethoden, Prompts und anderen Modelloptimierungen ab. Gleichzeitig sind Benchmark-Ergebnisse ein Instrument, um Aufsehen zu erzeugen und Investorengelder anzuziehen.
💳 Amazon-Kreditkarte mit 2.000 Euro Limit bestellen!
🔥 Heutige Hot Deals bei Amazon: Bis zu 80% Rabatte!
🎉 Amazon Haul-Store für absolute Schnäppchenjäger!
- ★ 23-stufiges KI-Go-Training – Für Spieler mit Grundkenntnissen der Regeln – Entwickelt als intelligenter Trainingspartner passt sich die KI Spielern von 18K bis 9D an. Ideal für alle, die die Grundregeln bereits beherrschen und ihr Spiel verbessern möchten.
- IHR EMOTIONALER AI-BEGLEITER: Eiliko ist mehr als nur ein Anhänger, es ist ein charismatischer KI-Freund. Mit einem dynamischen LED-Bildschirm, der eine Vielzahl von animierten Gesichtern und Ausdrucksformen anzeigt, reagiert er auf Ihre Interaktionen mit einzigartiger Persönlichkeit und Charme.
- 【MEHR LEBEN FÜR DEINEN SCHREIBTISCH】 Lerne Eilik kennen – deinen kleinen Roboter-Freund mit Persönlichkeit. Mit liebevollen Animationen, ausdrucksstarken Reaktionen und spielerischen Interaktionen bringt Eilik mehr Freude in deinen Alltag. Ob auf dem Schreibtisch, im Büro oder am Nachttisch – Eilik wird schnell zu einem vertrauten Begleiter für besondere Momente.
- 【XL-Größe für gedeihende Pflanzen】Geben Sie Ihren Pflanzen den Raum, den sie verdienen! Unser verbessertes, großes 13,7 cm großes Design bietet Platz für Pflanzen mit einem Durchmesser von bis zu 8,9 cm und damit deutlich mehr Platz für Wurzelwachstum und Pflanzengesundheit im Vergleich zu kleineren, veralteten Modellen. Die Produktabmessungen betragen 13,6 x 13,6 x 13,2 cm und das Gerät wiegt nur 355 g.
- V28 Update - JETZT MIT NEUEN FUNKTIONEN! Als Reaktion auf das Ladeproblem von Loona haben wir das automatische Aufladen 2.0 verbessert. Diese Optimierung hilft Loona, die Ladewege in verschiedenen Szenarien zu erkennen und anzupassen, um die Erfolgsquote beim automatischen Aufladen zu erhöhen. Mobile Hotspots können sich mit Loona verbinden und überwinden WLAN-Einschränkungen, sodass Sie jederzeit und überall mit Loona interagieren können.
- Die besten Bücher rund um KI & Robotik!
- Die besten KI-News kostenlos per eMail erhalten!
- Zur Startseite von IT BOLTWISE® für aktuelle KI-News!
- IT BOLTWISE® kostenlos auf Patreon unterstützen!
- Aktuelle KI-Jobs auf StepStone finden und bewerben!
- Künstliche Intelligenz: Dem Menschen überlegen – wie KI uns rettet und bedroht | Der Neurowissenschaftler, Psychiater und SPIEGEL-Bestsellerautor von »Digitale Demenz«
Du hast einen wertvollen Beitrag oder Kommentar zum Artikel "OpenAI und die geheime Finanzierung eines bedeutenden Mathematik-Benchmarks" für unsere Leser?
#Sophos
#AmazonPrime
#Bestseller
Es werden alle Kommentare moderiert!
Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.
Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.
Du willst nichts verpassen?
Du möchtest über ähnliche News und Beiträge wie "OpenAI und die geheime Finanzierung eines bedeutenden Mathematik-Benchmarks" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.
Nutze die Google-Suchmaschine für eine weitere Themenrecherche: »OpenAI und die geheime Finanzierung eines bedeutenden Mathematik-Benchmarks« bei Google Deutschland suchen, bei Bing oder Google News!