Der 30-Tage-Plan: ChatGPT und Künstliche Intelligenz im Alltag erfolgreich nutzen!Angebot abrufen!

LONDON (IT BOLTWISE) – OpenAIs Chief Scientist Jakub Pachocki wirbt dafür, KI-Entwicklung nicht nur zu bremsen, sondern messbar zu begrenzen. Als Grundlage schlägt er „Perplexity“ vor, eine Kennzahl, die beschreibt, wie gut ein Modell den nächsten Token vorhersagt. Der Ansatz soll Benchmarks ersetzen, die mit schnellen Fortschritten rasch veralten. Damit hätten KI-Anbieter eine gemeinsame Referenz, um konkrete Schwellen für Weiterentwicklung festzulegen.

OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits
OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits (Foto: IT BOLTWISE)
🧠 KI & Robotik auf Google News abonnieren

Der Vorschlag von Jakub Pachocki zielt weniger auf eine abstrakte Debatte über „KI-Risiken“ als auf das ungelöste Messproblem dahinter: Wie lässt sich der Tempoeffekt bei KI-Entwicklung überhaupt in ein gemeinsames Regelwerk übersetzen. Denn sobald Organisationen über Grenzen sprechen, entsteht sofort die nächste Frage, nämlich nach einer Einheit, die beide Seiten akzeptieren. Pachocki knüpft an einen breiteren Sicherheitsdiskurs an, der nach Warnungen aus der Forschung deutlich an Fahrt gewonnen hat und in dem auch die Idee auftauchte, KI könne für Gesellschaft und Systeme existenzielle Gefahr darstellen. Für Unternehmen, die an Trainings- und Skalierungsfahrplänen arbeiten, wird damit die Praxisrelevanz zentral: Ohne ein Messsignal bleibt jede „Limit“-Diskussion vage.

Technisch betrachtet führt Pachocki die Debatte über die Wahl der Geschwindigkeit-Metrik. Er argumentiert, dass Benchmarks, die sich stark auf „downstream capabilities“ konzentrieren, schnell an Aussagekraft verlieren, sobald neue Modellgenerationen ähnliche oder bessere Ergebnisse liefern. Ein Test, der heute Fortschritt im Verhalten misst, kann morgen zur Routine werden. Dem stellt er eine eher fundamentale Metrik entgegen: Perplexity. Laut Darstellung misst sie, wie gut ein Modell im Durchschnitt den nächsten Token vorhersagt; eine niedrigere Perplexity steht damit für bessere Vorhersagen. Genau an diesem Punkt wird der Vorschlag interessant für KI-Teams, weil Perplexity direkt aus dem Trainings- und Evaluationsprozess ableitbar ist und nicht zwangsläufig an einzelne Nutzeraufgaben gekoppelt bleibt.

In seinem Beitrag bringt Pachocki auch eine konkrete Entwicklungslinie ins Spiel: Er zeigt eine Grafik, nach der die Perplexity von OpenAIs Modellen seit GPT 3.5 gesunken ist. Die Größenordnung, die er nennt, lautet: GPT-4 liege bei etwa 0,91. Außerdem beschreibt er, dass das Modell bei Werten unter 0,8 an „transformative capabilities“ anschließt, etwa in Bereichen wie Cybersicherheit und Mathematik. Für die Interpretation dieser Aussage ist entscheidend, was die Kennzahl eigentlich abbildet: Perplexity ist ein probabilistisches Gütemaß für die nächste Token-Vorhersage. Sie ist damit nicht identisch mit „Agentenfähigkeit“ oder „Robustheit gegen Missbrauch“, aber sie kann als Frühindikator fungieren, weil Sprachemodell-Verbesserungen oft mit weiteren Leistungssteigerungen in vielen Aufgabenbereichen zusammenhängen. Gerade deshalb kann eine gemeinsame Metrik für Anbieter-übergreifende Absprachen attraktiver sein als wechselnde Task-Set-Benchmarks.

Der eigentliche Governance-Teil des Vorschlags lautet, dass Perplexity als geteiltes Benchmark für „general intelligence“ dienen könnte. Unternehmen würden sich demnach auf gemeinsame Grenzen verständigen und den Schritt „über einen bestimmten Schwellenwert“ hinaus erst dann gehen, wenn eine konkrete Errungenschaft bei Verständnis und Monitoring von KI-Verhalten erreicht wurde. Das ist wichtig, weil es die Logik umkehrt: Statt nur nachträglich zu reagieren, soll die Geschwindigkeit der Entwicklung an einen messbaren Status gekoppelt werden. Gleichzeitig verschiebt sich damit der Fokus in Richtung Mess- und Beobachtungsfähigkeit: „Monitoring“ wird zu einem technischen und organisatorischen Arbeitspaket, das nachweisbar vorliegen muss, bevor Skalierung weitergeht. Für die Praxis bedeutet das, dass auch die Evaluationspipelines, Messmethoden und statistischen Stabilitätschecks in den Vordergrund rücken, weil ohne belastbare Messung jede Grenze sofort angreifbar wird.

Marktseitig lässt sich der Vorschlag als Anschluss an eine bereits formulierte „Safety-first“-Richtung lesen, die in der Branche zuletzt stärker sichtbar wurde. In dem Umfeld standen etwa Forderungen nach „common safety standards“ sowie nach Grenzen für ungeprüfte Fortschritte. Pachockis Punkt ist dabei weniger politisch als operational: Eine Organisation kann nur dann an einen Konsens gebunden werden, wenn die Messgröße über Modelle und Anbieter hinweg vergleichbar bleibt. Genau deshalb versucht er, eine metrische Basis zu liefern, die nicht schon durch die nächste Generation von Benchmarks wieder entwertet wird. Für Rivalen und Regulierungsnahe Stakeholder ist das ein realistischer Hebel, weil es Absprachen von „Was können Modelle?“ hin zu „Wie schnell verbessern sich Fundamentalmesswerte?“ verschiebt.

Für Unternehmen, die KI entwickeln oder in Produkte integrieren, ergibt sich daraus eine Reihe von Konsequenzen. Erstens werden Perplexity-ähnliche Kennzahlen nicht nur zu Trainingszielwerten, sondern potenziell zu Vertrags- und Policy-Größen, die in Roadmaps eingeplant werden müssen. Zweitens steigt die Relevanz von Evaluationsdesign: Wenn eine Kennzahl als „Speed Limit“-Anker dienen soll, muss klar sein, unter welchen Bedingungen sie gemessen wird, welche Datensätze einfließen, wie stark Regularisierung und Tokenisierung wirken und wie man Messrauschen gegenüber echten Fortschritten abgrenzt. Drittens wird auch das Zusammenspiel aus Modellentwicklung und Interpretierbarkeit wichtiger, weil das „Milestone“-Prinzip – also erst weiter, wenn Monitoring und Verständnis ein messbares Niveau erreicht – ohne technische Nachweise nicht funktionieren dürfte. Unterm Strich ist Pachockis Ansatz damit weniger eine fertige Lösung als ein Versuch, das Nadelöhr der KI-Governance zu identifizieren: Wie bringt man Geschwindigkeit in KI in eine gemeinsame, prüfbare Form.

💳 Amazon-Kreditkarte mit 2.000 Euro Limit bestellen!
🔥 Heutige Hot Deals bei Amazon: Bis zu 80% Rabatte!
🎉 Amazon Haul-Store für absolute Schnäppchenjäger!


Sense Robot Go KI-Go-Brett mit Roboterarm – Automatische Steinplatzierung, interaktives Lernen, Spielwiederholung – Intelligenter Weiqi-Trainer für Kinder & Erwachsene
152 Bewertungen
Sense Robot Go KI-Go-Brett mit Roboterarm – Automatische Steinplatzierung, interaktives Lernen, Spielwiederholung – Intelligenter Weiqi-Trainer für Kinder & Erwachsene
  • ★ 23-stufiges KI-Go-Training – Für Spieler mit Grundkenntnissen der Regeln – Entwickelt als intelligenter Trainingspartner passt sich die KI Spielern von 18K bis 9D an. Ideal für alle, die die Grundregeln bereits beherrschen und ihr Spiel verbessern möchten.
ENERGIZE LAB Eiliko Coral Pink - Ihr winziger KI-Charm-Roboter, der zu jedem täglichen Outfit passt, lustiges elektronisches Anhängerspielzeug, für Paare und beste Freunde
334 Bewertungen
ENERGIZE LAB Eiliko Coral Pink - Ihr winziger KI-Charm-Roboter, der zu jedem täglichen Outfit passt, lustiges elektronisches Anhängerspielzeug, für Paare und beste Freunde
  • IHR EMOTIONALER AI-BEGLEITER: Eiliko ist mehr als nur ein Anhänger, es ist ein charismatischer KI-Freund. Mit einem dynamischen LED-Bildschirm, der eine Vielzahl von animierten Gesichtern und Ausdrucksformen anzeigt, reagiert er auf Ihre Interaktionen mit einzigartiger Persönlichkeit und Charme.
Eilik – Interaktiver Desktop Roboter mit Persönlichkeit, lebendigen Animationen & Reaktionen, Touch-Steuerung, Mini-Spiele, emotionaler Roboter Freund und besonderes Geschenk für Kinder & Erwachsene
1.501 Bewertungen
Eilik – Interaktiver Desktop Roboter mit Persönlichkeit, lebendigen Animationen & Reaktionen, Touch-Steuerung, Mini-Spiele, emotionaler Roboter Freund und besonderes Geschenk für Kinder & Erwachsene
  • 【MEHR LEBEN FÜR DEINEN SCHREIBTISCH】 Lerne Eilik kennen – deinen kleinen Roboter-Freund mit Persönlichkeit. Mit liebevollen Animationen, ausdrucksstarken Reaktionen und spielerischen Interaktionen bringt Eilik mehr Freude in deinen Alltag. Ob auf dem Schreibtisch, im Büro oder am Nachttisch – Eilik wird schnell zu einem vertrauten Begleiter für besondere Momente.
Plantbot Upgraded Large Smart Flower Pot Pet Planter Robot with Artificial Intelligence, Time Temperature Display, and Numerous Expressive Animations Based, for Indoor Decoration, Gifts (White)
53 Bewertungen
Plantbot Upgraded Large Smart Flower Pot Pet Planter Robot with Artificial Intelligence, Time Temperature Display, and Numerous Expressive Animations Based, for Indoor Decoration, Gifts (White)
  • 【XL-Größe für gedeihende Pflanzen】Geben Sie Ihren Pflanzen den Raum, den sie verdienen! Unser verbessertes, großes 13,7 cm großes Design bietet Platz für Pflanzen mit einem Durchmesser von bis zu 8,9 cm und damit deutlich mehr Platz für Wurzelwachstum und Pflanzengesundheit im Vergleich zu kleineren, veralteten Modellen. Die Produktabmessungen betragen 13,6 x 13,6 x 13,2 cm und das Gerät wiegt nur 355 g.
Loona KEYI Premium Haustier-Roboter mit Ladestation (Smarte AI ChatGPT-4o, Stimmen- & Gestensteuerung, Echtzeit-Interaktion, Heimüberwachung)
946 Bewertungen
Loona KEYI Premium Haustier-Roboter mit Ladestation (Smarte AI ChatGPT-4o, Stimmen- & Gestensteuerung, Echtzeit-Interaktion, Heimüberwachung)
  • V28 Update - JETZT MIT NEUEN FUNKTIONEN! Als Reaktion auf das Ladeproblem von Loona haben wir das automatische Aufladen 2.0 verbessert. Diese Optimierung hilft Loona, die Ladewege in verschiedenen Szenarien zu erkennen und anzupassen, um die Erfolgsquote beim automatischen Aufladen zu erhöhen. Mobile Hotspots können sich mit Loona verbinden und überwinden WLAN-Einschränkungen, sodass Sie jederzeit und überall mit Loona interagieren können.

Hat Ihnen der Artikel bzw. die News - OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits - gefallen? Dann abonnieren Sie uns doch auf Insta: AI News, Tech Trends & Robotics - Instagram - Boltwise

Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!





Folgen Sie aktuellen Beiträge über KI & Robotik auf Twitter, Telegram, Facebook oder LinkedIn!
Hinweis: Teile dieses Textes könnten mithilfe Künstlicher Intelligenz generiert worden sein. Die auf dieser Website bereitgestellten Informationen stellen keine Finanzberatung dar und sind nicht als solche gedacht. Die Informationen sind allgemeiner Natur und dienen nur zu Informationszwecken. Wenn Sie Finanzberatung für Ihre individuelle Situation benötigen, sollten Sie den Rat von einem qualifizierten Finanzberater einholen. IT BOLTWISE® schließt jegliche Regressansprüche aus.









Ergänzungen und Infos bitte an die Redaktion per eMail an de-info[at]it-boltwise.de. Da wir bei KI-erzeugten News und Inhalten selten auftretende KI-Halluzinationen nicht ausschließen können, bitten wir Sie bei Falschangaben und Fehlinformationen uns via eMail zu kontaktieren und zu informieren. Bitte vergessen Sie nicht in der eMail die Artikel-Headline zu nennen: "OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits".
Stichwörter AI Artificial Intelligence Benchmark General_intelligence Jacub_pachocki KI KI-Sicherheit Künstliche Intelligenz Model_evaluation Modelltraining Monitoring OpenAI Perplexity
Kein nächster Artikel
Vorheriger Artikel

KI-gestützte Freundschafts-Apps: So verbinden sich Communities jetzt lokal


Du hast einen wertvollen Beitrag oder Kommentar zum Artikel "OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits" für unsere Leser?

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert

  • Die aktuellen intelligenten Ringe, intelligenten Brillen, intelligenten Uhren oder KI-Smartphones auf Amazon entdecken! (Sponsored)


  • Es werden alle Kommentare moderiert!

    Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.

    Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.

    Du willst nichts verpassen?

    Du möchtest über ähnliche News und Beiträge wie "OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.
    Nutze die Google-Suchmaschine für eine weitere Themenrecherche: »OpenAIs Jakub Pachocki: Perplexity als Messgröße für KI-Limits« bei Google Deutschland suchen, bei Bing oder Google News!


    347 Leser gerade online auf IT BOLTWISE
    KI-Schutz gegen Hacker #Sophos
    Filme über KI #AmazonPrime
    Das ChatGPT-Handbuch #Bestseller
    KI-Jobs