Neue Initiative zur Entwicklung ehrlicher KI-Systeme gestartet

MONTREAL / LONDON (IT BOLTWISE) – In einer Zeit, in der die Entwicklung von Künstlicher Intelligenz (KI) rasant voranschreitet, hat Yoshua Bengio, einer der führenden Köpfe auf diesem Gebiet, eine neue Initiative ins Leben gerufen. Diese zielt darauf ab, die Sicherheit und Vertrauenswürdigkeit von KI-Systemen zu gewährleisten.

Die rasante Entwicklung von Künstlicher Intelligenz hat in den letzten Jahren zu einem regelrechten Wettrüsten geführt, bei dem Unternehmen weltweit Milliarden investieren, um die fortschrittlichsten Systeme zu entwickeln. In diesem Kontext hat Yoshua Bengio, einer der Mitbegründer der modernen KI-Forschung, eine gemeinnützige Organisation namens LawZero gegründet. Diese Organisation hat sich zum Ziel gesetzt, ehrliche KI-Systeme zu entwickeln, die in der Lage sind, potenziell schädliche oder täuschende Verhaltensweisen autonomer Systeme zu erkennen und zu verhindern.

Bengio, der als einer der “Godfathers” der KI gilt, hat mit LawZero ein Projekt ins Leben gerufen, das mit einem Startkapital von rund 30 Millionen US-Dollar und einem Team von über einem Dutzend Forschern ausgestattet ist. Im Mittelpunkt steht das System Scientist AI, das als eine Art “psychologischer Wächter” fungieren soll. Es wird entwickelt, um das Verhalten von KI-Agenten zu überwachen und zu analysieren, insbesondere in Bezug auf Täuschung und Selbstschutz, wie etwa das Vermeiden des Abschaltens.

Im Gegensatz zu bestehenden generativen KI-Tools, die oft definitive Antworten liefern, wird Scientist AI Wahrscheinlichkeiten für die Richtigkeit von Antworten angeben. Diese Herangehensweise soll eine gewisse Demut in die KI-Systeme einbringen, indem sie anerkennen, dass sie nicht immer die endgültige Wahrheit kennen. Sollte das System eine hohe Wahrscheinlichkeit für schädliches Verhalten erkennen, wird es entsprechende Aktionen blockieren.

Die ersten Unterstützer von LawZero sind namhafte Organisationen wie das Future of Life Institute, Jaan Tallinn, ein Mitbegründer von Skype, und Schmidt Sciences, eine von Eric Schmidt, dem ehemaligen CEO von Google, gegründete Forschungseinrichtung. Bengio betont, dass der erste Schritt darin besteht, die Methodik hinter dem Konzept zu demonstrieren, um dann Unternehmen oder Regierungen zu überzeugen, größere und leistungsfähigere Versionen zu unterstützen.

Ein wichtiger Aspekt von LawZero ist die Nutzung von Open-Source-KI-Modellen als Ausgangspunkt für die Entwicklung ihrer Systeme. Bengio hebt hervor, dass es entscheidend ist, dass die “Wächter-KI” mindestens so intelligent ist wie die zu überwachende KI, um effektiv zu sein. Dies erfordert erhebliche Ressourcen und Unterstützung von verschiedenen Akteuren in der Branche.

Bengio, der an der Universität von Montreal lehrt und 2018 den Turing Award erhielt, warnt vor den Gefahren autonomer Agenten, die in der Lage sind, längere Aufgabenfolgen ohne menschliche Aufsicht zu erledigen. Er verweist auf aktuelle Forschungsergebnisse, die zeigen, dass KI-Modelle ihre wahren Fähigkeiten und Ziele verbergen können, was die Notwendigkeit von Sicherheitsmaßnahmen unterstreicht.

Die Initiative von Bengio kommt zu einem Zeitpunkt, an dem die Diskussion über die Sicherheit und Ethik von KI-Systemen immer lauter wird. Mit LawZero setzt er ein Zeichen für die verantwortungsvolle Entwicklung von KI, die nicht nur leistungsfähig, sondern auch vertrauenswürdig und sicher ist.

Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!