Alibaba Zerosearch: Kosteneffizientes KI-Training revolutioniert Suchmaschinenentwicklung

HANGZHOU / LONDON (IT BOLTWISE) – Alibaba hat mit Zerosearch eine innovative Methode entwickelt, die das Training von KI-Suchfunktionen revolutioniert, indem sie die Kosten drastisch senkt und gleichzeitig die Effizienz steigert.

Die Entwicklung von Künstlicher Intelligenz (KI) für Suchmaschinen ist eine komplexe und kostenintensive Aufgabe. Traditionelle Reinforcement-Learning-Methoden erfordern Millionen von Suchanfragen, was nicht nur teuer ist, sondern auch zu inkonsistenten Ergebnissen führen kann. Alibaba hat mit Zerosearch eine Lösung vorgestellt, die diese Herausforderungen adressiert, indem sie simulationsbasierte Verfahren einsetzt, um teure API-Abfragen zu ersetzen.

Das von Alibaba Cloud entwickelte Verfahren besteht aus zwei wesentlichen Schritten. Zunächst wird ein Sprachmodell durch überwachte Feinabstimmung zu einem retrieval-fähigen System weiterentwickelt. Dieses System kann auf Anfragen hin relevante Dokumente generieren und simuliert damit das Verhalten echter Suchmaschinen. In der folgenden Reinforcement-Learning-Phase wird der Schwierigkeitsgrad durch ein curriculum-basiertes Rollout-Konzept schrittweise erhöht, was das Modell dazu zwingt, seine Relevanzbewertung kontinuierlich zu verbessern.

Die Ergebnisse dieser Methode sind beeindruckend. Ein mit Zerosearch trainiertes Qwen2.5-7B-Modell erreichte eine Retrieval-Leistung, die mit der von Google Search vergleichbar ist. Die größere 14B-Version übertraf diese Leistung sogar, und das bei 88 Prozent geringeren Trainingskosten. Diese Effizienzsteigerung ermöglicht es insbesondere kleinen und mittelständischen Unternehmen, eigene Reinforcement-Learning-Frameworks zu entwickeln, ohne auf teure externe Suchmaschinenabfragen angewiesen zu sein.

Huang Fei, Leiter des Tongyi Natural Language Processing Lab bei Alibaba, betont, dass Zerosearch die Kosten für das Training großer Sprachmodelle drastisch senkt. Dies eröffnet neue Möglichkeiten für Entwickler und Unternehmen, die bisher durch die hohen Kosten des KI-Trainings eingeschränkt waren. Die simulationsbasierte Methode bietet nicht nur Kostenvorteile, sondern auch eine verbesserte Skalierbarkeit und Effizienz.

Im Vergleich zu traditionellen Methoden bietet Zerosearch eine innovative Herangehensweise, die das Potenzial hat, die Entwicklung von KI-Suchfunktionen grundlegend zu verändern. Die Fähigkeit, qualitativ hochwertige Suchergebnisse zu generieren, ohne auf teure und ressourcenintensive Prozesse angewiesen zu sein, stellt einen bedeutenden Fortschritt in der KI-Entwicklung dar.

Die Auswirkungen dieser Technologie könnten weitreichend sein. Durch die Reduzierung der Kosten und die Verbesserung der Effizienz könnten mehr Unternehmen in der Lage sein, fortschrittliche KI-Technologien zu implementieren, was zu einer breiteren Akzeptanz und Nutzung von KI in verschiedenen Branchen führen könnte. Dies könnte letztlich die Art und Weise, wie Informationen gesucht und verarbeitet werden, revolutionieren.

Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!