Sandisk stellt High-Bandwidth Flash für GPUs vor

MÜNCHEN (IT BOLTWISE) – Sandisk hat eine neue Speichertechnologie vorgestellt, die das Potenzial hat, die Nutzung von GPUs in der Künstlichen Intelligenz erheblich zu verändern.

Sandisk hat mit der Einführung von High-Bandwidth Flash (HBF) eine bedeutende Weiterentwicklung im Bereich der Speichertechnologie für GPUs angekündigt. Diese neue Technologie könnte die Art und Weise, wie große Sprachmodelle auf GPUs eingesetzt werden, revolutionieren. Im Gegensatz zu herkömmlichem DRAM setzt HBF auf NAND-Flash, der für viele parallele Zugriffe optimiert ist und deutlich höhere Speicherkapazitäten auf gleicher Fläche bietet.

Ein einzelner HBF-Baustein kann bis zu 512 GByte speichern, was 21-mal mehr ist als die aktuelle HBM3e-Generation. Diese Kapazitätserweiterung könnte es ermöglichen, dass große KI-Modelle wie GPT-4, das etwa 3,6 TByte Speicher benötigt, auf einer einzigen GPU laufen. Sandisk plant, HBF als offenen Standard zu etablieren, was anderen Herstellern die Möglichkeit geben würde, diese Technologie ebenfalls zu nutzen.

Die Integration von HBF in GPUs könnte insbesondere bei Lesezugriffen erhebliche Leistungssteigerungen bringen. Sandisk gibt an, dass die Übertragungsrate von HBF mit der von HBM vergleichbar ist, was bedeutet, dass mehrere Terabyte pro Sekunde übertragen werden können. Diese hohe Lesegeschwindigkeit wird durch die Aufteilung jedes NAND-Flash-Chips in zahlreiche Speicherbereiche erreicht, die parallel angesprochen werden.

Ein weiterer Vorteil von HBF ist die Möglichkeit, es mit HBM zu kombinieren. So könnten Hersteller beispielsweise sechs HBF-Bausteine mit zwei HBM-Bausteinen kombinieren, um eine optimale Speicherlösung für KI-Modelle zu schaffen. Diese Kombination könnte insbesondere für den Key-Value-Cache von KI-Modellen von Vorteil sein, der fortlaufend weitergeschrieben wird.

Die Einführung von HBF könnte auch Auswirkungen auf die Kostenstruktur von GPUs haben. Während HBF ähnliche Kosten wie HBM aufweist, könnte die höhere Speicherkapazität pro Baustein zu einer effizienteren Nutzung der Ressourcen führen. Allerdings ist HBF aufgrund der höheren Kosten pro Baustein derzeit nicht für Gaming-Grafikkarten geeignet, da diese von geringeren Zugriffslatenzen profitieren, die bei DRAM besser sind als bei Flash.

Die Entwicklung von HBF soll 2024 mit Vorschlägen wichtiger KI-Player beginnen. Wann die Technologie marktreif wird, ist jedoch noch unklar. Branchenexperten sehen in HBF eine vielversprechende Technologie, die die Nutzung von GPUs in der KI-Entwicklung maßgeblich vorantreiben könnte.

Bestseller Nr. 1 ᵃ⤻ᶻ «KI Gadgets»

Apple AirTag - Finde und behalte Deine Sachen im Blick: Schlüssel, Geldbörsen, Gepäck, Rucksäcke und mehr. Einfaches Einrichten mit iPhone oder iPad. Austauschbare Batterie

30,99 EUR

Bestseller Nr. 2 ᵃ⤻ᶻ «KI Gadgets»

Mobvoi TicNote KI Digitales Diktiergerät, 64 GB Speicher, Notizrekorder mit Hülle, App-Steuerung, über 100 Sprachen, Transkribieren, Zusammenfassen mit AI Shadow,digitaler Audiorekorder Sprachrekorder

169,99 EUR

Bestseller Nr. 3 ᵃ⤻ᶻ «KI Gadgets»

Plaud Note KI Digitales Diktiergerät mit Hülle - 64 GB Aufnahmegerät mit KI-Technologie zum Transkribieren und Zusammenfassen, One-Touch-Aufnahme, Rauschunterdrückung, Unterstützt 112 Sprachen

169,90 EUR

Bestseller Nr. 4 ᵃ⤻ᶻ «KI Gadgets»

Plaud NotePin Sprachrekorder, KI-Sprachrekorder, App-Steuerung, KI-Notizgerät, KI-Transkription & Zusammenfassung, 112 Sprachen, 64GB Speicher, Audiorekorder für Vorlesungen, Meetings, Kosmisches Grau

169,90 EUR

Bestseller Nr. 5 ᵃ⤻ᶻ «KI Gadgets»

SOXOI KI Digitales Diktiergerät, 64GB Magnet Mini Aufnahmegerä mit ChatGPT 4o vom Transkribieren und Zusammenfassen für 102 Sprachen,One Touch Aufnahme, Voice Recorder Sprachrecorder (Schwarz)

89,99 EUR

Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!