MÜNCHEN (IT BOLTWISE) – Sandisk hat eine neue Speichertechnologie vorgestellt, die das Potenzial hat, die Nutzung von GPUs in der Künstlichen Intelligenz erheblich zu verändern.

Sandisk hat mit der Einführung von High-Bandwidth Flash (HBF) eine bedeutende Weiterentwicklung im Bereich der Speichertechnologie für GPUs angekündigt. Diese neue Technologie könnte die Art und Weise, wie große Sprachmodelle auf GPUs eingesetzt werden, revolutionieren. Im Gegensatz zu herkömmlichem DRAM setzt HBF auf NAND-Flash, der für viele parallele Zugriffe optimiert ist und deutlich höhere Speicherkapazitäten auf gleicher Fläche bietet.
Ein einzelner HBF-Baustein kann bis zu 512 GByte speichern, was 21-mal mehr ist als die aktuelle HBM3e-Generation. Diese Kapazitätserweiterung könnte es ermöglichen, dass große KI-Modelle wie GPT-4, das etwa 3,6 TByte Speicher benötigt, auf einer einzigen GPU laufen. Sandisk plant, HBF als offenen Standard zu etablieren, was anderen Herstellern die Möglichkeit geben würde, diese Technologie ebenfalls zu nutzen.
Die Integration von HBF in GPUs könnte insbesondere bei Lesezugriffen erhebliche Leistungssteigerungen bringen. Sandisk gibt an, dass die Übertragungsrate von HBF mit der von HBM vergleichbar ist, was bedeutet, dass mehrere Terabyte pro Sekunde übertragen werden können. Diese hohe Lesegeschwindigkeit wird durch die Aufteilung jedes NAND-Flash-Chips in zahlreiche Speicherbereiche erreicht, die parallel angesprochen werden.
Ein weiterer Vorteil von HBF ist die Möglichkeit, es mit HBM zu kombinieren. So könnten Hersteller beispielsweise sechs HBF-Bausteine mit zwei HBM-Bausteinen kombinieren, um eine optimale Speicherlösung für KI-Modelle zu schaffen. Diese Kombination könnte insbesondere für den Key-Value-Cache von KI-Modellen von Vorteil sein, der fortlaufend weitergeschrieben wird.
Die Einführung von HBF könnte auch Auswirkungen auf die Kostenstruktur von GPUs haben. Während HBF ähnliche Kosten wie HBM aufweist, könnte die höhere Speicherkapazität pro Baustein zu einer effizienteren Nutzung der Ressourcen führen. Allerdings ist HBF aufgrund der höheren Kosten pro Baustein derzeit nicht für Gaming-Grafikkarten geeignet, da diese von geringeren Zugriffslatenzen profitieren, die bei DRAM besser sind als bei Flash.
Die Entwicklung von HBF soll 2024 mit Vorschlägen wichtiger KI-Player beginnen. Wann die Technologie marktreif wird, ist jedoch noch unklar. Branchenexperten sehen in HBF eine vielversprechende Technologie, die die Nutzung von GPUs in der KI-Entwicklung maßgeblich vorantreiben könnte.

- Die besten Bücher rund um KI & Robotik!
- Die besten KI-News kostenlos per eMail erhalten!
- Zur Startseite von IT BOLTWISE® für aktuelle KI-News!
- IT BOLTWISE® kostenlos auf Patreon unterstützen!
- Aktuelle KI-Jobs auf StepStone finden und bewerben!
Stellenangebote

Disponent - Koordination / Kommunikation / KI (m/w/d)

IT Application Specialist (m/w/d) – ERP & KI-gestützte Prozessintegration

Software Architect AI (all genders)

AI Use Case Lead

- Künstliche Intelligenz: Dem Menschen überlegen – wie KI uns rettet und bedroht | Der Neurowissenschaftler, Psychiater und SPIEGEL-Bestsellerautor von »Digitale Demenz«
Du hast einen wertvollen Beitrag oder Kommentar zum Artikel "Sandisk stellt High-Bandwidth Flash für GPUs vor" für unsere Leser?
Es werden alle Kommentare moderiert!
Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.
Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.
Du willst nichts verpassen?
Du möchtest über ähnliche News und Beiträge wie "Sandisk stellt High-Bandwidth Flash für GPUs vor" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.
Nutze die Google-Suchmaschine für eine weitere Themenrecherche: »Sandisk stellt High-Bandwidth Flash für GPUs vor« bei Google Deutschland suchen, bei Bing oder Google News!