-

KIOXIA單伺服器實現48億高維度向量搜尋資料庫,藉助GPU實現索引建構時間加快7.8倍

憑藉NVIDIA cuVS庫和KIOXIA AiSAQ技術,以極低DRAM用量完成1024維度向量索引

東京--(BUSINESS WIRE)--(美國商業資訊)-- Kioxia Corporation今日宣布,憑藉其開放原始碼的KIOXIA AiSAQ™近似最近鄰搜尋(ANNS)技術,成功示範在單台伺服器上實現48億向量的高維度向量搜尋擴充。此外,Kioxia還展示了透過NVIDIA cuVS利用GPU加速,顯著縮短索引建構時間的成果。這兩項成果代表檢索強化生成(RAG)搜尋解決方案取得了重大進展。目前公司正持續開發,以支援超過48億向量的更大規模部署。

大規模向量資料庫的索引建構時間是產業的核心痛點。Kioxia與NVIDIA合作,示範其在1024維度高維度向量的KIOXIA AiSAQ索引建構時間上最多20倍的改進,以及端對端建構時間上最多7.8倍的改進。這20倍的改進表示,建構索引的時間從使用CPU的28.4天縮短至使用4塊NVIDIA Hopper GPU的1.4天,端對端測試時間從31天縮短至4天。1

如今,AI應用程式可依賴儲存在固態硬碟上的更大規模向量化資訊(可達數百億向量及以上),而僅靠DRAM即便在十億級規模下也已不再適用。Kioxia藉助KIOXIA AiSAQ技術,實現了十億級搜尋的高可擴充儲存架構,在Milvus向量資料庫環境中,使用單台查詢伺服器即可滿足RAG應用程式的延遲要求。其索引建構憑藉GPU加速,讓大規模部署變得切實可行。

NVIDIA儲存技術副總裁Jason Hardy表示:「向量資料庫是那些需要在海量非結構化資料集中即時理解意圖、上下文和相似度的應用程式的核心支撐。透過藉助NVIDIA cuVS庫實現GPU加速索引,Kioxia支援高維度向量資料庫實現擴充,並以前所未見的效率建構索引。」

KIOXIA AiSAQ開放原始碼軟體技術於去年首次發表,透過支援直接從固態硬碟進行向量搜尋並降低DRAM用量,解決了RAG技術的可擴充性挑戰。KIOXIA AiSAQ技術具備高可擴充性,非常適合多租戶環境和大規模單體索引部署。該技術採用創新的全域索引(Global Index)演算法,結合混合式分群和圖搜尋,在超大規模下實現高效向量搜尋。KIOXIA AiSAQ軟體提供靈活的調校選項,可在效能與大規模向量可擴充性之間取得平衡,讓大規模部署更易實現和擴充。

Kioxia Corporation常務執行董事、固態硬碟事業部副總裁Masashi Yokotsuka表示:「將向量資料庫擴充至十億級規模,需要重新思考記憶體和運算方案。透過將以KIOXIA AiSAQ固態硬碟為基礎的向量搜尋與NVIDIA用於索引建構的GPU加速相結合,我們實現了大規模部署下切實可行的索引建構。身為業界創新企業,我們將繼續利用快閃記憶體技術突破AI的邊界。」

Kioxia始終致力於推進由儲存驅動的AI解決方案,以支援大規模智慧資料處理,並持續推動KIOXIA AiSAQ向兆向量級部署邁進。

KIOXIA AiSAQ開放原始碼軟體下載連結:https://github.com/kioxia-jp/aisaq-diskann

註:

1. 本次基準測試共處理了19.66 TB向量資料。效能或基準測試結果可能因主機裝置、讀寫條件、資料大小及其他因素而有所不同。

KIOXIA AiSAQ是KIOXIA的商標。

公司名稱、產品名稱和服務名稱可能第三方公司的商標。

關於 Kioxia

Kioxia是全球記憶體解決方案領域的領軍企業,致力於快閃記憶體和固態硬碟(SSD)的開發、生產和銷售。其前身是Toshiba Memory,於2017年4月從1987年發明了NAND快閃記憶體的公司Toshiba Corporation脫售而出。Kioxia致力於透過提供產品、服務和系統來為客戶創造選擇,並為社會創造以儲存技術為基礎的價值,從而提升世界的「記憶」。Kioxia創新的3D快閃記憶體技術BiCS FLASH™正在塑造儲存技術在高密度應用領域(包括高階智慧型手機、PC、汽車系統、資料中心和生成式AI系統)的未來。

本文件中的資訊(包括產品價格和規格、服務內容和聯絡方式)在公告發表之日是正確的,但如有更改,恕不另行通知。

免責聲明:本公告之原文版本乃官方授權版本。譯文僅供方便瞭解之用,煩請參照原文,原文版本乃唯一具法律效力之版本。

Contacts

媒體查詢:
Kioxia Corporation
推廣管理部
Satoshi Shindo
電話:+81-3-6478-2404

Kioxia Corporation



Contacts

媒體查詢:
Kioxia Corporation
推廣管理部
Satoshi Shindo
電話:+81-3-6478-2404

More News From Kioxia Corporation

Kioxia推出首款採用最新BiCS FLASH™第十代快閃記憶體的PCIe ® 6.0企業級固態硬碟

東京--(BUSINESS WIRE)--(美國商業資訊)-- Kioxia Corporation今日宣布推出KIOXIA CM10系列固態硬碟(SSD),該系列產品搭載公司最新的BiCS FLASH™第十代TLC快閃記憶體。新款固態硬碟專為要求苛刻的企業級和AI工作負載(包括AI推理和上下文快取)而設計,不僅支援NVIDIA CMX™架構,而且相較於上一代產品,在效能、能效和散熱靈活性方面實現了顯著提升(1)。 KIOXIA CM10系列是Kioxia的首款PCIe® 6.0企業級固態硬碟,具備直接冷板液冷能力,可為下一代AI基礎設施提供更高效的散熱部署方案。相較於上一代產品(1),KIOXIA CM10系列的循序讀取效能最高提升約92%,隨機讀取效能最高提升約85%,有助於加快資料密集型AI推理和企業級應用,同時提高系統整體效率。 隨著AI模型規模持續向兆級參數邁進,上下文視窗擴充至數百萬個令牌,市場對高效能上下文快取儲存的需求正迅速成長。NVIDIA CMX™等架構透過利用超高速快閃記憶體儲存,將記憶體層級擴充至GPU記憶體之外,使企業級固態硬碟成為AI基礎設施中日益重要的組成...

Kioxia啟動第九代BiCS FLASH™ 1Tb TLC元件樣品出貨

東京--(BUSINESS WIRE)--(美國商業資訊)-- 全球記憶體解決方案領域的領軍企業Kioxia Corporation今日宣布,已啟動採用第九代BiCS FLASH™ 3D快閃記憶體技術的1Tb三級單元(TLC)記憶元件的樣品出貨1。這些元件專為需要高效能的中低儲存容量應用而設計,例如支援AI的PC和智慧型手機。 Kioxia繼續憑藉其創新的CMOS直接貼合至陣列(CBA)技術2和節距式選取閘極汲極(OPS)技術3來推進雙軸策略。在獨特的雙軸策略指導下,Kioxia正同步推進兩條不同的產品線:一是以相對較低的投資成本實現高效能的第九代解決方案;二是利用先進層堆疊技術實現超高容量和卓越效能的第十代技術。 這款全新的第九代BiCS FLASH™ 1Tb TLC元件以第八代BiCS FLASH™技術和先進CMOS技術為基礎,採用230層堆疊製程開發。其NAND介面速度達到4.8Gb/s,較第八代元件提升33%,效能與第十代元件持平4。 秉持「用『記憶』讓世界更美好」的使命,Kioxia將繼續致力於推動技術創新,強化全球合作夥伴關係,並提供驅動現代AI基礎設施的先進儲存解決方案。...

Kioxia推出全新UFS 5.0內建式快閃記憶體裝置,賦能裝置端AI

東京--(BUSINESS WIRE)--(美國商業資訊)-- 儲存解決方案領域的領導者Kioxia Corporation今日宣布推出UFS(1) 5.0內建式快閃記憶體解決方案,旨在為下一代具備AI功能的行動端和邊緣裝置提供所需的效能、能效和容量。該全新解決方案將于下周在FMS:未來記憶體與儲存展上進行展示,目前提供1 TB和512 GB容量的商業樣品。量產可望於2026年底開始。 Kioxia的這款全新裝置以最新的JEDEC UFS 5.0標準為基礎打造,採用MIPI M-PHY v6.0實體層和UniPro v3.0協議(包括HS-Gear6運行模式),支援每通道高達46.6 Gb/s的理論介面速度,以及約10.8 GB/s的雙通道有效讀寫效能。 隨著AI工作負載不斷向裝置端轉移,儲存效能變得愈發重要。大語言模型、多模態AI、先進影像和即時推理等功能,要求資料在儲存與運算單元之間實現顯著更快的傳輸。在此之前,UFS的讀取效能一直是制約日益複雜的裝置端AI發展的瓶頸,限制了大語言模型及其他AI工作負載存取資料的速度。Kioxia的UFS 5.0有助於消除這些瓶頸,相較於UFS 4...
Back to Newsroom