-

キオクシア:生成AIの回答精度向上に貢献する、SSDを活用したソフトウェア技術「KIOXIA AiSAQTM」をオープンソースとして公開

外部データを活用して推論を強化するRAG技術を構成する新たなベクトル探索ソフトウェアを開発

東京--(BUSINESS WIRE)--(ビジネスワイヤ) -- キオクシア株式会社(以下、キオクシア)は、生成AIの回答精度およびデータベースの拡張性向上に貢献する、RAG(Retrieval Augmented Generation) においてSSDを活用したソフトウェア技術「KIOXIA AiSAQTM(キオクシア アイザック)」を開発し、オープンソースとして公開を開始しました[注1]

「KIOXIA AiSAQ (All-in-Storage ANNS with Product Quantization)」は、RAG(Retrieval Augmented Generation)におけるベクトル探索処理を行うためのANNS(Approximate Nearest Neighbor Search:近似最近傍探索)の検索アルゴリズムを最適化するソフトウェアです。ベクトル探索を効率化するためにインデックス化されたデータは通常DRAM上に配置されますが、「KIOXIA AiSAQ」ではインデックス化されたデータをSSDに配置するため、DRAMの容量を気にせず、生成AIの回答精度および大規模データセット需要に対応する拡張性を高めます。

生成AIは、さまざまな業界において革新的なブレークスルーをもたらす可能性がある一方で、膨大な演算、メモリ、ストレージなどのリソースを必要とし、高額な導入費用が必要となる場合があります。RAGは、学習済みのLLM (Large Language Model) に対して外部データを用いて、生成AIの回答精度を向上させる重要な技術です。学習データとして組織から外に持ち出すことができない企業の機密情報や、まだ学習されていない最新の情報などに対し、LLM自身に学習させるのではなく、推論時にそれらの外部データを参照した上で結果を生成します。

「KIOXIA AiSAQ」の特長:

  • サーバーのDRAM容量に依存せずに大規模なデータベースを検索できるため、RAGシステムの回答精度向上に貢献。
  • 同一サーバーで複数のユーザーや用途別の複数データベースを使用する場合、インデックスデータを都度DRAMに読み込む必要がなく、直接SSDにアクセスしてシームレスに切り替えることが可能になり、効率的なRAGサービスを提供。
  • クラウドシステムで一般的なディスアグリゲーテッドストレージにベクトルデータを配置し、複数のサーバーでデータを共有する構成とすることが可能。これにより、特定のユーザーや用途向けのベクトルデータベースの検索能力を増強し、瞬時かつ動的に変更することが可能。

キオクシアは、生成AIの回答精度向上に貢献する、SSDを活用したソフトウェア技術「KIOXIA AiSAQ」をオープンソースとして公開することにより、生成AIのさらなる発展に貢献していきます。

[注1]「KIOXIA AiSAQ」のオープンソースとしての公開先:
https://github.com/kioxiaamerica/aisaq-diskann

*記載されている社名・商品名・サービス名は、それぞれ各社が商標として使用している場合があります。
*本資料に掲載されている情報(製品の価格/仕様、サービスの内容およびお問い合わせ先など)は、発表日現在の情報です。予告なしに変更されることがありますので、あらかじめご了承ください。

Contacts

報道関係の本資料に関するお問い合わせ先:
キオクシア株式会社
営業企画部
進藤智士/高畑浩二
Tel: 03-6478-2404

Kioxia Corporation


Release Summary
.

Contacts

報道関係の本資料に関するお問い合わせ先:
キオクシア株式会社
営業企画部
進藤智士/高畑浩二
Tel: 03-6478-2404

More News From Kioxia Corporation

キオクシア:単一サーバー上で48億個の高次元ベクトル検索データベースを実現し、GPU活用によりインデックス構築時間を7.8倍高速化

東京--(BUSINESS WIRE)--(ビジネスワイヤ) -- キオクシア株式会社(以下、キオクシア)は、オープンソースとして公開しているSSDを活用した生成AI用ベクトル探索ソフトウェア「KIOXIA AiSAQ™(キオクシア アイザック)」近似最近傍検索(ANNS)技術を使用して、一つのサーバーで48億個のベクトルの高次元ベクトル検索を実現しました。この実証実験では、NVIDIA cuVSを通じてGPUアクセラレーションを活用することで、インデックス構築時間の大幅な短縮も実証しました。この二つの成果は、検索拡張生成(RAG)ソリューションにおける重要な進展であり、48億ベクトルを超える大規模展開のサポートに向けて、キオクシアはさらなる開発を進めています。 大規模ベクトルデータベースにおけるインデックス構築時間は、AI業界にとって重要な課題となっています。キオクシアはNVIDIAとのコラボレーションにより、1024次元の高次元ベクトルにおけるKIOXIA AiSAQを使ったインデックス構築時間を最大20倍、エンドツーエンド構築時間を最大7.8倍高速化することに成功しました。この...

キオクシア:AI・GPU 主導のワークロードに最適化した新しいSSDモデルを発表

東京--(BUSINESS WIRE)--(ビジネスワイヤ) -- キオクシア株式会社は、AI システム向けの新しいタイプのSSD、Super High IOPS SSDの開発を発表しました。Super High IOPS SSD「KIOXIA GPシリーズ」は、AIや高性能コンピューティングにおいて高まる性能要求に対応するために設計されており、GPUの利用可能なメモリ容量を拡大し、AI ワークロードのための高速なデータアクセスを実現します。GPUが高速フラッシュメモリに直接アクセスすることで、広帯域幅メモリ(High Bandwidth Memory:HBM)を補完し、メモリ容量を拡張することが可能です。KIOXIA GPシリーズの評価用サンプルは、2026年末までに限定顧客向けに提供を開始する予定です。 NVIDIA Storage-Nextイニシアチブは、計算集約型からデータ集約型ワークロードへの移行および、現在はHBMの容量により制約となっている、GPUがアクセス可能なメモリ領域を拡大することへのニーズに対応する取り組みです。GPU が利用できるメモリ領域を拡張することにより...

キオクシア:次世代モバイル機器向けUFS 5.0対応組み込み式フラッシュメモリ製品のサンプル出荷について

東京--(BUSINESS WIRE)--(ビジネスワイヤ) -- キオクシア株式会社は、JEDECで規格策定中の次世代UFS規格UFS 5.0に対応する 組み込み式フラッシュメモリ(UFS 5.0製品)の評価用サンプル[注1] の出荷を本日から開始します。[注2] UFS 5.0は オンデバイスAI機能を持つハイエンド・スマートフォンなど次世代モバイル機器で要求される性能を満たすためJEDECで策定中の新規組み込み式フラッシュストレージの標準規格で、物理層にMIPI M-PHY version 6.0、プロトコルに UniPro version 3.0を採用しています。M-PHY version 6.0 では新たにHS-GEAR6モードが導入され、理論上最大1 laneあたり 46.6 Gbpsのインターフェーススピードをサポート、2 laneのUFS 5.0では約10.8 GB/sの実効読み書き性能が実現可能です。 評価用サンプルは 当社がUFS 5.0向けに 新規開発した コントローラーと第8世代 BiCS FLASH™を搭載し、512 GB、1 TBの容量をラインアップします...
Back to Newsroom