多くの組織と同様に、NVIDIA の従業員も生成 AI を迅速に受け入れ、チャットボットとデジタル エージェントを構築・活用し、生産性の向上、タスクの自動化、イノベーションの迅速化を実現しました。 しかし、シャドウ AI を緩和しながら企業全体にデプロイを達成するには、これらの初期のパイロット プロジェクトを、統合された安全かつ高性能なインフラに移行する必要がありました。そのインフラは、成長し続ける AI を活用したワークフローの多様なポートフォリオをサポートできる、いわゆる AI ファクトリーです。統合された AI ファクトリーに数百もの AI ソリューションをデプロイする取り組みとして、IT チームが企業データに接続された高性能な AI インフラをデプロイし、ビジネス運営を変革する方法を紹介しています。
アクセラレーテッド コンピューティングのツールと手法
AI エージェントは、計画、推論、学習、行動を起こすインテリジェントな共同作業者として機能し、ビジネス生産性を再定義しています。 これらのデジタル コワーカーは、個別のタスクを自動化するのではなく、チームがビジネス プロセスをデータ主導型、AI を活用したワークフローに変えるのを支援します。 このビジョンを実現するために、私たちは大規模な AI エージェントを開発、展開、管理するための堅牢で信頼性の高いプラットフォームを構築する AI ファクトリーを構築しました。
当社の AI ファクトリーは、AI エージェントの開発と運用のあらゆる段階を高速化するために構築されました。 これらのデジタル アシスタントは、幅広い複雑なタスクを処理するように設計されており、GPU アーキテクチャを開発するエンジニアを支援するのと同様に、NVIDIA 製品のプロモーションを行う営業・マーケティング チームをシームレスにサポートします。
NVIDIA エンタープライズ リファレンス アーキテクチャと NVIDIA エンタープライズ AI ファクトリーの検証済み設計を基盤とする AI ファクトリーのインフラは、AI エージェントの開発とスケーリングに一貫性のある高性能基盤を提供します。孤立した AI 実験を、イノベーションと成長のためのスケーラブルで信頼性の高いエンジンに変えることで、ビジネスに大きな影響をもたらします。 主な利点として、ライフサイクルのあらゆる段階で AI ワークロードにおけるデプロイまでの時間の短縮、俊敏性の向上、効率性の向上が挙げられます。
NVIDIA の AI ファクトリーは、NVIDIA Blackwell アーキテクチャを採用した NVIDIA-Certified Systems™ で動作します。 これには、NVIDIA Spectrum-X™ ネットワークと NVIDIA-Certified Storage を搭載した NVIDIA HGX™ B200 システムと NVIDIA RTX PRO™ サーバーが含まれます。また、包括的なソフトウェア スタックも活用しており、GPU の管理と最適化のための NVIDIA Run:ai や、生成型およびエージェント型 AI アプリケーションの構築、開発、デプロイのための NVIDIA AI Enterprise が含まれています。
継続的な最適化への取り組みの一環として、NVIDIA の IT 部門は、GenAI-Perf を使用してデプロイされた LLM のスループットと遅延を測定し、改善します。 その過程で、チームは、NVIDIA NIM™ デプロイとシステム プロファイリング向けなど、標準化されたエンドツーエンドのベンチマーク フレームワークを開発しました。 その結果、信頼性の高いパフォーマンス ベースラインが確立され、オンプレミス LLM 向けのスケーラブルなデプロイ パターンが明らかになり、運用規律が強化され、部門横断的な学習が可能になりました。
エージェント型 AI 開発と最適化のために、NVIDIA の AI ファクトリーは、NVIDIA Nemotron™ 推論モデル、NIM と NeMo™ マイクロサービスなど、NVIDIA AI Enterprise ソフトウェアを使用しています。さらに、効率的な GPU 管理のために、NVIDIA GPU Operator と Network Operator が含まれています。
このデータ層は、NVIDIA の社内ナレッジ ベース全体に接続され、11 億件以上のドキュメントを特徴としており、RAG (検索拡張生成) 向けの NVIDIA AI Blueprint のカスタマイズされたバージョンを通じて、AI エージェントによって使用されています。
このデプロイを通じて、NVIDIA の IT 部門は大規模な AI ファクトリーの構築と管理に必要な貴重なインサイトを得ることができました。 チームは、検証済みのリファレンス アーキテクチャ、データセンターの準備のための早期計画、ハードウェアとソフトウェアのリリース間の緊密な連携の重要性を強調しました。 一貫性のあるプラットフォームを使用すると、運用の効率化とセキュリティの維持が可能になり、実験的なセットアップとして始まったものが、安全なエンタープライズ グレードの AI イノベーションを実現する再現性の高いモデルへと進化しました。
NVIDIA は、さまざまなチームが構築した AI エージェントを、パフォーマンスが最適化され、同じセキュリティ、コンプライアンス、プライバシー保護策によって管理される1つのプラットフォームに統合する、体系的かつ段階的なアプローチを追求しています。 私たちのチームは、ハードウェア設計、ソフトウェア エンジニアリング、サプライチェーン最適化などを支える重要なエージェント ワークフローのベンチマークと移行に取り組んでいます。
この移行を継続する中で、私たちはすでに、AI エージェント イニシアチブから大きな企業価値を実現しつつあります。 AI ファクトリーへの早期移行には、いくつかの利点があります。
「NVIDIA の AI ファクトリーは、単なるコンポーネントの集合体ではありません。 企業変革のための新しい基盤です。 そして、私たちはそれを内側から構築しています。
Rama Akkiraju 氏
NVIDIA、AI 担当 IT 部門 VP
数百または数千もの AI エージェントを統合された AI ファクトリーに統合することで、開発とデプロイを効率化します。 NVIDIA の経験とリソースを活用し、安全でコーポレート ガバナンスに準拠したフレームワークで動作する AI エージェントによって、チームを強化できます。