by Robert Hryniewicz
この記事は、2024/06/18に公開された「Empowering Enterprise Generative AI with Flexibility: Navigating the Model Landscape」の翻訳です。
生成 AI の世界は急速に進化しており、企業が活用できるモデルは多岐にわたります。これらのモデルは、クローズドソース (プロプライエタリ) とオープンソースの2種類に大きく分けられます。
OpenAIの GPT-4o、Anthropic の Claude 3、または Google の Gemini 1.5 Pro のようなクローズドソースモデルは、民間企業や公的企業によって開発および保守されています。これらのモデルは、その最先端のパフォーマンスと膨大なデータに対する広範なトレーニングで知られています。しかし、カスタマイズやコントロール、コストの面で限界があることが多いのです。
一方、Llama 3 や Mistral のようなオープンソースのモデルは、企業が自由に使用し、変更、展開もすることができます。これらのモデルは、クローズドソースのモデルと比較して、より高い柔軟性や透明性、費用対効果を提供します。
クローズドソースモデルのメリットと課題
クローズドソースモデルは、その優れた機能と使いやすさで人気を博しています。OpenAI の API や Google Cloud AI のようなプラットフォームなら、社内に幅広い専門知識を持つものがいなくても、強力な生成 AIモデルへアクセスできるようになります。これらのモデルは、コンテンツ生成から言語翻訳まで、幅広いタスクに優れています。
しかし、クローズドソースモデルの使用には課題もあります。企業は、モデルのアーキテクチャ、トレーニングデータ、およびアウトプットの制御が制限されてしまいます。このような透明性の欠如は、データのプライバシー、セキュリティ、およびバイアスに関する懸念を引き起こす可能性があります。さらに、クローズドソースモデルを使用する際のコストは、使用量が増加するにつれて急速に上昇することがあり、企業が生成 AIアプリケーションを拡張することを困難にしています。
オープンソースモデルの台頭： カスタマイズ、コントロール、費用対効果
オープンソースモデルは、クローズドソースモデルに代わる魅力的な選択肢として登場し、その利用は増加傾向にあります。GitHub によると、2022年から2023年にかけて、GitHub 上のオープンソース生成 AI プロジェクトの総数は、前年比148%増、個人貢献者は248%増でした。オープンソースモデルを使えば、企業は自社の特定のニーズに合わせてモデルをカスタマイズし、微調整することができます。オープンソースモデルを企業固有のデータでトレーニングすることで、企業は汎用的なクローズドソースモデルを上回る、高度にカスタマイズされた生成 AIアプリケーションを作成することができます。
さらに、オープンソースモデルは、モデルの展開と使用を完全にコントロールすることができます。Andreessen Horowitz (a16z) が収集したデータによると、AI リーダーの60%はオープンソースを活用する主な理由として、コントロールを挙げています。このコントロールにより、企業はデータのプライバシー、セキュリティ、業界規制へのコンプライアンスを確保することができます。また、オープンソースモデルは、クローズドソースモデルと比較して大幅なコスト削減が可能です。
適切な生成 AIモデルを選択するには、特定のユースケース、利用可能なデータ、パフォーマンス要件、および予算を含む様々な要因に影響を受けます。場合によっては、クローズドソースモデルが、その使いやすさと最先端のパフォーマンスにより最適かもしれません。しかし、より高度なカスタマイズや制御、および費用対効果を必要とするビジネスでは、オープンソースモデルが好まれます。
モデルの柔軟性と展開に対する Cloudera のアプローチ
Clouderaは、生成 AIモデルの選択と展開における柔軟性の重要性を理解しています。当社のプラットフォームは、幅広いオープンソースとクローズドソースのモデルをサポートしており、企業は特定のニーズに対する最適なモデルを選択することができます。
図1. Cloudera エンタープライズ生成 AIスタック
オープン性と相互運用性は、完全な生成 AIエコシステムを活用するための鍵である。
Cloudera を利用することで、企業はオープンソースモデルを簡単にトレーニングや微調整し、自社のインフラ上に展開することができます。Cloudera プラットフォームは、モデル開発のためのセキュアで統制された環境を提供し、データサイエンティストとエンジニアが効果的にコラボレーションできるようにします。当社のプラットフォームはまた、TensorFlow や PyTorch などの一般的なオープンソースのライブラリやフレームワークと統合されており、生成 AI の最新の進歩との互換性を保証します。
さらに、クローズドソースモデルの使用を好む企業のために、Cloudera のプラットフォームは、Amazon Bedrock などの主要なパブリッククラウド AI サービスとのシームレスな統合を提供します。この統合により、企業はクローズドソースモデルのパワーを活用しながら、データとインフラストラクチャの制御を維持することができます。
Cloudera がエンタープライズ AI の実現にどのように役立てるかは、当社のウェブサイトをご覧ください。
