もう少し詳しく

基盤モデルは、大量で多様なデータを事前学習し、複数の用途へ適応できる土台となるモデル。 AIシステムでは、入力データの整形、モデルの処理、結果の評価を分けて設計し、一つのモデルを複数用途へ使い回せる一方、適応方法と評価を用途ごとに設計します。 基盤モデル単体の数値だけでなく、利用環境での精度、速度、費用、失敗時の扱いまで確認します。

基盤モデルは、大量で多様なデータを事前学習し、複数の用途へ適応できる土台となるモデル。という特徴を持つ技術用語です。背景には、AIを実際の課題へ適用するために、データを整え、モデルの処理を制御し、結果を検証したいという要請があります。利用時は、一つのモデルを複数用途へ使い回せる一方、適応方法と評価を用途ごとに設計します。入力の分布や権限、更新頻度、遅延、費用も確認し、代表例と失敗例の両方で評価します。

HISTORY

開発された年代と歴史

この用語を大きな流れで見ると、2018年〜現在に発展してきました。

  1. 2018大規模事前学習モデルが多様な下流課題へ転用される。
  2. 2021「foundation model」という整理が広がる。
  3. 2022〜LLM・画像・音声の基盤モデルがサービス化。

キーマン・関わった研究者

Bommasaniらの研究チーム、Transformer研究者、各基盤モデル開発者

技術の変遷

タスク専用モデル → 事前学習モデル → 多用途基盤モデル

理解のポイント

  • 大量で多様なデータを事前学習し、複数の用途へ適応できる土台となるモデル。
  • 一つのモデルを複数用途へ使い回せる一方、適応方法と評価を用途ごとに設計します。
  • 実装では小さな評価セットを用意し、結果と失敗例を記録して改善します。
FOR EXAMPLE

たとえば、こんな場面で

AIアプリの検証データで基盤モデルを使い、目的に合う結果が得られるかを比較してから本番へ適用します。

覚えておきたいこと

基盤モデルを導入するときは、目的、入力データ、評価方法、権限、コストを確認し、重要な結果は人が検証します。