もう少し詳しく

SLMは、大規模言語モデルより小さく、端末や限られた計算資源でも動かしやすい言語モデル。 AIシステムでは、入力データの整形、モデルの処理、結果の評価を分けて設計し、動かす場所と許容遅延を先に決めると、SLMの大きさを選びやすくなります。 SLM単体の数値だけでなく、利用環境での精度、速度、費用、失敗時の扱いまで確認します。

SLMは、大規模言語モデルより小さく、端末や限られた計算資源でも動かしやすい言語モデル。という特徴を持つ技術用語です。背景には、AIを実際の課題へ適用するために、データを整え、モデルの処理を制御し、結果を検証したいという要請があります。利用時は、動かす場所と許容遅延を先に決めると、SLMの大きさを選びやすくなります。入力の分布や権限、更新頻度、遅延、費用も確認し、代表例と失敗例の両方で評価します。

HISTORY

開発された年代と歴史

この用語を大きな流れで見ると、2020年代〜現在に発展してきました。

  1. 2010年代末モデル圧縮・蒸留が実用化。
  2. 2023〜小型オープンモデルが端末・企業環境へ普及。
  3. 現在オンデバイスAIとエッジ推論の選択肢になる。

キーマン・関わった研究者

知識蒸留・量子化研究者、各小型言語モデル開発チーム

技術の変遷

大規模化 → 圧縮・蒸留 → 用途特化・端末実行

理解のポイント

  • 大規模言語モデルより小さく、端末や限られた計算資源でも動かしやすい言語モデル。
  • 動かす場所と許容遅延を先に決めると、SLMの大きさを選びやすくなります。
  • 実装では小さな評価セットを用意し、結果と失敗例を記録して改善します。
FOR EXAMPLE

たとえば、こんな場面で

AIアプリの検証データでSLMを使い、目的に合う結果が得られるかを比較してから本番へ適用します。

覚えておきたいこと

SLMを導入するときは、目的、入力データ、評価方法、権限、コストを確認し、重要な結果は人が検証します。