パラメータ (Parameter)

▼ ざっくり言うと

モデルの中身を構成する、調整可能な数字たちのことです。

▼ もうちょっと詳しく

AIモデルの中には、何百億〜何兆個もの数字がぎっしり詰まっています。これがパラメータ。学習中にこれらの数字を少しずつ調整していくことで、モデルは賢くなっていきます。料理に塩を少しずつ加えて味を整えるのを、何十億回もやってる感じです。

モデルを「大きい」「小さい」と言うとき、たいていこのパラメータ数のことを指しています。「70Bモデル」と書いてあったら「パラメータ700億個」ということ。規模感マウントの単位でもあります。

▼ ちょっとだけ深い話

パラメータが多いほど性能が上がる、というのは半分正しくて半分嘘です。同じ性能でも小さいモデルのほうが効率いい、というケースも増えてきました。「でかいから強い」時代から、「賢い設計が強い」時代に移行中です。

家電のリモコンの設定項目もパラメータと呼ばれることがありますが、AIのは桁が違います。

あなたの読了: 0 / 388