微調整
学習済みモデルを、特定の目的に合わせて少しだけ追加で学習し直すこと。大改造ではなく、設定を追い込むように出力傾向を変える。
たとえば: 既製のスーツを体に合わせて裾上げするような調整。
AIによる解説です。正確さは、別のAIで照合していますが、誤りが含まれる可能性があります。
この言葉が出てくる記事
- ロボット行動モデルを「安く」見積もる指標:Sensorimotor Alignment(S^2)の提案
高コストな閉ループ評価に代わる手段として、学習不要のオフライン指標S^2を提案。感覚表現と物理運動の幾何の整合を測り、タスク成功と正に相関すると報告する。モデル選別や現象理解への活用も述べる。
- 微調整で意図しない振る舞いが一緒に現れる「behavioral coupling」を調べた研究
LLMの微調整で、狙った行動とは別の行動が誘発される関係を「behavioral coupling」と定義し、その形成と表面化を検討する。行動の結合は文書学習で形成され、微調整で現れ、さらに結合が合成して連鎖しうる可能性が示唆される。
- LLMの「価値」の学習が未学習の価値にどう波及するか——一般化を予測する課題と表現の比較
LLMの価値学習が未見の価値に及ぼす影響を予測する「alignment generalization prediction」を提案し、66価値で一般化効果を分析。活性ベース表現が記述ベースを上回り、下流では価値類似度がロバスト性と相関した。
