レッジ回帰
過学習を抑えるために、重みに罰則を加える回帰(リッジ回帰)の考え方を手がかりにして、重要そうな点や方向を偏りをもって選ぶ(サンプリングする)方法。ノイズに強く安定させる狙いで使われる。
たとえば: 全員に同じ時間をかけず、テストに出やすい範囲を“守りを固めつつ”重点的に復習する感じ。
AIによる解説です。正確さは、別のAIで照合していますが、誤りが含まれる可能性があります。
この言葉が出てくる記事
- 固定特徴と学習可能表現の「あいだ」を理論で捉える:部分的に学習可能なニューラルネットの相転移
固定ランダム特徴と完全学習の中間にある「部分的に学習可能なネットワーク」について、近似誤差境界と訓練誤差に現れる改善の段階変化を定量化した研究。学習可能割合Pとミスマッチ定数から定まるκ_Pにより、改善の速さと逓減の仕方を表現する。
