ガウス摂動
値に対して、正規分布(ガウス分布)に従うランダムな小さな揺らぎを加えること。わずかな変更を多数試すために使われる。
たとえば: 目分量で塩をひとつまみずつ微妙に変えて味を確かめるようなもの。
AIによる解説です。正確さは、別のAIで照合していますが、誤りが含まれる可能性があります。
この言葉が出てくる記事
- 重み摂動なしでNeural Thicketsの利得は得られるのか:Logit PSVという見方
Neural Thicketsの性能向上を、重み空間の幾何学的説明に頼らず捉え直す研究。凍結モデルに対するlogitsへのランダムbiasと、選抜・集約からなるPSVを提示し、言語・視覚での有効性を論じる。
