SHIRITAS

論文 / arXiv:2611.08458

Latent RL Priors for Data-Efficient Dexterous Manipulation

PLAIN SUMMARY / やさしい要約

ロボットに手先の器用な動きを教えるには、カメラ映像から状況を読み取りつつ、細かな力加減も学ぶ必要があり、少ないお手本だけだと難しいことがあります。この研究は、シミュレーションでたくさん試行して身につけた「動かし方のコツ」を、別の形で保存しておき、あとから少ない映像のお手本で使えるようにする枠組みを提案します。保存した部分は固定し、映像から“今どの状況か”を表す内部の手がかりに変換するところだけを学びます。たとえるなら、運転の操作そのものは体に覚えさせておき、初めての道では標識を見て「今どこで何をすべきか」だけを判断できるようにするイメージです。

AIが専門用語を使わずに書いた解説です。内容の正確さは、下の原文の要旨で確認してください。

ABSTRACT / 要旨(原文)

Learning dexterous manipulation from limited visual demonstrations is challenging because policies must acquire both perceptual grounding and precise control, while reinforcement learning (RL) in simulation can acquire rich control behaviors from large-scale interaction with privileged information. We introduce \textbf{Latent RL Prior}, a two-stage framework that reuses this control knowledge for data-efficient visual policy learning. During privileged pretraining, we distill large-scale RL rollouts into a flow-matching action decoder conditioned on proprioception and latent task context. During visual adaptation, we freeze the decoder and learn a visual interface that maps images to its latent context using action supervision alone, without privileged labels or latent targets. The same decoder can further be shared across arms by learning coordinated visual contexts for bimanual manipulation. Across three simulated tasks, our method outperforms full-parameter fine-tuning of $π_{0.5}$ and GR00T N1.7 in the low-data regime; on door lifting and bimanual assembly, it surpasses full-data baselines using $10\times$ and $5\times$ fewer demonstrations, respectively. Further analysis shows that direct visual-to-latent conditioning improves adaptation performance and training stability over routing visual predictions through the pretrained state encoder. Robustness to unseen mass variation and greater linear accessibility of contact-force information in decoder representations further provide evidence of retained RL-acquired control knowledge. Project website: https://yixiaowang7.github.io/latent-rl-prior-page/.

ここに表示しているのは原論文の要旨です。AIによる要約や解釈は含みません。

この論文を取り上げた記事