LLMのRL後訓練において、Transformerの中間層に恩恵が集中することを明らかにしました。単層訓練で全パラメータ訓練と同等の性能を引き出せます。