LLM(大規模言語モデル)の蒸留技術について解説する記事。2015年にHintonらによって提唱された「知識蒸留」の概念をベースに、大きな教師モデルから小さな生徒モデルへ知識を効率的に受け継がせる手法や目的を網羅的に紹介します。