問題番号: No.101 (しっかりモード)

自動運転の車載システムやスマートフォンなど、計算資源（CPUやメモリ）が極めて限定された環境で、最新の巨大なAIモデル（教師モデル）と同等の高精度な推論を行わせたい。教師モデルが出力する「各クラスへの確率分布（ソフトターゲット）」を、サイズが遥かに小さく軽量な「生徒モデル」に学習用の目標として与えることで、精度を維持したままコンパクトなモデルを育てる技術はどれか。