[AI 最新情報紹介ブログ] - [蒸留とは]
大きなデータから小さなデータを取り出す ChatGPTは賢いデータを出力するので蒸留しやすい ChatGPTの経路は色々なデータで取得が可能。 様々なLLMが蒸留をやっていると思われる。