とは何ですか 蒸留?

より大きなモデルの出力を模倣するためにより小さなモデルをトレーニングします。

モデルが事前の知識を忘れることなく新しいデータから学習し続けることができるトレーニング アプローチ。

外部の知識を取得し、それを推論時の生成にフィードする方法。

クエリの知識源から関連する文書または記録を検索します。

データがどこから来たのか、どのように変換されたのか、どこで使用されたのかの記録。

統計ノイズを追加して、出力から個々のレコードを確実に推測できないようにするプライバシー技術。