とは何ですか 継続的な学習?

以前のトークンから保存されたキーと値のテンソルにより、トランスフォーマーは過去のアテンションを再計算することなく新しいトークンを生成できます。

トレーニング セットの外にある新しい未確認のデータに対してモデルがどの程度うまく機能するか。

モデルのトレーニング データに反映された最新の時点。

明示的なターゲット出力を持たない、ラベルのないデータからのパターンの学習。

事前の一般知識に頼って、タスク固有の例を使用せずにタスクを解決する。

モデルの一般化を改善するために変更されたトレーニング サンプルを作成する手法。