無料のAIライブラリ

AIを学びましょう。永久無料。

1019 平易な英語のガイド、構造化された学習パス、オープン ライブラリ - 独立した 501(c)(3) 非営利団体によって構築され、誰でも最新の AI を理解できるようになります。

1019無料ガイド
9トピックトラック
~2 minガイドごと
~34h読書時間

ここから始めましょう

5 成果ベースのコース

各コースには、明示的な成果、マッピングされたコンピテンシー、練習アクティビティ、および適用されたキャップストーンが含まれています。

トピックトラック

トラックごとに閲覧する

気になるエリアに飛び込んでみましょう。すべてのトラックには複数のわかりやすい英語のガイドが付いています。

フルライブラリ

すべてのガイド

1019 1019 ガイドが表示されます。トラックでフィルタリングするか、上で検索してください。

技術的な

線形プロービングとフリーズ特徴評価

線形プローブでは、ネットワークをフリーズし、その上で単純な線形分類器のみをトレーニングすることで、事前トレーニングされたモデルの内部表現がどの程度優れているかをテストします。

2 最小読み取り読む
言語AI

投機的サンプリングの検証

投機的サンプリングは、小さな「ドラフト」モデルに先のいくつかのトークンを推測させ、その後大きなモデルで検証させることで、大規模な言語モデルの生成を高速化します。

2 最小読み取り読む
言語AI

エントロピーベースのサンプリング

エントロピー ベースのサンプリングでは、その時点でのモデルの不確実性に基づいて、LLM が次のトークンを選択する方法が適応されます。

2 最小読み取り読む
技術的な

DenseNet と高密度接続

DenseNet は、すべての層が先行するすべての層の特徴マップを入力として受け取る畳み込みネットワークです。

2 最小読み取り読む
技術的な

ボトルネックアーキテクチャ

ボトルネック アーキテクチャは、データを狭い中間層に押し込んでから再度拡張するため、ネットワークはコンパクトで効率的な学習を強いられます。

2 最小読み取り読む
技術的な

勾配の累積

勾配累積を使用すると、更新前にいくつかの小さなミニバッチにわたる勾配を合計することで、限られた GPU メモリ上で大きなバッチ サイズをシミュレートできます。

2 最小読み取り読む
基本

早期停止

早期停止は、保持された検証データのパフォーマンスが向上しなくなった瞬間にモデルのトレーニングを停止する正則化手法です。

2 最小読み取り読む
技術的な

シーケンスモデルにおける教師の強制

教師強制は、モデル自身の推測ではなく、前の真のトークンが次の入力として供給されるシーケンス モデルのトレーニング トリックです。

2 最小読み取り読む
技術的な

スケジュールされたサンプリングと露出バイアス

露出バイアスは、完全なプレフィックスのみでトレーニングされたモデルが、推論上、それ自体の不完全な出力を条件付けする必要がある場合に生じるギャップです。

2 最小読み取り読む
技術的な

アンバランス検出のための焦点損失

焦点損失は、検出器が困難でまれな例に焦点を合わせられるように、簡単な例の重みを下げる修正された損失関数です。

2 最小読み取り読む
基本

勢いのある確率的勾配降下法

モメンタムは、過去の勾配の移動平均を蓄積する勾配降下法への微調整であり、最適化が谷間をより速く進み、減衰します。

2 最小読み取り読む
基本

ネステロフ加速勾配

Nesterov Accelerated Gradient (NAG) は、勾配を計算する前に前方を覗いて修正的な先読みを行う、よりスマートな形式の運動量です。

2 最小読み取り読む

読み終わりましたか?証明してみろ。

Check what you learned with a topic quiz, then explore our structured courses or work toward a certificate. Every guide stays free to read.