「Self-Attention」を編集中
ナビゲーションに移動
検索に移動
この編集を取り消せます。 下記の差分を確認して、本当に取り消していいか検証してください。よろしければ変更を保存して取り消しを完了してください。
最新版 | 編集中の文章 | ||
6行目: | 6行目: | ||
<source lang="python"> | <source lang="python"> | ||
def self_attention(input, mask=None): | def self_attention(input, mask=None): | ||
− | |||
# Query, Key, Valueの計算 | # Query, Key, Valueの計算 | ||
# まず入力からQuery、Key、Valueを計算します。 | # まず入力からQuery、Key、Valueを計算します。 |