Learning Transformer

教育

免費 · App 內購買 · 專為 iPad 設計。尚未針對 macOS 驗證。

A Transformer, built by hand and shown one step at a time. Twenty-three screens follow "Attention Is All You Need" (Vaswani et al., 2017) in the paper's own order: a word becoming numbers, the three vectors, the scores, the softmax, four heads merged into one, the mask, the second attention, and the loop that writes one word at a time. What this is not: a trained model. Every weight here was set by hand, so that each one can be read in a single line. Nine numbers stand for a word instead of 512. One encoder layer and one decoder layer instead of six of each. Four heads, four words of vocabulary, one short sentence. What it is: the paper's arithmetic at a size you can check by hand. Every number on every screen is computed while you look at it — no videos, no quizzes, no account, no network. Steps 1 to 10 are free. Steps 11 to 23 are one purchase, made once and kept.

  • 此App未收到足夠的評分或評論以顯示概況。

開發者Sungjun Kim表明App的私隱慣例或包括下列資料的處理。詳情請參閲 開發者的私隱政策 。

  • 不收集資料

    開發者不會從此 App 收集任何資料。

    私隱慣例或因使用的功能或年齡等因素而異。 進一步了解

    開發者尚未表示此 App 支援哪些輔助使用功能。 進一步了解

    供應商
    Sungjun Kim
    大小
    769 KB
    類別
    教育
    相容性
    須使用 iOS 17.0 或以上版本。
    • iPhone
      須使用 iOS 17.0 或以上版本。
    • iPad
      須使用 iPadOS 17.0 或以上版本。
    • Mac
      須使用 macOS 14.0 或以上版本及配備 Apple M1 或以上版本晶片的 Mac。
    語言
    英文
    年齡分級
    4+
    App 內購買
    是
    版權
    © Sungjun Kim