Up "Training" の終了 (切り上げ) 作成: 2025-05-24
更新: 2025-05-24


    "Training" はだんだんと「飽和」に向かう。
    "Training" は「飽和」を見て切り上げられる。──学習の終了。

    技術論では:
      モデルは、"Training" が「loss の改善が見られなくなった」などの early stopping 条件で終了。


    "Training" 終了として,トークンベクトルと重み行列を固定する。
    Transform は,この状態で製品化される。── "Pre-trained Transformer"。


    ChatGPT は,この製品 Transformer を頭脳として搭載した,応答システムである。
    ChatGPT の「応答生成」は,Transformer のポテンシャルになっている「応答生成」の実現である。