ここから、クリエイティブな言語モデルとはどんなものか?を考える
トランスフォーマーも人間の言語モデルに即した面はあると思う
しかしトランスフォーマーにはランダム性がない
ランダムに広がるクリエイティブな人間の思考は、やはり言語においても拡散モデルがそぐう
ホワイトノイズから拾ったランダムな信号をトランスフォーマーで同時多発的に膨らませていくような経路の思考が、AIにもあれば良いのかもしれない
Permalink |記事への反応(0) | 05:53
ツイートシェア
全ての信号はホワイトノイズの中にある。 そう、白紙だ。 白紙を見つめて想像力を膨らますということは、ホワイトノイズの中から何かランダムなひとつの信号を増幅し、色付ける...
ここから、クリエイティブな言語モデルとはどんなものか?を考える トランスフォーマーも人間の言語モデルに即した面はあると思う しかしトランスフォーマーにはランダム性がない ...
一目見るだけで射精に至るようなピクセルの組み合わせを見つけてくれ