大規模言語モデルのポイント、このAIはあらゆるものを仮想ベクトル演算できることなのではないか? と思う。たとえば、以下のような狂気のベクトル計算をこなせる。この点が、ものすごい人類進化の可能性を秘めてるように思える。

13
深津 貴之 / THE GUILD @fladdict

THE GUILD。行動・認知・体験のデザイナです。 ネットを知の高速道路として復活させたい。 note.comもお手伝いしています。 書き物 → note.com/fladdict

theguild.jp

深津 貴之 / THE GUILD / note.com @fladdict

まさしく twitter.com/tabbata/status…

2023-03-21 09:11:38
田端@ツイッター成長請負人 @tabbata

ChatGPTでいろいろと遊んでみて確信したこと。 これからは、質問に答えることよりも、良い質問をすることの価値が、ますます上がる。 言い換えると、「問題を解く」ことよりも、「問題を作り出す」ことの価値が上がる。

2023-03-19 11:17:52
田端@ツイッター成長請負人 @tabbata

ChatGPTでいろいろと遊んでみて確信したこと。 これからは、質問に答えることよりも、良い質問をすることの価値が、ますます上がる。 言い換えると、「問題を解く」ことよりも、「問題を作り出す」ことの価値が上がる。

2023-03-19 11:17:52
深津 貴之 / THE GUILD / note.com @fladdict

大規模言語モデルのポイント、このAIはあらゆるものを仮想ベクトル演算できることなのではないか? と思う。 たとえば、以下のような狂気のベクトル計算をこなせる。この点が、ものすごい人類進化の可能性を秘めてるように思える。 pic.twitter.com/ZgB3gyd5iq

2023-03-21 09:34:20
拡大
深津 貴之 / THE GUILD / note.com @fladdict

もう少ししたらnoteにまとめる予定だが… 哲学思考をベクトル演算できるということは、人類はイデアへと、数学計算で到達できるかもしれない。 (続く)

2023-03-21 09:35:56
深津 貴之 / THE GUILD / note.com @fladdict

「あらゆる哲学者が普遍的な善を目指していた場合」。… twitter.com/i/web/status/1…

2023-03-21 09:40:59
深津 貴之 / THE GUILD / note.com @fladdict

ラスボスっぽいのがきたな。 reading… アドビ、新たなジェネレーティブAI「Adobe Firefly」を発表|アドビ株式会社のプレスリリース prtimes.jp/main/html/rd/p…

2023-03-21 23:53:36
深津 貴之 / THE GUILD / note.com @fladdict

MSのBing画像生成… どうみても画像が DALL-E2じゃないな、これ何を使ってるんだ? DALL-E3のプライベート版?

2023-03-22 17:39:35
深津 貴之 / THE GUILD / note.com @fladdict

結局、国内のチャットボットサービスは、どこを応援すればいいんや?

2023-03-22 21:02:28
深津 貴之 / THE GUILD / note.com @fladdict

AIを用いた「普遍的な善やイデアの数学的な演算」というものの仮説が、だいたいできたのだけど、機械学習とか自然言語処理詳しい人、この辺の理解が間違ってないか教えてほしいっす。 GPTとかでまず、「善」や「悪」の行為のサンプルを100万個とか作って(続く)。 pic.twitter.com/oS9JHWhILR

2023-03-23 00:24:58
拡大
深津 貴之 / THE GUILD / note.com @fladdict

並べてやると。MLが十分に学習されているなら、「善」と「悪」は線形分離可能な形で、数千次元の超平面空間に分布するはず。StyleGANの男女の顔の分布みたいに。 pic.twitter.com/PEMFZpGJx5

2023-03-23 00:26:49
拡大
深津 貴之 / THE GUILD / note.com @fladdict

で、このときに「ランダムな善悪ペア」をつながるベクトルをひたすら作成する。(100万データなら50万ペア)… pic.twitter.com/HTgWvQ6n9k

2023-03-23 00:28:04
拡大
深津 貴之 / THE GUILD / note.com @fladdict

その「ランダムな善悪ペア」ベクトルの総和をとって、正規化すると… じゃじゃーん、超次元空間を貫通する「善」の単位ベクトル(近似値)が取得できる!…はず。これは善悪を線形分離する超次元平面に対して、直行するベクトルが抽出できるのだ。俺の算数が間違ってなければ。 pic.twitter.com/nz269nFlEn

2023-03-23 00:30:36
拡大
深津 貴之 / THE GUILD / note.com @fladdict

超次元を貫通する「善」のベクトルが計算できれば、概念Aと概念Bの、どっちがどれくらい善か?とか、悪い行為Cを善のほうこうにひっぱると、どういう行為になるのか?とかが計算可能になる…のではないかと思う。 pic.twitter.com/fzjnRj3PE4

2023-03-23 00:33:42
拡大
深津 貴之 / THE GUILD / note.com @fladdict

厳密にいうと、ある「行為」の善性の定量化ではなくて、ある「言葉」の善性の定量化ではあるんだけど…  まぁ、とにかくWord2Vecで「善」という文字を足すよりも遥かに精度高く、普遍的な善のベクトルが計算できるんじゃないかと思う。

2023-03-23 00:35:17
深津 貴之 / THE GUILD / note.com @fladdict

理屈の上では、StyleGanで「女」→「男」変換スライダーとか、「短髪」→「長髪」変換スライダーを作るのと同じ原理。 いままでは最初の1番目がムリゲー感あったのだけど、LLMのembeddingによって、それが可能となった気がしたのだ。

2023-03-23 00:37:47
深津 貴之 / THE GUILD / note.com @fladdict

@smochi_pub うぃ。なので、まぁ100万個とかでやって、異常値は大数法則の中で埋めるか、上位5%のエッジケースを捨てて計算するとよいんじゃないかともでござんす。

2023-03-23 00:39:02
深津 貴之 / THE GUILD / note.com @fladdict

…と思うのだけど、誰か数学とかMLもっと詳しい人の見解が知りたい。 深夜にハイになって大規模言語モデルばりに、適当なことを喋ってるだけかもしれない。 twitter.com/fladdict/statu…

2023-03-23 00:41:59
深津 貴之 / THE GUILD / note.com @fladdict

@ThePioneerJPnew そすね。厳密には「このAIが普遍的な善と考えるもの」のベクトルが抽出できる・・・かなと。

2023-03-23 00:53:38
深津 貴之 / THE GUILD / note.com @fladdict

少し補足修正。ここでいう普遍的な善は、「このAIが考える普遍的な善」をベクトル化したもの。ただ、まあ普通にロジスティック回帰やって、直行ベクトルとればええんか?という気もする。

2023-03-23 00:55:22
深津 貴之 / THE GUILD / note.com @fladdict

最初はStableDiffusionで顔の表情を変えるベクトルとか作ろうとしてて、いつのまにか、こういう方向に脳がずれてしまった。そして俺の数学力のなさよ。

2023-03-23 00:59:02
深津 貴之 / THE GUILD / note.com @fladdict

@RampageInShade ですね。このLLM内における「普遍的な善」の演算だと思います。

2023-03-23 01:05:14
深津 貴之 / THE GUILD / note.com @fladdict

もうひとつ、AIを用いた「普遍的な善やイデアの数学的な演算」の仮説B。の話も、せっかくだから意見をききたい。 まずこんな風に、ある概念のイデア(少なくとも西洋哲学におけるイデア)が存在すると仮定する。(続く)。 pic.twitter.com/OBjZ8eBmHu

2023-03-23 01:16:13
拡大
1 ・・ 5 次へ