2019年6月11日火曜日
AGIアーキテクチャ
汎用人工知能(Artificial General Intelligence)のアーキテクチャについて、こんなものはどうだろう、というアイデアがある。
基本は従来の専用AIだ。それはフィードバックがあってもなくても良い。普通のニューラルネットワークである。その層数や入力量は、通常のものよりずっと大きくなるだろう。まずは単純化のために、画像認識を例に挙げる。
そのAIは、画像用の入力と回答出力、そしてコマンド入力からなっている。コマンド入力を除く部分は、通常の画像認識AIと同じである。まず教師付きデータを大量に用意し学習させる。出力は自然言語(テキスト)である。
コマンド入力が少し違うところで、これも自然言語(テキスト)である。学習はコマンドもセットで行う。つまり、同じ画像でもコマンドと答えの異なる教師データが複数あるわけだ。例えば、「これは猫か?」「はい」と、「この動物はどちらを向いているか?」「右」などである。
これを大量に学習させていくと、想定した答えに対してはだいたい合った答えを出すようになる。ここから先が問題で、このコマンドセットが正確に合っていなくても、つまりコマンドセットにない新しいコマンドを与えても、それなりに正しい答えを出せるようになるのではないか、というのがこの主旨だ。つまり、「この動物は右を向いているか?」「はい」という学習データがなくても「はい」と答えてくれるのではないか、ということだ。
コマンドセットは自然言語なので、多くの単語と文法を含んでいる。そしてその組み合わせも無限にある、だから無理だ、と想像してしまいがちだ。しかし考えてみれば、同じ猫の画像なんてそもそも存在しない。黒猫と三毛猫のどちらも猫と認識するには、そういった無限の画像に対する学習記憶が残っているからだ。これが言語には及ばない理由はない。
これはまた、そもそもAGIなんてものは存在しないのだ、人間は高度な専用AIに過ぎないのだ、という主張にもなる。上の例では「猫」「動物」「右」しか出てこないが、この語彙が三千になり、学習データが何兆もあれば、中学生レベルの受け答えはできるようになるのではないか。そもそも中学生レベルでは知らない言葉も多く、大人の会話はできないかもしれないが、それでも彼らは一人前の人間である。それと同じではないのか、ということだ。
この先にあるのは、「気を利かせる」「新しいことを考え出す」アーキテクチャだが、基本的にはこの延長である。聞いていないことを答えた時に、それが人から見て適切であれば報酬が貰えるような仕掛けを組み込めば、やはり教師付き学習とその後の追加学習によって、色々な性格のAIを生み出すことができるだろう。
本当の問題はアーキテクチャなのではなくて、(アーキテクチャと学習の)物量だったのだ、と思い知る日が来るのかもしれない。
登録:
コメントの投稿 (Atom)
注目の投稿:
日本の石油需給・財政・産業構造への影響分析(2026年8月版)
ナフサの現状 から2ヶ月強、AIをClaudeに変えて、改めて分析したレポートをお知らせする。 --------- 2026年ホルムズ海峡危機 日本の石油需給・財政・産業構造への影響分析 作成日:2026年8月9日 分析対象期間:2026年2月〜2027年以降(予...
人気の投稿:
-
前回の石油備蓄に関する調査 ナフサの現状 からそろそろ2ヶ月になるので、改めて調査してみたのだが、ここ2ヶ月でGeminiはあまり賢くなっておらず、同じようなハルシネーションを何度も作り出した。こちらも、それを何度も何度も指摘して訂正していったのだが、最初の方の命令を忘れたり...
-
以前投稿した 太陽炉とシリコン発電所の設計 だが、その後GeminiからClaudeに切り替えて検討してみたところ、思ったほど簡単ではないことが分かった。そこでClaudeベースで再検討をした結果をお知らせする。 まずClaudeが指摘したのは、酸化ケイ素から酸素を分離...
-
ナフサの現状 から2ヶ月強、AIをClaudeに変えて、改めて分析したレポートをお知らせする。 --------- 2026年ホルムズ海峡危機 日本の石油需給・財政・産業構造への影響分析 作成日:2026年8月9日 分析対象期間:2026年2月〜2027年以降(予...
-
3Dプリンター木造建築工法3 脅威の性能とコスト 以前この提案した建築法の、更なる改良を試みる。 1.ハニカム構造(壁)の構成 前回、200℃での吐出、架橋促進剤噴霧、ヘラで押す、というのが気に入らなかったので、もっと簡単にした。 まずベース材として、リグニン粉末と上質(...
-
空調服が世に出て久しいが、不格好なのは相変わらずで、着る気がしない。その理由は明らかに「ハリセンボンのように膨らんだ形状」である。 膨らむ理由は空気を「吸い込む」構造だからだ。ファンから吸い込んで、首や裾から吐き出している。であれば逆に「吸い出す」構造にしてはどうか、と考え...
-
図書館で本を借りたいと思った時に苦労するのは、どこに所望の本があるかが分からないことだ。小さい図書館ならともかく、大きな図書館では階が違っていたり、分類を間違えたり、と手間が掛かる。まあそれが楽しいという人もいるだろうが、自分としてはさっさと借りて帰りたい。 そこで考えるの...
-
はじめに 生成AI同士が話し合って問題を解決する、というのが次の生成AIのテーマだと思う。 今の生成AIエージェントの使い方は、あくまでも一個人が自分の代理人として使っているだけだ。外部とのやり取りはMCPで行っているケースが多いと思うが、これは生成AIと(生成AIではない)...
-
サマージャンボプレミアムが発売された。1等前後賞合わせて12億円と、今までの7億円を大きく超える額になっている。その代わり1枚500円(従来は300円)に値上がりした。 近年、宝くじの売り上げは減少している。そもそも宝くじは効率の悪いギャンブルである。還元率は50%しかなく、こ...
-
民主主義が限界に来ている、とは色々言われている。だが、ならどうすべきかについてはどうも議論百出であり、自分としても「これは」と思うものが無かった。そこで色々調べていて、「パンアーキー」という考え方を見つけた。これが自分の考えに比較的近いと思ったので、この考え方について紹介する...
-
カルビーがポテトチップスなどのパッケージを白黒にしたことに対し、政府がヒアリングを行った話。これについて少し調べてみたところ、けっこうとんでもないことが分かった。 パッケージ問題の本質は(ナフサそのものではなく、ナフサから作られる)エチレンの減産であり、その規模は平常時の四...

0 件のコメント:
コメントを投稿