2019年6月11日火曜日
AGIアーキテクチャ
汎用人工知能(Artificial General Intelligence)のアーキテクチャについて、こんなものはどうだろう、というアイデアがある。
基本は従来の専用AIだ。それはフィードバックがあってもなくても良い。普通のニューラルネットワークである。その層数や入力量は、通常のものよりずっと大きくなるだろう。まずは単純化のために、画像認識を例に挙げる。
そのAIは、画像用の入力と回答出力、そしてコマンド入力からなっている。コマンド入力を除く部分は、通常の画像認識AIと同じである。まず教師付きデータを大量に用意し学習させる。出力は自然言語(テキスト)である。
コマンド入力が少し違うところで、これも自然言語(テキスト)である。学習はコマンドもセットで行う。つまり、同じ画像でもコマンドと答えの異なる教師データが複数あるわけだ。例えば、「これは猫か?」「はい」と、「この動物はどちらを向いているか?」「右」などである。
これを大量に学習させていくと、想定した答えに対してはだいたい合った答えを出すようになる。ここから先が問題で、このコマンドセットが正確に合っていなくても、つまりコマンドセットにない新しいコマンドを与えても、それなりに正しい答えを出せるようになるのではないか、というのがこの主旨だ。つまり、「この動物は右を向いているか?」「はい」という学習データがなくても「はい」と答えてくれるのではないか、ということだ。
コマンドセットは自然言語なので、多くの単語と文法を含んでいる。そしてその組み合わせも無限にある、だから無理だ、と想像してしまいがちだ。しかし考えてみれば、同じ猫の画像なんてそもそも存在しない。黒猫と三毛猫のどちらも猫と認識するには、そういった無限の画像に対する学習記憶が残っているからだ。これが言語には及ばない理由はない。
これはまた、そもそもAGIなんてものは存在しないのだ、人間は高度な専用AIに過ぎないのだ、という主張にもなる。上の例では「猫」「動物」「右」しか出てこないが、この語彙が三千になり、学習データが何兆もあれば、中学生レベルの受け答えはできるようになるのではないか。そもそも中学生レベルでは知らない言葉も多く、大人の会話はできないかもしれないが、それでも彼らは一人前の人間である。それと同じではないのか、ということだ。
この先にあるのは、「気を利かせる」「新しいことを考え出す」アーキテクチャだが、基本的にはこの延長である。聞いていないことを答えた時に、それが人から見て適切であれば報酬が貰えるような仕掛けを組み込めば、やはり教師付き学習とその後の追加学習によって、色々な性格のAIを生み出すことができるだろう。
本当の問題はアーキテクチャなのではなくて、(アーキテクチャと学習の)物量だったのだ、と思い知る日が来るのかもしれない。
登録:
コメントの投稿 (Atom)
注目の投稿:
メタバースが世界を救う
非常に大雑把な一般論だが、 ハイテクは上手く使えば格差是正になる 。 その良い例は音楽制作だ。かつて音楽は大金持ちや貴族のたしなみで、庶民は縁遠かったが、今やYouTubeでボカロ曲が普通にヒットする時代になった。これは作曲家や演奏家の大衆化と言える。裾野が広がったことで大量の...
人気の投稿:
-
屋根に超音波振動装置を取り付けておく。これによって屋根と雪の間の結合が破壊され、雪が滑り落ちやすくなる。これが題記装置の原理だ。角度によっては放っておいても落ちるだろうし、そうでなくても楽に雪下ろしができる。 まあ超音波でなくて低周波でも良いのだろうが、超音波の方が簡単...
-
過去、 https://spockshightech.blogspot.com/2025/04/blog-post.html https://spockshightech.blogspot.com/2025/04/blog-post_26.html https://spock...
-
努力しても報われない場合はある、というのは一般論として正しいと思うが、成功者は「いや、それは努力が足りないだけだ」と反論する。この構図は昔から存在する。 有名なところでは王貞治の「努力は必ず報われる。もし報われない努力があるのならば、それはまだ努力と呼べない」というもので、同じよ...
-
中道改革連合が提案しているジャパンファンドについて調べてみた。 これを大雑把に言うと、政府が色々なところで細かく持っている資産を、一つの「バケツ」に集約し、それをGPIF(年金積立金管理運用独立行政法人)の運用ノウハウをもって運用しようというものだ。資産総額は500兆円、目標...
-
衆議院議員選挙に際しての各党の公約をAI分析してみる。消費税については https://spockshightech.blogspot.com/2026/01/blog-post_23.html で書いたが、チームみらいは消費税減税を公約としておらず、一覧としても総合的な視...
-
ハクキンカイロの発熱原理を調べていて、これを防災用(キャンプ用でも良いのだが)の湯沸しに使えないかと考えた。 普通、キャンプではガスコンロを持っていく。だがあれは裸火を使うから、熱効率は悪い。これに対してハクキンカイロの仕掛けは、白金触媒を適切な場所に配することで、極...
-
意味不明と思われるかもしれないが、ちょっと我慢して聞いてほしい。 Youtubeの膨大な動画の中には、書籍を解説したコンテンツが多くある。15~30分程度の要約で、人にもよるが、わかりやすく解説してくれているものも多い。 また、教育コンテンツも多くある。とある男とかカーンア...
-
https://gigazine.net/news/20251223-santa-quantum-physics/ こちらで紹介されていた、サンタクロースの量子論的解釈が面白かった。 量子とは、電子やクォークなどを差す。これら量子は、物質としての側面と波動としての側面を持...
-
ディーン・ケーメン氏が発明した浄水器「 スリングショット 」の原理は、いわゆる蒸留である。つまり水を沸騰させて水蒸気にした後、冷やして水に戻す。汚水と蒸留水の間で熱交換を行うことで効率を上げている。 日本では、防災用の浄水器としては中空糸膜や逆浸透膜が殆どだ。これと蒸留式には...
-
日本の全企業数に占める中小企業の割合は 99.7% であり、更に全労働者の約 70% が中小企業で働いている。にも関わらず、大企業と中小企業が生み出すGDPはほぼ同額である。なぜかというと、労働生産性が違うからである。 企業規模 労働生産性(年換算・1人あたり) ...

0 件のコメント:
コメントを投稿