2021年4月16日金曜日

再帰的線形学習アルゴリズム

ニューラルネットワーク型ディープラーニングの新しいアルゴリズムを創った。

これまでのレーヤー(層)に依存した方法では、リアルな脳の柔軟性には近づけない。シナプス結合はそんなシステマティックではないと思う。ニューロンの冗長性を活かしたアルゴリズムにした。

組み込んだ学習アルゴリズムは、バックプロパゲーション(誤差逆伝播)の精密さよりも、もっとシンプルで荒っぽい。脳のニューロンは精密な計算はしていないはずだから。

再帰的線形学習アルゴリズムとよぶことにした。(Linear Recursive Learning Algorithm)

階層なしで1000個ないしは2000個のニューロンで、Mnistの手書き数字認識をさせた。パフォーマンスはやや劣るが、単純な学習アルゴリズムで90%程度の正解は確保できる。自分的には合格だが、一般的には正解率は99%だ。もっと単純さを活かしたまま改良したい。

アリのニューロン数は、25万個らしい。このアルゴリズムで、7万個程度までは、自作のCore i9-9920XのLinuxマシンでもニューロンを増やせる。もう少し複雑なパターン認識にも挑戦させたい。

ある程度纏まったら論文にしたい。

0 件のコメント:

コメントを投稿

注: コメントを投稿できるのは、このブログのメンバーだけです。

クトゥーゾフ将軍

ゾッとするほどの悪辣なロシアによる侵略。 今の事態を見ていると、逆にウクライナの大統領が、トルストイの「戦争と平和」に出てくるナポレオンの侵攻と戦ったクトゥーゾフ将軍のように見えてくる。それは全く私の願望なのだが。