537 / 722
157人工知能研究所
AIによる科学的発見を目指す「KAN 2.0」新星ニューラルネットワークアーキテクチャKANを科学に応用
しおりを挟む
Yahoo!ニュース
AIによる科学的発見を目指す「KAN 2.0」新星ニューラルネットワークアーキテクチャKANを科学に応用(生成AI論文ピックアップ)
2024年8/30(金) 18:15配信
テクノエッジ
(写真:TechnoEdge)
今回の生成AI論文ピックアップでは、革新的なニューラルネットワークアーキテクチャとして注目のKAN (Kolmogorov-Arnold Network)に科学知識を組み込み、AIによる新たな科学的発見を目指す研究「KAN 2.0」を取り上げます。
【この記事の他の写真を見る】
生成AIウィークリー連載記事一覧 | テクノエッジ TechnoEdge
新星ニューラルネットワーク「KAN」の科学分野に特化したバージョン「KAN 2.0」登場
「KAN 2.0」は、「KAN」(Kolmogorov-Arnold Network)を科学分野に活用するためのフレームワークです。KANとは、最近登場したニューラルネットワーク(NN)アーキテクチャで、これまで多用されてきた「MLP」(Multi-Layer Perceptron、多層パーセプトロン)とは異なるアイディアでありながら高性能と期待されている新星です。
KANの特性を簡単にいうと、MLPがノードに固定の活性化関数を持つのとは異なり、KANはエッジに学習可能な活性化関数を特徴としています。
現在主流のMLPは、複雑なデータ構造や関数に対して学習の効率が低く、正確性が落ちる制約があるのに対して、KANではより小さな規模でより正確に処理できること、結果の解釈可能性の高さが期待されています。
本研究では、そのようなKANと科学的知識を融合させる双方向のアプローチを提案しています。科学からKANへの方向では、既知の科学的知識をKANに組み込む方法を示しています。例えば、重要な特徴量、モジュール構造、数式などの形で科学的知識を表現し、それらをKANの初期構造に反映させます。
一方、KANから科学への方向では、訓練されたKANから科学的洞察を抽出する手法を提案しています。具体的には、重要な特徴量の特定、モジュール構造の発見、数式の導出などが可能になります。
KAN 2.0を用いた例として、保存量の発見、ラグランジアンの学習、隠れた対称性の発見、構成則の学習など、様々な物理学の問題に適用しています。これらの実験から、科学的発見のための強力なツールとなる可能性が示唆されています。
KAN 2.0: Kolmogorov-Arnold Networks Meet Science
Ziming Liu, Pingchuan Ma, Yixuan Wang, Wojciech Matusik, Max Tegmark
Paper | GitHub
生成AIウィークリー連載記事一覧 | テクノエッジ TechnoEdge
TechnoEdge 山下裕毅(Seamless)
【関連記事】
Meta Reality Labs、人の画像から姿勢や立体形状を高精度に理解するビジョンモデル「Sapiens」発表。3億枚以上の画像で学習(生成AI論文ピックアップ)
“2万単語”を一発生成する言語AI「LongWriter」、論文執筆や査読など科学研究全般を自動化する「The AI Scientist」など生成AI技術5つを解説(生成AIウィークリー)
最終更新:8/30(金) 18:34
テクノエッジ
※暗黒物質の正体を推論しなさい
AIによる科学的発見を目指す「KAN 2.0」新星ニューラルネットワークアーキテクチャKANを科学に応用(生成AI論文ピックアップ)
2024年8/30(金) 18:15配信
テクノエッジ
(写真:TechnoEdge)
今回の生成AI論文ピックアップでは、革新的なニューラルネットワークアーキテクチャとして注目のKAN (Kolmogorov-Arnold Network)に科学知識を組み込み、AIによる新たな科学的発見を目指す研究「KAN 2.0」を取り上げます。
【この記事の他の写真を見る】
生成AIウィークリー連載記事一覧 | テクノエッジ TechnoEdge
新星ニューラルネットワーク「KAN」の科学分野に特化したバージョン「KAN 2.0」登場
「KAN 2.0」は、「KAN」(Kolmogorov-Arnold Network)を科学分野に活用するためのフレームワークです。KANとは、最近登場したニューラルネットワーク(NN)アーキテクチャで、これまで多用されてきた「MLP」(Multi-Layer Perceptron、多層パーセプトロン)とは異なるアイディアでありながら高性能と期待されている新星です。
KANの特性を簡単にいうと、MLPがノードに固定の活性化関数を持つのとは異なり、KANはエッジに学習可能な活性化関数を特徴としています。
現在主流のMLPは、複雑なデータ構造や関数に対して学習の効率が低く、正確性が落ちる制約があるのに対して、KANではより小さな規模でより正確に処理できること、結果の解釈可能性の高さが期待されています。
本研究では、そのようなKANと科学的知識を融合させる双方向のアプローチを提案しています。科学からKANへの方向では、既知の科学的知識をKANに組み込む方法を示しています。例えば、重要な特徴量、モジュール構造、数式などの形で科学的知識を表現し、それらをKANの初期構造に反映させます。
一方、KANから科学への方向では、訓練されたKANから科学的洞察を抽出する手法を提案しています。具体的には、重要な特徴量の特定、モジュール構造の発見、数式の導出などが可能になります。
KAN 2.0を用いた例として、保存量の発見、ラグランジアンの学習、隠れた対称性の発見、構成則の学習など、様々な物理学の問題に適用しています。これらの実験から、科学的発見のための強力なツールとなる可能性が示唆されています。
KAN 2.0: Kolmogorov-Arnold Networks Meet Science
Ziming Liu, Pingchuan Ma, Yixuan Wang, Wojciech Matusik, Max Tegmark
Paper | GitHub
生成AIウィークリー連載記事一覧 | テクノエッジ TechnoEdge
TechnoEdge 山下裕毅(Seamless)
【関連記事】
Meta Reality Labs、人の画像から姿勢や立体形状を高精度に理解するビジョンモデル「Sapiens」発表。3億枚以上の画像で学習(生成AI論文ピックアップ)
“2万単語”を一発生成する言語AI「LongWriter」、論文執筆や査読など科学研究全般を自動化する「The AI Scientist」など生成AI技術5つを解説(生成AIウィークリー)
最終更新:8/30(金) 18:34
テクノエッジ
※暗黒物質の正体を推論しなさい
0
お気に入りに追加
2
あなたにおすすめの小説
ママと中学生の僕
キムラエス
大衆娯楽
「ママと僕」は、中学生編、高校生編、大学生編の3部作で、本編は中学生編になります。ママは子供の時に両親を事故で亡くしており、結婚後に夫を病気で失い、身内として残された僕に精神的に依存をするようになる。幼少期の「僕」はそのママの依存が嬉しく、素敵なママに甘える閉鎖的な生活を当たり前のことと考える。成長し、性に目覚め始めた中学生の「僕」は自分の性もママとの日常の中で処理すべきものと疑わず、ママも戸惑いながらもママに甘える「僕」に満足する。ママも僕もそうした行為が少なからず社会規範に反していることは理解しているが、ママとの甘美な繋がりは解消できずに戸惑いながらも続く「ママと中学生の僕」の営みを描いてみました。
サンタクロースが寝ている間にやってくる、本当の理由
フルーツパフェ
大衆娯楽
クリスマスイブの聖夜、子供達が寝静まった頃。
トナカイに牽かせたそりと共に、サンタクロースは町中の子供達の家を訪れる。
いかなる家庭の子供も平等に、そしてプレゼントを無償で渡すこの老人はしかしなぜ、子供達が寝静まった頃に現れるのだろうか。
考えてみれば、サンタクロースが何者かを説明できる大人はどれだけいるだろう。
赤い服に白髭、トナカイのそり――知っていることと言えば、せいぜいその程度の外見的特徴だろう。
言い換えればそれに当てはまる存在は全て、サンタクロースということになる。
たとえ、その心の奥底に邪心を孕んでいたとしても。
ユーザ登録のメリット
- 毎日¥0対象作品が毎日1話無料!
- お気に入り登録で最新話を見逃さない!
- しおり機能で小説の続きが読みやすい!
1~3分で完了!
無料でユーザ登録する
すでにユーザの方はログイン
閉じる