DeepMind、電子の挙動をシミュレートする FermiNet をオープンソース化

9月、Alphabet社傘下のDeepMind社は、量子化学計算において、波動関数の近似をニューラルネットで行うFermi Netについて詳しく説明した論文をPhysical Review Research誌に発表した。FermiNetは、原子エネルギーを計算するためのAIの最初のデモンストレーションの1つ。

DeepMind、電子の挙動をシミュレートする FermiNet をオープンソース化

9月、Alphabet社傘下のDeepMind社は、量子化学計算において、波動関数の近似をニューラルネットで行うFermi Netについて詳しく説明した論文をPhysical Review Research誌に発表した。DeepMind社が提案するFermiNetは、原子エネルギーを計算するためのAIの最初のデモンストレーションの1つであり、現在GitHubでオープンソースとして公開されている。

シュレーディンガー方程式は約100年前から知られていた。しかし、この方程式は、水素原子よりも複雑なものについては、閉じた形で解くことは不可能だ。コンピュータがあるのとほぼ同じくらい長い間、人々はこれらの計算式を解いてきたが、化学に関連するこれらの計算には信じられないほど高い精度が必要とされる。そこで、実行可能な計算量になるように近似を行うが、近時の程度と計算精度がトレードオフとなる。

このトレードオフを克服するには、物理法則からの要請を満たし、効率的に計算可能な波動関数の表現方法が求められる。計算科学の従来手法には、反対称性を満たす波動関数としてのスレーター行列式を利用するものがあった。

DeepMindの研究チームは、物質の大部分を構成する粒子であるフェルミオン系の波動関数を表現できる新しいニューラルネットワークアーキテクチャを開発し、従来の近似波動関数よりもはるかに正確であることを示した。

既存の計算量子力学ツールには幅があるが、効率的な表現の問題に対処するためには新しい方法が必要だと研究チームは考えた。分子動力学のような古典的な化学計算手法では数百万個の原子を扱うことができるのに対し、最大規模の量子化学計算では、最も近似的な手法でも数万個の電子しか扱えないのには理由がある。古典的なシステムの状態は簡単に記述できる。しかし、量子系の状態を表現するのは、はるかに困難だ。電子の位置のすべての可能な構成に確率を割り当てなければならない。これは波動関数にコード化されており、電子の配置ごとに正または負の数を割り当て、波動関数の2乗はその配置でシステムが見つかる確率を与えます。もしそれを各次元に沿って100個の点を持つ格子として表現しようとすると、シリコン原子の電子配置の可能性の数は宇宙の原子の数よりも大きくなる。

研究チームは、ディープ・ニューラル・ネットワークが助けになると考えた。ここ数年、複雑で高次元の確率分布をニューラルネットワークで表現することに大きな進歩があった。彼らは、これらのネットワークが人工知能の問題で高次元関数に適合することがすでに証明されていることを考えると、量子波動関数の表現にも使えるのではないかと推測した。

ジュゼッペ・カルレオ(ローザンヌ大学助教授)やマティアス・トロイヤー(マイクロソフトリサーチ・ディスティングイッシュトサイエンティスト)などの研究者は、現代のディープラーニングが理想化された量子問題を解くためにどのように利用できるかを示してきた。DeepMindの研究チームは、ディープニューラルネットワークを使って化学や凝縮系物理学のより現実的な問題に取り組みたいと考えていたが、それは計算に電子を含めることを意味していた。

電子を扱う際には一つだけ課題がある。電子はパウリ排除の原理に従わなければならない。これは、電子がフェルミオンと呼ばれる粒子の一種で、陽子、中性子、クォーク、ニュートリノなど、ほとんどの物質の構成要素を含んでいるからだ。電子の波動関数は反対称でなければならない。2つの電子の位置を入れ替えると、波動関数は-1倍になります。つまり、2つの電子がお互いの上にある場合、波動関数(とその配置の確率)はゼロになるということだ。

このため、入力に対して反対称性を持つ新しいタイプのニューラルネットワークを開発しなければならなかった。ほとんどの量子化学の手法では、反対称性は行列式と呼ばれる関数を用いて導入される。行列の行列式は、2つの行を入れ替えると、フェルミオンの波動関数のように出力に-1が乗算されるという性質を持っている。つまり、関数の束を取り出し、系内のすべての電子について評価し、その結果を1つの行列にまとめることができる。その行列の行列式は、適切に反対称性のある波動関数となる。この方法の大きな制限は、結果として得られる関数(スレーター行列式として知られている)があまり一般的ではない。

波動関数は、通常、はるかに複雑だ。これを改善するための典型的な方法は、スレーター行列式の大規模な線形の組み合わせ(時には数百万以上)を取り、電子の対に基づいていくつかの単純な補正を加えることだ。その場合でも、これだけでは正確なエネルギーを計算するのに十分ではないかもしれない。

提案手法であるFermiNetでは、行列式に入る各関数を全電子の関数にすることでこれを実現している、と論文は主張する。これは、単に一電子と二電子の関数を使う方法をはるかに超えている。FermiNetでは、各電子に対して別々の情報の流れを持っている。これらの流れの間に相互作用がなければ、ネットワークは従来のスレーター決定論よりも表現力はない。これを超えるために、ネットワークの各層のすべてのストリームからの情報を平均化し、この情報を次の層の各ストリームに渡す。このようにして、これらのストリームは、反対称関数を作成するための正しい対称性の特性を持っている。これは、グラフニューラルネットワークが各層で情報を集約する方法に似ている。スレーター行列式とは異なり、フェルミネットは、少なくともニューラルネットワークの層が十分に広くなる限界においては、普遍的な関数近似器である。つまり、これらのネットワークを正しく訓練すれば、シュレーディンガー方程式のほぼ正確な解を得ることができるはずだ、とDeep MindのリサーチサイエンティストのDavid Pfauは論文の中で主張した。

フェルミオン型ニューラルネットワーク(FermiNet)。上はグローバルアーキテクチャ。1つまたは2つの電子位置の特徴は、ネットワークの異なるストリームへの入力となる。これらの特徴はいくつかの層を経て変換され、決定因子が適用され、波となる。 Source: David Pfau et al.Ab-Initio Solution of the Many-Electron Schrödinger Equation with Deep Neural Networks, arXiv:1909.02487 (2019)

「FermiNetは、第一原理から原子や分子のエネルギーを計算するための深層学習の最初の実証であり、有用なほど正確であり、現在でも最も正確なニューラルネットワーク手法となっている」とPfauらは記述している。「DeepMindでのAI研究で開発されたツールやアイデアが、自然科学の根本的な問題の解決に役立つことを願っており、FermiNetは、タンパク質の折りたたみ、グラッシーダイナミクス、格子量子色力学、その他多くのプロジェクトでの研究に加わり、そのビジョンを実現している」と述べている。

参考文献

  1. David Pfau, James S. Spencer, Alexander G. D. G. Matthews, and W. M. C. Foulkes. Ab initio solution of the many-electron Schrödinger equation with deep neural networks. Phys. Rev. Research 2, 033429 – Published 16 September 2020.

Read more

AI時代のエッジ戦略 - Fastly プロダクト責任者コンプトンが展望を語る

AI時代のエッジ戦略 - Fastly プロダクト責任者コンプトンが展望を語る

Fastlyは、LLMのAPI応答をキャッシュすることで、コスト削減と高速化を実現する「Fastly AI Accelerator」の提供を開始した。キップ・コンプトン最高プロダクト責任者(CPO)は、類似した質問への応答を再利用し、効率的な処理を可能にすると説明した。さらに、コンプトンは、エッジコンピューティングの利点を活かしたパーソナライズや、エッジにおけるGPUの経済性、セキュリティへの取り組みなど、FastlyのAI戦略について語った。

By 吉田拓史
宮崎市が実践するゼロトラスト:Google Cloud 採用で災害対応を強化し、市民サービス向上へ

宮崎市が実践するゼロトラスト:Google Cloud 採用で災害対応を強化し、市民サービス向上へ

Google Cloudは10月8日、「自治体におけるゼロトラスト セキュリティ 実現に向けて」と題した記者説明会を開催し、自治体向けにゼロトラストセキュリティ導入を支援するプログラムを発表した。宮崎市の事例では、Google WorkspaceやChrome Enterprise Premiumなどを導入し、災害時の情報共有の効率化などに成功したようだ。

By 吉田拓史
​​イオンリテール、Cloud Runでデータ分析基盤内製化 - 顧客LTV向上と従業員主導の分析体制へ

​​イオンリテール、Cloud Runでデータ分析基盤内製化 - 顧客LTV向上と従業員主導の分析体制へ

Google Cloudが9月25日に開催した記者説明会では、イオンリテール株式会社がCloud Runを活用し顧客生涯価値(LTV)向上を目指したデータ分析基盤を内製化した事例を紹介。従業員1,000人以上がデータ分析を行う体制を目指し、BIツールによる販促効果分析、生成AIによる会話分析、リテールメディア活用などの取り組みを進めている。

By 吉田拓史
Geminiが切り拓くAIエージェントの新時代:Google Cloud Next Tokyo '24, VPカルダー氏インタビュー

Geminiが切り拓くAIエージェントの新時代:Google Cloud Next Tokyo '24, VPカルダー氏インタビュー

Google Cloudは、年次イベント「Google Cloud Next Tokyo '24」で、大規模言語モデル「Gemini」を活用したAIエージェントの取り組みを多数発表した。Geminiは、コーディング支援、データ分析、アプリケーション開発など、様々な分野で活用され、業務効率化や新たな価値創出に貢献することが期待されている。

By 吉田拓史