米陸軍、階層的強化学習でドローン兵器群の自律性を向上

米陸軍のジェミン・ジョージ博士と彼の同僚は、階層的強化学習(HRL)を使用して、エージェントの大規模な群れをグループとして制御する方法を開発した。ドローンの制御を中央集権的なアプローチから階層的な設計に移行することで、ソフトウェアの学習時間が80%削減されたという。

米陸軍、階層的強化学習でドローン兵器群の自律性を向上

米陸軍研究所は、アメリカの敵を圧倒し支配するために、ドローンや自律走行車の群れを制御するための強化学習アルゴリズムの実験を行っているという。

「これらの群れの最適な誘導方針をリアルタイムで見つけることは、戦闘員の戦術的状況認識を強化し、米陸軍が紛争の多い環境で支配することを可能にするための重要な要件である」と、米陸軍戦闘能力開発司令部ボフィンリー神経センター所属の科学者であるジェミン・ジョージ博士は、声明の中で述べている。

ジョージ博士と彼の同僚は、階層的強化学習(HRL)を使用して、エージェントの大規模な群れをグループとして制御する方法を開発した。ドローンの制御を中央集権的なアプローチから階層的な設計に移行することで、ソフトウェアの学習時間が80%削減されたという。

重要なことは、訓練された無人機の大群を、一連の指示を受けて特定のエリアに送ることができ、それぞれの集団は、その指示を実行するために自分たちの間で自動的に陣形を維持することを意味している。したがって、人間のコントローラーは個々の無人機や車両を心配する必要はなく、ただ地図上の特定の位置に集団を向けるだけだ。

階層的強化学習(HRL)による地上と空中の自律走行車の制御 Image via US Army.

「現在のHRLの取り組みにより、無人の空中・地上ビークルの群れの制御ポリシーを開発することが可能になり、群れを形成するエージェントの個々のダイナミクスが未知であっても、異なるミッションを最適に達成できるようになります」とGeorge博士は声明の中で述べている。

チームは、自走式ロボタンクと空飛ぶドローンが自律的に協力して陸地と空を調査できるようになる未来を想定している。大群は、密集した都市地形での持続的な監視や偵察、前方の作戦基地や高価値資産の境界防衛に使用することができる。

arXiv経由で配布された論文に記載されている強化学習技術は、異なる状態の複数のエージェントを訓練する方法を提供しり。「各階層には、それぞれローカルおよびグローバルな報酬関数を持つ独自の学習ループがあります」とGeorge博士と述べている。「これらの学習ループを並列に実行することで、学習時間を大幅に短縮することができました」。

このアルゴリズムは主にシミュレーションでテストされている。ジョージ博士は、数十台から数百台のマシンが大群を構成しているとEl Regに語ったが、チームはこれまでのところ、部屋の中にある4台のクアッドローターでしか物理的なテストを行っていない。

「アルゴリズムを実世界の環境に適用するには、シミュレーションと実作業の両方で、物理的な資産を使った広範なテストと評価が必要です」と同博士は結論づけている。

Image by US Army.

Read more

コロナは世界の子どもたちにとって大失敗だった[英エコノミスト]

コロナは世界の子どもたちにとって大失敗だった[英エコノミスト]

過去20年間、主に富裕国で構成されるOECDのアナリストたちは、学校の質を比較するために、3年ごとに数十カ国の生徒たちに読解、数学、科学のテストを受けてもらってきた。パンデミックによる混乱が何年も続いた後、1年遅れで2022年に実施された最新の試験で、良いニュースがもたらされるとは誰も予想していなかった。12月5日に発表された結果は、やはり打撃となった。

By エコノミスト(英国)
中国は2024年に経済的苦境を脱するか?[英エコノミスト]

中国は2024年に経済的苦境を脱するか?[英エコノミスト]

2007年から2009年にかけての世界金融危機の後、エコノミストたちは世界経済が二度と同じようにはならないことをすぐに理解した。災難を乗り越えたとはいえ、危機以前の現状ではなく、「新常態」へと回復するだろう。数年後、この言葉は中国の指導者たちにも採用された。彼らはこの言葉を、猛烈な成長、安価な労働力、途方もない貿易黒字からの脱却を表現するために使った。これらの変化は中国経済にとって必要な進化であり、それを受け入れるべきであり、激しく抵抗すべきではないと彼らは主張した。 中国がコロナを封じ込めるための長いキャンペーンを展開し、今年その再開が失望を呼んだ後、このような感情が再び現れている。格付け会社のムーディーズが今週、中国の信用格付けを中期的に引き下げなければならないかもしれないと述べた理由のひとつである。何人かのエコノミストは、中国の手に負えない不動産市場の新常態を宣言している。最近の日米首脳会談を受けて、中国とアメリカの関係に新たな均衡が生まれることを期待する論者もいる。中国社会科学院の蔡昉は9月、中国の人口減少、消費者の高齢化、選り好みする雇用主の混在によってもたら

By エコノミスト(英国)
イーロン・マスクの「X」は広告主のボイコットにめっぽう弱い[英エコノミスト]

イーロン・マスクの「X」は広告主のボイコットにめっぽう弱い[英エコノミスト]

広告業界を軽蔑するイーロン・マスクは、バイラルなスローガンを得意とする。11月29日に開催されたニューヨーク・タイムズのイベントで、世界一の富豪は、昨年彼が買収したソーシャル・ネットワーク、Xがツイッターとして知られていた頃の広告を引き上げる企業についてどう思うかと質問された。「誰かが私を脅迫しようとしているのなら、『勝手にしろ』」と彼は答えた。 彼のアプローチは、億万長者にとっては自然なことかもしれない。しかし、昨年、収益の90%ほどを広告から得ていた企業にとっては大胆なことだ。Xから広告を撤退させた企業には、アップルやディズニーが含まれる。マスクは以前、Xがブランドにとって安全な空間である証拠として、彼らの存在を挙げていた。

By エコノミスト(英国)