ニュースコメント生成AIのトロールマシンとしての誤用可能性

Microsoft Researchと北京航空航天大学のチームが開発した「DeepCom」は、トロールの誤用可能性をはらんでおり、研究者からの非難を浴びた。

ニュースコメント生成AIのトロールマシンとしての誤用可能性

Microsoft Researchと北京航空航天大学のチームが開発した「DeepCom」は、英語と中国語で書かれたニュース記事を読んでコメントすることで、人間の行動を効果的に模倣できることを示しました。しかし、2019年9月26日に研究論文リポジトリarXivにアップロードされた元の論文は、誤情報の拡散、トローリング利用のような倫理的な問題について言及していませんでした。これは研究者らの反発を引き起こし、最終的に研究チームはそれらの懸念に対処する最新の論文をアップロードしなければいけませんでした。

プリンストン大学の情報技術政策センターのコンピューター科学者であるArvind Narayananは、Twitterの投稿で「北京の研究者による論文は、主な用途がトローリングと偽情報であると思われる新しい機械学習技術を提示している」と指摘しました。「自然言語処理研究のトップ3会場の1つであるEMLNP での出版が認められました。 クールクールクール」。

特に顰蹙を買ったのは「ニュースの自動コメント生成は実際のアプリケーションには有益ですが、研究コミュニティからは十分な注目を集めていません」との主張でした。モデルが生成したコメントのおかげで、コメント欄が最初から賑わいを見せるため、読者がコメントを投稿する心理的障壁を取り除き、彼らの関心を維持し続ける、と彼らは主張しました。

「このようなシステムにより、コールドスタートからニュースWebサイトのコメントサービスが可能になり、コメントの少ないニュース記事の読みやすさが向上し、チャットボットなどの他の人工知能アプリケーションのスキルリストが充実します」。

しかし、彼らは明らかに多くの潜在的なマイナス面を及ぼす技術応用については言及しなかったのです。たとえば、権威主義的な権力は、この技術を応用すれば、プロパガンダを推進するために、大量の虚偽情報を自動的に投下するモデルを実装できます。

ニュースコメント生成AIは基本的には「トローリングマシン」に変貌を遂げてしまう可能性があります。自動生成コメントは、ボットが人間の意見を歪ませるために利用できるのは容易に想像がつきます。おそらく、悪意の人はそれを製品の宣伝やスパムの投稿の手段として使用するかもしれません。

The RegisterのKatyanna Quachが論争について報道した後、MicrosoftとBeihang Universityの研究者によって更新された論文は、倫理的な懸念の一部を認めてアップロードされました。また、更新されたバージョンでは、「自動ニュース生成が実際のアプリケーションにどのように役立つか」という元の論文の記述も削除されました。

「私たちは、これらの方法を適用して、人間と見なされるニュース解説を生成する潜在的な倫理的問題を認識しています」と研究者は更新された論文の結論に書きました。「技術の責任ある使用に関するこれらの方法のベストプラクティスとコントロールに関する議論を刺激したいと考えています」。

マイクロソフトは、以前、エンジニアリングおよび研究におけるAIと倫理(AETHER)委員会などのイニシアチブでAI倫理のリーダーとしての地位を確立してきました。

DeepComは、読み取りネットワークと生成ネットワークの2つのリカレントニューラルネットワークを採用しています。モデルはさまざまなレイヤーに分割され、記事のさまざまな部分を処理します。記事のさまざまな部分を見出しからコンテンツまで処理し、ストーリーのどの部分が特に重要または興味深いかを分析および予測します。

これらの予測は、生成ネットワークに渡されます。 ここでは、モデルは記事の特定のトピックまたは関心のある人に焦点を当てた応答を作成し、生成したものを自然言葉化してコメントを作ります。

DeepComのパフォーマンスは、読み取りネットワークがストーリーから何を語るべきかをどの程度うまく特定するか、生成ネットワークがどれだけコメントをうまく作成するかによって決まります。研究者は、オンラインの記事に投稿された数百万の実際の人間のコメントをスクレイピングする中国語のデータセットでモデルをトレーニングしました。英語に関してはYahoo! Newsから取得したデータセットを使用しました。

読み取りネットワークをトレーニングするために、研究者は、トレーニングデータのコメントが対応する記事の情報とどの程度関連しているかを計算し、その重要な部分を特定しました。たとえば、記事が映画のレビューであり、コメントが特定の女優または俳優について議論している場合、リーディングネットワークは女優または俳優の正しい名前を選択する必要があります。その情報が生成ネットワークに渡されると、モデルはその女優または俳優に関するコメントを書き込みます。

参考文献

Read, Attend and Comment: A Deep Architecture for Automatic News Comment Generation. Ze Yang† , Can Xu, Wei Wu, Zhoujun Li.

Photo by Franck V. on Unsplash

Read more

米国のEV革命は失速?[英エコノミスト]

米国のEV革命は失速?[英エコノミスト]

米国人は自動車が大好きだ。バッテリーで走らない限りは。ピュー・リサーチ・センターが7月に発表した世論調査によると、電気自動車(EV)の購入を検討する米国人は5分の2以下だった。充電網が絶えず拡大し、選べるEVの車種がますます増えているにもかかわらず、このシェアは前年をわずかに下回っている。 この言葉は、相対的な無策に裏打ちされている。2023年第3四半期には、バッテリー電気自動車(BEV)は全自動車販売台数の8%を占めていた。今年これまでに米国で販売されたEV(ハイブリッド車を除く)は100万台に満たず、自動車大国でない欧州の半分強である(図表参照)。中国のドライバーはその4倍近くを購入している。

By エコノミスト(英国)
労働者の黄金時代:雇用はどう変化しているか[英エコノミスト]

労働者の黄金時代:雇用はどう変化しているか[英エコノミスト]

2010年代半ばは労働者にとって最悪の時代だったという点では、ほぼ誰もが同意している。ロンドン・スクール・オブ・エコノミクスの人類学者であるデイヴィッド・グレーバーは、「ブルシット・ジョブ(どうでもいい仕事)」という言葉を作り、無目的な仕事が蔓延していると主張した。2007年から2009年にかけての世界金融危機からの回復には時間がかかり、豊かな国々で構成されるOECDクラブでは、労働人口の約7%が完全に仕事を失っていた。賃金の伸びは弱く、所得格差はとどまるところを知らない。 状況はどう変わったか。富裕国の世界では今、労働者は黄金時代を迎えている。社会が高齢化するにつれて、労働はより希少になり、より良い報酬が得られるようになっている。政府は大きな支出を行い、経済を活性化させ、賃上げ要求を後押ししている。一方、人工知能(AI)は労働者、特に熟練度の低い労働者の生産性を向上させており、これも賃金上昇につながる可能性がある。例えば、労働力が不足しているところでは、先端技術の利用は賃金を上昇させる可能性が高い。その結果、労働市場の仕組みが一変する。 その理由を理解するために、暗

By エコノミスト(英国)
中国は地球を救うのか、それとも破壊するのか?[英エコノミスト]

中国は地球を救うのか、それとも破壊するのか?[英エコノミスト]

脳腫瘍で余命いくばくもないトゥー・チャンワンは、最後の言葉を残した。その中国の気象学者は、気候が温暖化していることに気づいていた。1961年、彼は共産党の機関紙『人民日報』で、人類の生命を維持するための条件が変化する可能性があると警告した。 しかし彼は、温暖化は太陽活動のサイクルの一部であり、いつかは逆転するだろうと考えていた。トゥーは、化石燃料の燃焼が大気中に炭素を排出し、気候変動を引き起こしているとは考えなかった。彼の論文の数ページ前の『人民日報』のその号には、ニヤリと笑う炭鉱労働者の写真が掲載されていた。中国は欧米に経済的に追いつくため、工業化を急いでいた。 今日、中国は工業大国であり、世界の製造業の4分の1以上を擁する。しかし、その進歩の代償として排出量が増加している。過去30年間、中国はどの国よりも多くの二酸化炭素を大気中に排出してきた(図表1参照)。調査会社のロディウム・グループによれば、中国は毎年世界の温室効果ガスの4分の1以上を排出している。これは、2位の米国の約2倍である(ただし、一人当たりで見ると米国の方がまだひどい)。

By エコノミスト(英国)