注文事項:AIが逆順に苦戦する理由

AIが苦戦する理由:注文事項を逆順で解説

|人工知能| 大規模言語モデル|

逆転の呪いが大規模言語モデルに与える影響とは

写真:Andre Taissin、Unsplashから

大規模言語モデル(LLM)は世界中で大ブームとなっています。日々、より高い能力を示しているようですが、限界はあるのでしょうか?そうではないと思われますが、一部の場合には失敗することもあります。

当たり前のことがそう簡単ではない。

写真:Sigmund、Unsplashから

私たちは、複雑なコードやテキストを信じられないほどの速さで生成するモデルの驚異的なパフォーマンスに慣れてきており、一部の研究者はそれらが意識を持っているかもしれないと示唆しています。

しかし、LLMには劇的な失敗も報告されています。以前の研究では、モデルが対処できないプログラミングのインスタンスがあることが指摘されています。また、LLMは皮肉に対処するのに苦労することもあります(公平を期すために、何人かの人間も同じです)。

AIは面白い?多少あるかもしれません

なぜAIはまだユーモアに苦戦していて、なぜこれは重要なステップなのか

levelup.gitconnected.com

最近の論文では、LLMが人間にとっては些細な課題とされるものに一般化できないことが驚きとして示されています:

もし人間が「Olaf Scholzはドイツの第9代首相である」という事実を覚えた場合、「ドイツの第9代首相は誰ですか?」という質問にも正しく答えることができます。これは人間にとっては非常に基本的な一般化の形式であり、些細なことのように思えます。しかし、私たちは自己回帰型言語モデルがこのように一般化することができないことを示しています。(出典

モデルが「<名前>は<説明>です」という形式のテキストで訓練されている場合、モデルは逆の「<説明>は<名前>です」という予測ができないかもしれません(または論理形式で言えばAはBならばBはA)。

画像ソース:こちら

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

人工知能

「アナコンダのCEO兼共同創業者、ピーターウォングによるインタビューシリーズ」

ピーター・ワンはAnacondaのCEO兼共同創設者ですAnaconda(以前はContinuum Analyticsとして知られる)を設立する前は、ピー...

人工知能

「コーネリスネットワークスのソフトウェアエンジニアリング担当副社長、ダグ・フラーラー氏 - インタビューシリーズ」

ソフトウェアエンジニアリングの副社長として、DougはCornelis Networksのソフトウェアスタック全体、Omni-Path Architecture...

人工知能

キャルレールの最高製品責任者、ライアン・ジョンソンへのインタビューシリーズ

ライアンは、初期のスタートアップからフォーチュン100の組織まで、多様なテクノロジーと製品開発のリーダーシップ経験を15年...

機械学習

もし芸術が私たちの人間性を表現する方法であるなら、人工知能はどこに適合するのでしょうか?

MITのポストドクターであるジヴ・エプスタイン氏(SM '19、PhD '23)は、芸術やその他のメディアを作成するために生成的AIを...

人工知能

「ジャスティン・マクギル、Content at Scaleの創設者兼CEO - インタビューシリーズ」

ジャスティンは2008年以来、起業家、イノベーター、マーケターとして活動しています彼は15年以上にわたりSEOマーケティングを...

人工知能

「ジンディのCEO兼共同創設者、セリーナ・リー― インタビューシリーズ」

「Celina Leeは、ZindiのCEO兼共同創設者であり、アフリカのデータサイエンティスト向けの最大の専門ネットワークです Celina...