注文事項:AIが逆順に苦戦する理由

AIが苦戦する理由:注文事項を逆順で解説

|人工知能| 大規模言語モデル|

逆転の呪いが大規模言語モデルに与える影響とは

写真:Andre Taissin、Unsplashから

大規模言語モデル(LLM)は世界中で大ブームとなっています。日々、より高い能力を示しているようですが、限界はあるのでしょうか?そうではないと思われますが、一部の場合には失敗することもあります。

当たり前のことがそう簡単ではない。

写真:Sigmund、Unsplashから

私たちは、複雑なコードやテキストを信じられないほどの速さで生成するモデルの驚異的なパフォーマンスに慣れてきており、一部の研究者はそれらが意識を持っているかもしれないと示唆しています。

しかし、LLMには劇的な失敗も報告されています。以前の研究では、モデルが対処できないプログラミングのインスタンスがあることが指摘されています。また、LLMは皮肉に対処するのに苦労することもあります(公平を期すために、何人かの人間も同じです)。

AIは面白い?多少あるかもしれません

なぜAIはまだユーモアに苦戦していて、なぜこれは重要なステップなのか

levelup.gitconnected.com

最近の論文では、LLMが人間にとっては些細な課題とされるものに一般化できないことが驚きとして示されています:

もし人間が「Olaf Scholzはドイツの第9代首相である」という事実を覚えた場合、「ドイツの第9代首相は誰ですか?」という質問にも正しく答えることができます。これは人間にとっては非常に基本的な一般化の形式であり、些細なことのように思えます。しかし、私たちは自己回帰型言語モデルがこのように一般化することができないことを示しています。(出典

モデルが「<名前>は<説明>です」という形式のテキストで訓練されている場合、モデルは逆の「<説明>は<名前>です」という予測ができないかもしれません(または論理形式で言えばAはBならばBはA)。

画像ソース:こちら

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

人工知能

「コマンドバーの創設者兼CEO、ジェームズ・エバンスによるインタビューシリーズ」

ジェームズ・エバンズは、CommandBarの創設者兼CEOであり、製品、マーケティング、顧客チームを支援するために設計されたAIパ...

人工知能

「パクストンAIの共同創業者兼CEO、タングイ・シャウ - インタビューシリーズ」

タングイ・ショウは、Paxton AIの共同創設者兼CEOであり、法的研究と起草の負担を軽減するためにGenerative AIを使用するプラ...

人工知能

「サティスファイラボのCEO兼共同創設者、ドニー・ホワイト- インタビューシリーズ」

2016年に設立されたSatisfi Labsは、会話型AI企業のリーディングカンパニーです早期の成功は、ニューヨーク・メッツ、メイシ...

人工知能

ディープAIの共同創業者兼CEO、ケビン・バラゴナ氏- インタビューシリーズ

ディープAIの創設者であるケビン・バラゴナは、10年以上の経験を持つプロのソフトウェアエンジニア兼製品開発者です彼の目標...

人工知能

『ジュリエット・パウエル&アート・クライナー、The AI Dilemma – インタビューシリーズの著者』

『AIのジレンマ』は、ジュリエット・パウエルとアート・クライナーによって書かれましたジュリエット・パウエルは、著者であ...

機械学習

「Prolificの機械学習エンジニア兼AIコンサルタント、ノラ・ペトロヴァ – インタビューシリーズ」

『Nora Petrovaは、Prolificの機械学習エンジニア兼AIコンサルタントですProlificは2014年に設立され、既にGoogle、スタンフ...