「AIネットワークは攻撃に対して脆弱性があります」

「AIネットワークの脆弱性と攻撃への対策」

研究者たちはQuadAttacKというソフトウェアを開発しました。これは、敵対的な脆弱性を持ついかなる深層ニューラルネットワークもテストするために使用できます。 ¶ クレジット: bigstock

北カロライナ州立大学のTianfu Wu氏と同僚は、深層ニューラルネットワークの敵対的な脆弱性をテストするためにQuadAttacKソフトウェアを開発しました。

Wu氏は、クリーンなデータでテストされた訓練済みの人工知能(AI)システムは予測通りの振る舞いをすると説明しました。

彼は「QuadAttacKはこれらの操作を監視し、AIがデータに関連する意思決定を行っている方法を学習します」と述べました。「これにより、QuadAttacKはデータがどのように操作されてAIをだますことができるのかを特定できます。QuadAttacKはその後、だまし込むために操作されたデータをAIシステムに送り、AIの反応を確認します。もしQuadAttacKが脆弱性を特定した場合、AIはQuadAttacKが望むものを見ることになります」と述べました。

研究者たちは、広く使用されている4つの深層ニューラルネットワークをQuadAttacKソフトウェアでテストし、それらのすべてが脆弱性を持つことがわかりました。NC State University Newsより フル記事を見る

抄録著作権 © 2023 SmithBucklin , ワシントンD.C., アメリカ

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

AI研究

コンピュータビジョンシステムは、画像認識と生成を結びつけたものです

MAGEは、通常は別々に訓練される画像生成と認識の2つの主要なタスクを1つのシステムに統合します

機械学習

「総合的な指標を通じて深層生成モデルのエンジニアリング設計評価を向上させる」

エンジニアリングデザインにおいて、深層生成モデル(DGMs)への依存度が近年急速に上昇しています。しかし、これらのモデル...

AIニュース

Apple AirTagsは失われたスーツケースを追跡できますが、ストーキングに対する警告は遅いです

「ノーザンイースタン大学の研究者による研究によると、iPhoneユーザーへの未知のAirTagとの近距離通知は適切なタイミングで...

AI研究

UCバークレーの研究者たちは、Gorillaという名前の、GPT-4を上回るAPIコールの記述において、Finetuned LLaMAベースのモデルを紹介しました

人工知能の分野における最近の大きな進歩は、大規模言語モデル(LLM)の導入です。これらのモデルは、自然言語処理(NLP)や...

データサイエンス

「RAGAsを使用したRAGアプリケーションの評価」

「PythonにおいてRAGAsフレームワークを使って、検索および生成コンポーネントを個別に評価するための検索強化生成(RAG)シ...

機械学習

TinyLlamaと出会ってください:3兆トークンで1.1Bのラマモデルを事前学習することを目指した小さなAIモデル

言語モデルの研究の絶え間ない進化の中で、効率性と拡張性を追求する試みが、画期的なプロジェクトであるTinyLlamaによって導...