Search Results arXiv

「人間の労働が機械学習を可能にする方法」

「私たちは機械学習の進歩に必要不可欠な手作業や人間の労働について十分に話しません事実は、技術と人間の活動の間に作り出される区分は人為的なものです全てが生活の一部であり、人々の手によって進化しているのです...」

合成時系列データ生成としてのLLM

最近、私たちはBremboハッカソンで$10,000の大賞を獲得しました課題は、ジェネラティブAIを使用して新しい化合物を作成し、それらの予測されたパフォーマンスデータを生成することでした私たちは…

「OWLv2のご紹介：ゼロショット物体検出におけるGoogleのブレークスルー」

はじめに 2023年も終わりが近づいていますが、コンピュータビジョンコミュニティにとっての興奮するニュースは、Googleが最近OWLv2のリリースとともにゼロショットオブジェクト検出の世界で大きな進歩を遂げたことです。この最新モデルは🤗 Transformersで利用可能であり、これまでに存在する中でも最も堅牢なゼロショットオブジェクト検出システムの1つを表しています。これは昨年に導入されたOWL-ViT v1の基盤を築いています。この記事では、このモデルの動作とアーキテクチャを紹介し、推論を実行する実用的なアプローチを見ていきます。さあ、始めましょう。学習目標コンピュータビジョンにおけるゼロショットオブジェクト検出の概念を理解する。 GoogleのOWLv2モデルの背後にある技術とセルフトレーニングのアプローチについて学ぶ。 OWLv2の使用に必要な実用的なアプローチ。この記事はデータサイエンスブログマラソンの一環として公開されました。 OWLv2の技術 OWLv2の印象的な機能は、その革新的なセルフトレーニングのアプローチによるものです。このモデルは、10億以上の例から成るウェブスケールデータセットでトレーニングされました。これを達成するために、著者たちはOWL-ViT v1の強力さを活用し、そのモデルを使用して擬似ラベルを生成し、それを使ってOWLv2をトレーニングしました。さらに、モデルは検出データ上で微調整され、それによって先行モデルであるOWL-ViT v1に比べて性能が向上しました。セルフトレーニングによってオープンワールドの位置特定のウェブスケールトレーニングが可能になり、オブジェクトの分類や言語モデリングで見られるトレンドに倣っています。 OWLv2のアーキテクチャ OWLv2のアーキテクチャはOWL-ViTと似ていますが、オブジェクト検出のヘッドに注目すべき追加があります。これにより、予測ボックスがオブジェクトを含む可能性を予測するオブジェクト性の分類器が含まれるようになりました。オブジェクト性スコアは洞察を提供し、テキストクエリに関係なく予測を順位付けやフィルタリングするために使用することができます。ゼロショットオブジェクト検出ゼロショット学習は、GenAIのトレンド以来一般的になった新しい用語です。これは、主に大規模言語モデル（LLM）の微調整で見られます。これは、いくつかのデータを使用してベースモデルを微調整し、モデルが新しいカテゴリに対応するようにすることを指します。ゼロショットオブジェクト検出はコンピュータビジョンの分野で画期的なものです。これは、手動で注釈付けされたバウンディングボックスの必要がなくなり、モデルが画像内のオブジェクトを検出する能力を向上させます。これによりプロセスがスピードアップし、手動の注釈が不要になるため、人間にとっては魅力的で、退屈ではありません。 OWLv2の使い方 OWLv2はOWL-ViTと同様のアプローチを採用していますが、更新されたイメージプロセッサOwlv2ImageProcessorを特徴としています。さらに、モデルはテキストのエンコードにCLIPTokenizerを使用しています。Owlv2ProcessorはOwlv2ImageProcessorとCLIPTokenizerを組み合わせた便利なツールであり、テキストのエンコードプロセスを簡素化します。以下に、Owlv2ProcessorとOwlv2ForObjectDetectionを使用してオブジェクト検出を実行する方法の例を示します。…

正しい選択をすること：AIのアドバイス、決定支援、およびLLMsの約束

「AIの民主化が多様な領域でAIシステムの採用をもたらしています大規模な言語モデル（LLM）の事前学習済みなど、最近の生成モデルの流れにより、それらの採用が進んでいます…」

ミストラル7B：コンピューターでの微調整と量子化のためのレシピ

ミストラル7Bは、ミストラルAIが作成した非常に人気のある大規模言語モデル（LLM）です他の同じサイズの事前学習済みLLMを凌駕し、Llama 2 13Bなどのより大きなLLMよりも優れています...

「LLMの幻覚の理解と軽減」

最近、大型言語モデル（LLM）は、ユーザーのプロンプトに対して非常に流暢で説得力のある応答を生成するなど、印象的かつ増大する能力を示していますただし、LLMは...

「DALL·E 3はどのように作られましたか？（OpenAIの最高のテキストから画像を生成するモデル）」

去年、OpenAIによって開発された初めての驚くべきテキストから画像への変換モデル、DALL·E 2に感動しましたしかし、今日はこれまでにないような芸術と技術が融合した世界へと足を踏み入れる準備をしてください

QLoRA：16GBのGPUで大規模な言語モデルの訓練を行う

「我々は、モデルのための量子化などの体重減少技術と、パラメータ効率の良いファインチューニング技術であるLoRAを組み合わせる予定ですこの組み合わせの結果として生まれるのが、QLoRAです」

「生成AIからの社会的および倫理的リスクの評価」

生成AIシステムはすでに本を執筆したり、グラフィックデザインを作成したり、医療関係者を支援したりする目的で使用されており、ますます高い能力を持つようになっていますこれらのシステムが責任を持って開発・展開されるためには、潜在的な倫理的・社会的リスクを注意深く評価する必要があります本論文では、AIシステムの社会的・倫理的リスクを評価するための3つの階層化フレームワークを提案していますこのフレームワークには、AIシステムの能力、人間とのインタラクション、システムの影響の評価が含まれますまた、現在の安全性評価の状況をマッピングし、コンテキスト、具体的なリスク、複数のモードリティの3つの主要なギャップが存在することを発見しましたこれらのギャップを埋めるために、既存の評価方法を再利用し、包括的な評価手法を実装することを提案していますこれにより、具体的な事例としてのデマにおける評価を行いますこのアプローチでは、AIシステムが事実に基づかない情報を提供する可能性がどれくらいあるかという結果に基づいて、人々がそのシステムをどのように使用し、どのような文脈で使用しているかに関する洞察を統合しますマルチレイヤーの評価により、モデルの能力以上の結論を導くことができ、この場合は、どの程度の害（デマ）が実際に発生し、広まっているかを示すことができますどの技術でも意図通りに機能させるためには、社会的な課題と技術的な課題の両方を解決する必要がありますしたがって、AIシステムの安全性をより良く評価するためには、これらの異なるコンテキストのレイヤーが考慮される必要がありますここでは、プライバシーの漏洩、仕事の自動化、デマなど、大規模言語モデルの潜在的なリスクを特定する既存の研究に基づき、これらのリスクを包括的に評価する手法を紹介しています

research

「タイムシリーズの拡張」

「拡張機能は、コンピュータビジョンパイプラインの領域において欠かせない要素となってきましたしかし、タイムシリーズなどの他の領域ではまだ同じような人気が広まっていません…」

Learn more about Search Results arXiv - Page 6