メタファーAPI:LLM向けに構築された革命的な検索エンジン

Metaphor API Revolutionary search engine built for LLM

インターネットは、誰もがどんなトピックに関しても最新の情報にアクセスできるユートピアでした。しかし、ユーザーの注意を引くための激しい競争がサイトを歪めました。Metaphorチームは、これがGoogle検索の低下に最も顕著に現れていると信じています。結果のトラフィックを生かすためにGoogleの検索結果で上位にランキングすることは非常に重要であり、それには検索エンジン最適化という業界があります。その結果、ウェブサイトは最高のコンテンツを持つことよりも、Googleの検索結果でより高いランキングを獲得するために激しく競い合っています。例えば、「ナスパルメザンのレシピ」といった比較的簡単なクエリでもです。

Metaphorチームは、巨大な言語モデルの力を利用して検索の魅力を取り戻すことを目指しました。GPT3などの進歩がこれが可能であると彼らに希望を与えました。彼らはスタートアップ投資を得て、GPUクラスターを購入し、検索を向上させるために取り組みました。インターネット検索を行う際に、人類の知識の総量に手を引かれているような感覚を作り出すことを目指しています。

グループはMetaphor APIを導入しました。これは、LLMをウェブと統合するための統一されたインタフェースです。以下の数行のコードを使用できます:

  • キーワードまたはメタファーの検索を試してみてください
  • 解析されたHTMLが即座に返されます。ウェブをスクレイピングする必要はありません。

メタファー検索を行う場合、トランスフォーマーベースのモデルがクエリに最も関連性の高いリンクを予測するために使用されます。主な違いは、Metaphorでは返される結果がユーザーの具体的な照会により合わせてカスタマイズされていることです。例えば「AIポッドキャスト」とGoogleに入力すると、「The 11 Best AI Podcasts」といったリンクが表示されますが、Metaphorでは品質と関連性によってニューラルに整理された実際のポッドキャストが表示されます。

チームのニューラルネットワークはこのようなテキストを認識し、次のリンクを予測するように訓練されています。その結果、必要なものをオンラインで見つけるための新しいアプローチが生まれ、見つけたリンクを共有する行為を模倣します。初めはわかりにくいかもしれませんが、この方法で行われる検索は関連性の高い有益な結果を生み出すことがあります。以下はいくつかの検索オプションです:

  • 検索を通じて説明したり感じたりする。
  • 希望する種類のエンティティのみを検索します。
  • キーワードが最適なアプローチでないか、検索エンジンがそれを高く評価する必要がないため、Googleが目立たせていないコンテンツを見つけます。
  • 検索のリンクと類似したリンクをさらに探します。

主な特徴

  • Metaphorはリンクの予測機能にトランスフォーマーベースのアーキテクチャを使用しています。これにより、通常の言語の表現力を活用した検索が行われます。
  • 任意のウェブページに対して、リッチな解析されたHTMLを即座に返します。ウェブスクレイピングは問題ありません。
  • 利用可能な基準を使用して、検索を時間枠やドメインで絞り込むことができます。
  • 使いやすく、PythonとNodeのSDKが付属しています。すべてをGPTに任せる方法については、ガイドをご覧ください。
  • インデックスの任意のページのコンテンツを即座に返すことができます。
  • より多くの結果が返され、LLMがそれらを整理できます。
  • 価格はBing APIよりも大幅に低いです。
  • Metaphorを使用した最初の1000件のクエリは永久に無料です。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

データサイエンス

「オンライン大規模な推薦のためのデュアル拡張二つのタワーモデル」

推薦システムは、ユーザーに個別にカスタマイズされた提案を提供するために設計されたアルゴリズムですこれらのシステムは、...

データサイエンス

「ヴォン・グームと出会う 大規模な言語モデルにおけるデータ毒化に対する革新的なAIアプローチ」

データの毒化攻撃は、訓練データセットに誤ったデータを注入することで機械学習モデルを操作します。モデルが実世界のデータ...

機械学習

PyTorchを使った効率的な画像セグメンテーション:Part 2

これは、PyTorchを使用してディープラーニング技術を使ってゼロから画像セグメンテーションをステップバイステップで実装する...

機械学習

「AIとML開発言語としてのPythonの利点」

「AIやMLなどのツールを使用して、ウェブ開発会社が業界を征服するためにPythonがますます使用されている理由を発見してくだ...

データサイエンス

ChatGPTのコードインタプリター:知っておくべきすべてのこと

OpenAIは、興奮をもって発表を行っており、最新の発表はChatGPT Plusのユーザーを喜ばせることでしょう。数ヶ月の期待を経て...

データサイエンス

データ駆動型生成AI:データと分析の利点

ジェネラティブAIは、データと分析の領域を革命化し、生産性を高め、納期を短縮すると位置付けられています