「エンコーディングからエンベディングへ」

From Encoding to Embedding

概念と基礎:SVDからニューラルネットワークまで

credit: https://unsplash.com/

この記事では、データ表現と機械学習の分野における2つの基本的な概念、エンコーディングと埋め込みについて話します。この記事の内容は、スタンフォード大学のCS246 Mining Massive DataSet(MMDS)コースでの講義の一部を参考にしています。役に立つと思います。

イントロダクション

すべての機械学習(ML)手法は、入力特徴ベクトルで動作し、ほとんどの場合、入力特徴は数値である必要があります。MLの観点から、以下の4つの特徴のタイプがあります:

  1. 数値(連続または離散):数値データは連続的または離散的なデータで特徴付けることができます。連続データは範囲内の任意の値をとることができ、一方、離散データは明確な値を持ちます。連続的な数値変数の例は「身長」であり、離散的な数値変数の例は「年齢」です。
  2. カテゴリカル(順序または名義):カテゴリカルデータは、目の色や出身地などの特性を表します。カテゴリカルデータは、順序または名義のいずれかになります。順序変数では、データは特定の方法で順位付けられた順序付けられたカテゴリに分類されます。例としては、「スキルレベル」([`初心者`、`中級`、`上級`])があります。名義変数には値の間に順序がありません。例としては、「目の色」([`黒`、`茶色`、`青`、`緑`])があります。
  3. 時系列:時系列は、一定の間隔で収集された数値のシーケンスです。このデータは、以前の変数とは異なり、時間順に並べられています。米国の年間住宅価格の平均などが例です。
  4. テキスト:任意のドキュメントはテキストデータであり、通常は「単語の袋」として表現されます。

MLモデルに任意の変数を入力するには、それらを数値に変換する必要があります。エンコーディングと埋め込みの両方のテクニックがこのトリックを行います。

エンコーディング

エンコーディングは、テキスト、画像、音声などの生データをコンピュータが簡単に処理できる構造化された数値形式に変換するプロセスです。カテゴリカル変数をエンコードする方法は2つあります:

1️⃣ 整数エンコーディング

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

人工知能

「ナレ・ヴァンダニャン、Ntropyの共同創設者兼CEO- インタビューシリーズ」

Ntropyの共同創設者兼CEOであるナレ・ヴァンダニアンは、開発者が100ミリ秒未満で超人的な精度で金融取引を解析することを可...

機械学習

「機械学習 vs AI vs ディープラーニング vs ニューラルネットワーク:違いは何ですか?」

テクノロジーの急速な進化は、ビジネスが効率化のために洗練されたアルゴリズムにますます頼ることで、私たちの日常生活を形...

人工知能

「Zenの共同創設者兼CTO、イオン・アレクサンドル・セカラ氏によるインタビューシリーズ」

創業者兼CTOであるIon-Alexandru Secaraは、Zen(PostureHealth Inc.)の開発を牽引しており、画期的な姿勢矯正ソフトウェア...

人工知能

エンテラソリューションズの創設者兼CEO、スティーブン・デアンジェリス- インタビューシリーズ

スティーブン・デアンジェリスは、エンタラソリューションズの創設者兼CEOであり、自律的な意思決定科学(ADS®)技術を用いて...

人工知能

「パクストンAIの共同創業者兼CEO、タングイ・シャウ - インタビューシリーズ」

タングイ・ショウは、Paxton AIの共同創設者兼CEOであり、法的研究と起草の負担を軽減するためにGenerative AIを使用するプラ...

人工知能

キャルレールの最高製品責任者、ライアン・ジョンソンへのインタビューシリーズ

ライアンは、初期のスタートアップからフォーチュン100の組織まで、多様なテクノロジーと製品開発のリーダーシップ経験を15年...