Search Results A

「データサイエンティストになる夢を諦めなかった8つの理由と、あなたも諦めるべきではない理由」

「私は今、2年間Spotifyでデータサイエンティストとして働いていますが、ビジネスからデータサイエンスへのキャリアチェンジは、私がこれまでにした最高の決断の一つであると言えますそれは...」

「機械学習支援コンピュータアーキテクチャ設計のためのオープンソースジムナジウム」

Amir Yazdanbakhsh氏、研究科学者およびVijay Janapa Reddi氏、訪問研究者、Google Research コンピュータアーキテクチャの研究は、コンピュータシステムの設計を評価し形成するためのシミュレータとツールの開発の長い歴史があります。たとえば、SimpleScalarシミュレータは1990年代末に導入され、さまざまなマイクロアーキテクチャのアイデアを探索することができました。gem5、DRAMSysなどのコンピュータアーキテクチャのシミュレータとツールは、コンピュータアーキテクチャの研究の進歩において重要な役割を果たしてきました。その後、これらの共有リソースとインフラストラクチャは、産業界と学界の両方に利益をもたらし、研究者がお互いの業績を体系的に積み重ねることを可能にし、この分野での重要な進展をもたらしました。それにもかかわらず、コンピュータアーキテクチャの研究は進化し続けており、産業界と学界は機械学習（ML）最適化に向かって進んでいます。これには、コンピュータアーキテクチャのためのML、TinyMLアクセラレーションのためのML、DNNアクセラレータデータパス最適化、メモリコントローラ、消費電力、セキュリティ、プライバシーなど、厳格な特定のドメイン要件が含まれます。以前の研究は、設計最適化におけるMLの利点を示していますが、強力で再現性のあるベースラインの欠如は、異なる方法間での公平で客観的な比較を妨げ、展開にいくつかの課題を提起しています。着実な進歩を確保するためには、これらの課題を共同で理解し対処することが重要です。これらの課題を緩和するために、「ArchGym：機械学習支援アーキテクチャ設計のためのオープンソースジム」というタイトルでISCA 2023で採用された論文において、ArchGymを紹介しました。ArchGymにはさまざまなコンピュータアーキテクチャシミュレータとMLアルゴリズムが含まれています。ArchGymの利用により、十分な数のサンプルがあれば、さまざまなMLアルゴリズムのいずれかが各ターゲット問題の最適なアーキテクチャ設計パラメータセットを見つけることができることが示されています。どの解決策も必ずしも他の解決策よりも優れているわけではありません。これらの結果はまた、与えられたMLアルゴリズムの最適なハイパーパラメータを選択することが、最適なアーキテクチャ設計を見つけるために不可欠であることを示していますが、それらを選択することは容易ではありません。私たちは、複数のコンピュータアーキテクチャシミュレーションとMLアルゴリズムを含むコードとデータセットを公開します。機械学習支援アーキテクチャ研究の課題機械学習支援アーキテクチャ研究には、次のようないくつかの課題があります：特定の機械学習支援コンピュータアーキテクチャ問題（たとえば、DRAMコントローラの最適な解を見つける）に対して、最適なMLアルゴリズムやハイパーパラメータ（学習率、ウォームアップステップなど）を特定するための体系的な方法がありません。ランダムウォークから強化学習（RL）まで、MLとヒューリスティックな手法の幅広い範囲がDSEのために使用される可能性があります。これらの手法は、ベースラインの選択に比べて顕著な性能向上を示していますが、最適化アルゴリズムやハイパーパラメータの選択が改善の要因であるかどうかは明確ではありません。したがって、ML支援アーキテクチャDSEの再現性を確保し、普及を促進するために、体系的なベンチマーキング方法を明示する必要があります。コンピュータアーキテクチャシミュレータは、アーキテクチャのイノベーションの基盤となっていましたが、アーキテクチャの探索における正確性、速度、コストのトレードオフに対応する必要が出てきています。性能推定の正確性と速度は、サイクル精度とMLベースのプロキシモデルなどの基礎となるモデリングの詳細によって大きく異なります。解析的またはMLベースのプロキシモデルは詳細なレベルの詳細を捨てることによって俊敏性を持ちますが、一般に高い予測エラーを抱えます。また、商業ライセンスにより、シミュレータから収集された実行回数には厳しい制限がある場合があります。全体として、これらの制約は、パフォーマンスとサンプル効率のトレードオフに影響を与え、アーキテクチャ探索のための最適化アルゴリズムの選択に影響を与えるものです。これらの制約の下でさまざまなMLアルゴリズムの効果を体系的に比較する方法を明確にすることは困難です。最後に、MLアルゴリズムの状況は急速に変化しており、一部のMLアルゴリズムはデータを必要とします。また、DSEの結果をデータセットなどの有意義な成果物に変換することは、設計空間に関する洞察を得るために重要です。この急速に変化するエコシステムでは、探索アルゴリズムのオーバーヘッドをどのように分散するかが重要です。基礎となる探索アルゴリズムには無関係に、探索データをどのように活用するかは明白ではなく、体系的に研究されていません。 ArchGymの設計 ArchGymは、異なるMLベースの探索アルゴリズムを公平に評価するための統一されたフレームワークを提供することによって、これらの課題に対処しています。主なコンポーネントは2つあります：1）ArchGym環境、および2）ArchGymエージェントです。環境は、アーキテクチャのコストモデルをカプセル化しています。これには、レイテンシ、スループット、面積、エネルギーなどが含まれます。アーキテクチャパラメータのセットに基づいて、ワークロードを実行するための計算コストを決定するためのものです。エージェントは、探索に使用されるMLアルゴリズムをカプセル化しています。これにはハイパーパラメータとガイドポリシーが含まれます。ハイパーパラメータは、最適化されるモデルに固有のアルゴリズムにとって内在的なものであり、パフォーマンスに大きな影響を与えることがあります。一方、ポリシーは、エージェントが反復的にパラメータを最適化するためにどのように選択するかを決定します。特に、ArchGymにはこれらの2つのコンポーネントを接続する標準化されたインターフェースも含まれており、同時に探索データをArchGymデータセットとして保存します。インターフェースは、ハードウェアの状態、ハードウェアのパラメータ、およびメトリックスという3つの主要なシグナルから成り立っています。これらのシグナルを使用して、エージェントはハードウェアの状態を観測し、ハードウェアのパラメータのセットを提案し、（ユーザー定義の）報酬を反復的に最適化します。報酬は、パフォーマンス、エネルギー消費などのハードウェアのパフォーマンスメトリックスの関数です。 ArchGymは、ArchGym環境とArchGymエージェントの2つの主要なコンポーネントで構成されています。ArchGym環境はコストモデルをカプセル化し、エージェントはポリシーとハイパーパラメーターの抽象化です。これらの2つのコンポーネントを接続する標準化されたインターフェースにより、ArchGymは異なるMLベースの探索アルゴリズムを公平に評価する統一されたフレームワークを提供し、探索データをArchGymデータセットとして保存します。 MLアルゴリズムはユーザー定義のターゲット仕様を満たすために同様に好ましいです ArchGymを使用して、さまざまな最適化目標とDSE問題において、他のMLアルゴリズムと同じハードウェアのパフォーマンスをもたらす少なくとも1つのハイパーパラメータのセットが存在することを実証的に示します。MLアルゴリズムまたはそのベースラインの適切に選択されていない（ランダムな選択）ハイパーパラメータは、特定のMLアルゴリズムの特定のファミリーが他のアルゴリズムよりも優れているという誤った結論につながる可能性があります。私たちは、十分なハイパーパラメータの調整により、ランダムウォーク（RW）を含むさまざまな探索アルゴリズムが最良の報酬を特定できることを示します。ただし、適切なハイパーパラメータのセットを見つけるには、徹底的な探索または運も必要な場合があります。十分な数のサンプルがあれば、一連の探索アルゴリズムにわたって同じパフォーマンスをもたらす少なくとも1つのハイパーパラメータのセットが存在します。ここで、破線は最大の正規化報酬を示しています。Cloud-1、cloud-2、stream、randomはDRAMSys（DRAMサブシステム設計空間探索フレームワーク）の4つの異なるメモリトレースを示しています。データセットの作成と高精度プロキシモデルのトレーニング ArchGymを使用して統一されたインターフェースを作成することは、アーキテクチャシミュレーションの速度を向上させるためのデータ駆動型のMLベースのプロキシアーキテクチャコストモデルの設計に使用できるデータセットの作成を可能にします。アーキテクチャコストを近似するためのMLモデルを評価するために、ArchGymはDRAMSysからの各ランのデータを記録する能力を活用して、4つのデータセットバリアントを作成します。各バリアントには、2つのカテゴリを作成します：（a）異なるエージェント（ACO、GA、RW、BO）から収集されたデータを表す「多様なデータセット」と、（b）ACOエージェントのみから収集されたデータを示す「ACOのみ」。これらのデータセットはArchGymとともにリリースされます。私たちは、各データセットでランダムフォレスト回帰を使用してプロキシモデルをトレーニングし、DRAMシミュレータの設計のレイテンシを予測することを目的としています。私たちの結果は次のとおりです：データセットのサイズを増やすと、平均正規化二乗平均誤差（RMSE）はわずかに減少します。…

「すべてのデータを理解する」

アベル・サンチェスは、産業や経営者がデータを理解し、それを利用して収益を向上させるために、彼らの運営を変える手助けをしています

自動化された進化が厳しい課題に取り組む

強化学習は、ラベルのないデータを好みの集合にグループ化することを目指し、人間による評価関数から得られる累積報酬を最大化することを目指しています

フルスケールのゲームプレイ：「ドラゴンズドグマ：ダークアリズン」がGeForce NOWに登場

メンバーの皆さん、おはようございます！カプコンの伝説的なロールプレイングゲーム「ドラゴンズドグマ：ダークアリズン」が本日GeForce NOWライブラリに加わりました。このRPGとTHQ Nordicの「ジャギッド・アライアンス3」は、ほぼすべてのデバイスでプレイできるようになりました。夜明けから質屋まで「ドラゴンズドグマ：ダークアリズン」では、一人で行くのは危険ですので、パーンを連れて行きましょう。カプコンの評価が高いRPGで、アリズンになって挑戦してみましょう。広大なオープンワールドで展開される「ドラゴンズドグマ：ダークアリズン」は、厳しい戦闘とアクションに満ちた壮大な冒険をプレイヤーにもたらします。しかし、一人で戦わなくても大丈夫です。最大3人のパーンと一緒に冒険しましょう。これらのカスタマイズ可能なAIの仲間は、独立して戦い、各プレイヤーから学んだ特性に基づいて熟練度と能力を示します。プレイヤーは自分のパーンをオンラインで共有することができ、恐ろしい敵に立ち向かうための宝物、ヒント、戦略的なヒントを受け取ることができます。また、さまざまな難しいクエストを完了するために特定のスキルが必要な場合には、パーンを借りることもできます。グランシスを再訪するか、初めて「ドラゴンズドグマ」を体験してみましょう。メンバーは、Macやモバイルデバイス、スマートテレビなどのデバイスでも、美しいビジュアルと高解像度のグラフィックスをサポートする、本物のSteamバージョンのこのRPGクラシックをプレイできます。最優先メンバーは、1080p 60fpsの冒険を楽しむことができます。また、アルティメットメンバーシップへのアップグレードでは、最大4K 120fpsでのゲームプレイ、より長いストリーミングセッション、サポートされるゲームでのRTX ONも楽しむことができます。ゲームオンクラウドが準備万端です。新しい週が始まると、新しいゲームが登場します。 THQ Nordicの戦術RPG「ジャギッド・アライアンス3」が今週クラウドに加わりました。豊富な天然資源と深い政治的分裂を持つ国、グランドシャンの選ばれた大統領が行方不明になり、パラミリタリー部隊「ザ・レギオン」が田舎を制圧して混乱が広がります。ユニークな傭兵団から選び、国の運命に影響を与える選択をしましょう。今週は以下のゲームが登場します：ジャギッド・アライアンス3（Steamにて新リリース、7月14日）ドラゴンズドグマ：ダークアリズン（Steam）さらに、英国最大かつ最速のモバイルネットワークであるEEとのコラボレーションにより、GeForce NOWはPriorityメンバーシップとUltimateメンバーシップを特集した新しいクラウドゲームバンドルを発売しました。それを記念して、ストリーマーのLeah ‘Leahviathan’…