Search Results App Store

微調整、再教育、そして更なる進化：カスタムLLMで前進

イントロダクションほとんどの方はすでにChatGPTを使用したことがあると思います。それは素晴らしいことです。なぜなら、この記事で私たちが始める旅の最初のステップを踏んでくれたからです！新しい技術をマスターするには、まずそれを使ってみることが重要です。それは水に飛び込んで泳ぎを覚えるようなものです！🏊‍♂️ もしGenAIを探求したいのであれば、現実の問題を選び、それを解決するためのアプリケーションの構築を始めてください。GenAIの中心にあるのは、ファウンデーションモデル（FM）とも呼ばれる大規模言語モデル（LLM）です。モデルの消費者、調整者、ビルダーについては聞いたことがあるかもしれませんが、さらに詳しく説明します。 McKinseyは、それを受け手、形作り手、創り手として捉えており、GenAI Recogniseセッションで言及しています。この記事では、それぞれのレイヤーを詳しく見ていきます。プラットフォームの増殖を使用例としてそれをさらに詳しく掘り下げるために、すべてがはっきりとわかる実例に目を向けましょう。現代のテクノロジーの風景では、ほとんどのアプリが複数のプラットフォームで動作する必要があることは当然です。しかし、その中には注意点があります。各プラットフォームには独自のインターフェースと特異性があります。追加のプラットフォームへのアプリケーションのサポート拡張とそのようなマルチプラットフォームアプリケーションのメンテナンスは同じくらい困難です。しかし、そこでGenAIが駆けつけて救いの手を差し伸べます。GenAIは、プラットフォームに関係なく、アプリケーションのために統一されたユーザーフレンドリーなインターフェースを作成することを可能にします。その魔法の材料は何でしょうか？大規模言語モデル（LLM）がこのインターフェースを自然で直感的な言語に変換するのです。 Linux、Windows、Macコマンドさらに理解を深めるために、例えば私たちのマシンがLinux、Windows、またはMacである場合に、異なるシナリオごとに実行すべき正確なコマンドを知りたいとしましょう。以下の図は1つのシナリオを示しています：エンドユーザーとアプリケーション開発者への価値エンドユーザーとしては、各プラットフォームごとのコマンドを学び/知る必要がなく、自然かつ直感的に作業を完了できます。アプリケーションの開発者としては、ユーザーに見えるアプリケーションのインターフェースを、それぞれのサポートされるプラットフォームに明示的に変換する必要はありません。参照アーキテクチャ Open AIやAzure Open AIなどのさまざまなプロバイダーが提供するクラウドには、GPT3、GPT3.5、およびGPT4を含む複数のLLMが存在します。これらは補完、チャット補完などのさまざまなAPIを介して簡単にアクセスできます。 AIオーケストレータは、モデルとプロバイダー間のモデルとモデルの統一化されたアクセスをさらにシームレスにします。そのため、GenAIアプリケーションは、基礎となるプロバイダーやモデルと直接対話するのではなく、AIオーケストレータと対話します。そして、アプリケーションが必要とするように、構成可能で、または複数の基礎となるプロバイダーやモデルとのオーケストレーションを処理します。柔軟性とモジュラリティのために、アプリケーションがサポートする各プラットフォームにはプラグインを持つことができます。これから続くセクションでは、これらのプラグインとオーケストレータで行えることについて詳しく説明します。最後に、アプリケーションにはGenAIによって生成されたコマンドを実行するためにサポートするプラットフォームとの接続があります。参照テクノロジー AIオーケストレータ：…

ML向けETLの構築に関するベストプラクティス

この記事では、トレーニングデータセットを構築するためのETLのいくつかのベストプラクティスについて取り上げていますMLに適用されるいくつかのソフトウェアエンジニアリングの技術とパターンについて深く探求しています

Data Engineering

フーリエ変換を用いた季節変動のモデリング

「ターゲットデータにフーリエ変換を適用して、時系列予測モデルの性能を向上させる方法」

初心者のためのZenML完全ガイド：MLOpsの簡素化

データサイエンス、機械学習、またはMLOpsに初めて取り組み、ツールの選択肢に圧倒されていますか？ ZenMLを考慮してみてください-効率化されたプロダクションパイプラインのためのオーケストレーションツールです。この記事では、ZenMLの機能と特徴について調査し、MLOpsの旅を簡素化します。学習目標 ZenMLの概念とコマンド ZenMLを使用したパイプラインの作成メタデータのトラッキング、キャッシング、およびバージョニングパラメータと設定 ZenMLの高度な機能この記事はData Science Blogathonの一部として公開されました。まず、ZenMLが何であるか、他のツールとの違い、そしてそれをどのように利用するかを把握しましょう。 ZenMLとは何ですか？ ZenMLは、データサイエンティスト、MLエンジニア、およびMLOps開発者向けのオープンソースのMLOps（機械学習オペレーション）フレームワークです。本番用のMLパイプラインの開発におけるコラボレーションを容易にします。 ZenMLは、そのシンプルさ、柔軟性、およびツールに依存しない性質で知られています。 MLワークフローに特化したインターフェースと抽象化を提供し、ユーザーが好みのツールをシームレスに統合し、ユニークな要件に合わせてワークフローをカスタマイズできるようにします。なぜZenMLを使うべきですか？ ZenMLは、データサイエンティスト、MLエンジニア、およびMLOpsエンジニアにいくつかの重要な利点をもたらします：簡素化されたパイプラインの作成： @stepおよび@pipelineデコレータを使用して簡単にMLパイプラインを構築できます。容易なメタデータのトラッキングとバージョニング： ZenMLは、パイプライン、実行、コンポーネント、アーティファクトを追跡するユーザーフレンドリーなダッシュボードを提供します。自動化された展開： ZenMLは、パイプラインとして定義されている場合に自動的に展開することで、モデルの展開を効率化し、カスタムドッカーイメージの必要性を排除します。…

「MLOpsを活用した顧客離反予測プロジェクト」

イントロダクションデータサイエンスと聞くと、まず思い浮かぶのはノートブック上でモデルを構築しデータをトレーニングすることです。しかし、実際の世界のデータサイエンスでは、このような状況はありません。実際の世界では、データサイエンティストはモデルを構築し、それを本番環境に展開します。本番環境には、モデルの開発、展開、信頼性の間にギャップがあり、効率的でスケーラブルな運用を実現するために、データサイエンティストはMLOps（Machine Learning Operations）を使用します。MLOpsは本番環境でMLアプリケーションを構築し展開するための手法です。この記事では、MLOpsを使用して、顧客の離反予測プロジェクトを構築し展開します。学習目標この記事では、次のことを学びます：プロジェクトの概要 ZenMLとMLOpsの基礎を紹介します予測のためにモデルをローカルに展開する方法を学びますデータの前処理とエンジニアリング、モデルのトレーニングと評価に入ります。この記事はData Science Blogathonの一部として公開されました。プロジェクトの概要まず、プロジェクトの内容を理解する必要があります。このプロジェクトでは、通信会社からのデータセットを使用します。このデータセットを使用して、ユーザーが会社のサービスを継続するかどうかを予測するモデルを構築します。このMLアプリケーションを構築するために、ZenmMLとMLFlowの助けを借ります。プロジェクトのワークフローは以下の通りです。プロジェクトのワークフローデータ収集データの前処理モデルのトレーニングモデルの評価展開 MLOpsとは？ MLOpsは、開発から展開、継続的なメンテナンスまでのエンドツーエンドの機械学習ライフサイクルです。MLOpsは、機械学習モデルのライフサイクル全体を効率的かつスケーラブルに自動化することで、拡張性、信頼性、効率性を確保します。簡単な例を使って説明しましょう：…

「LangChainとOpenAIを使用して文書の理解を向上させる方法」

ジェネレーティブAIと言語モデルの飛躍的な成長により、文書から情報を理解し抽出する能力が向上しており、私たちはGPTのような機械が人間を支援する新たな時代を目撃しています

エッジでの視覚品質検査のためのエンド・ツー・エンドMLOpsパイプラインの構築-パート2

このシリーズの第1部では、エッジでの視覚品質検査ケースのためのエンドツーエンドのMLOpsパイプラインのアーキテクチャを作成しましたデータのラベリングからモデルのトレーニング、エッジでの展開まで、機械学習（ML）プロセス全体を自動化するために設計されていますマネージドおよびサーバーレスのサービスに焦点を当てることで、[…]を削減します

「AWS AI サービスと Amazon Bedrock によるインテリジェントドキュメント処理」

ヘルスケア、ファイナンス、法律、小売、製造などの業界の企業は、日々の業務の一環として大量の書類を扱うことがよくありますこれらの書類には、タイムリーな意思決定を促進し、一流の顧客満足度を確保し、顧客の離反を減らすために不可欠な重要情報が含まれています伝統的には、書類からのデータの抽出は...

Amazon

「Amazon SageMaker JumpStartを使用してFalconでHCLS文書要約アプリケーションを作成する」

健康医療と生命科学（HCLS）の顧客は、より多くのデータを活用するために生成AIをツールとして採用していますユースケースには、ドキュメントの要約化が含まれており、読者が文書の要点に焦点を当てるのを支援し、非構造化テキストを標準化された形式に変換して重要な属性を強調することがあります固有のデータ形式と厳格な規制要件がありますので、顧客の要件に対応するために[…]

「Solana（SOL）を購入する方法」

第4世代のブロックチェーンおよび仮想通貨であるSolana（SOL）は、驚異的なスケーラビリティを提供するためにオープンなインフラストラクチャを活用して自己を区別していますこのネットワークは、革新的で独特な技術の一連を導入し、ユーザーが前例のないトランザクションの速度とエンタープライズクラスのセキュリティを体験することを保証しますその結果、2017年の創設以来、ネットワークは大幅に拡大し、現在は簡単に... Solana（SOL）の購入方法はこちら »

Tech

Learn more about Search Results App Store - Page 11