化学プロセス開発のためのモデルフリー強化学習

化学プロセス開発のモデルフリー強化学習

普遍的な化学プロセスオペレータへの取り組み

Alex Kondratievによる写真、Unsplashから

はじめに

プロセス開発設計最適化、および制御は、化学およびプロセスエンジニアリングにおける主な任務のいくつかです。具体的には、特定の目標(収率やスループットなど)を最大化し、潜在的な制約(入力濃度、流量、反応器容積、溶媒の沸点など)を尊重しながら、最適なレシピまたは適切な装置またはプロセスパラメータの構成を見つけることです(実験室実験を通じて)。これらのタスクを自動化することにより、例えば実験室のロボットを介して、多くの手作業を節約することができます。

最近の強化学習(RL)の進歩により、エージェントは複雑なタスクをマスターし、さまざまなゲームをプレイしたり、行列演算のためのより効率的な数学的手順を発見したりすることが明らかになりました。実験または数値シミュレーションから得られる運動学パラメータを用いることで、エージェントは最適な構成と合成レシピを見つけることができます。ただし、凸最適化とは異なり、アルゴリズム/モデルは直接プロセス制御に使用できます。このような実験は、メソッドのサンプル効率に応じて、コンピュータ上または直接実験室で行われることがあります。長期的には、これによりプロセス開発が(一部)自動化されるでしょう。この記事の目的は、パラセタモールの例を用いて、近接方策最適化(PPO)を使用して、これを説明することです。

問題の定義

ここでは、コンピュータプログラム、いわゆるエージェント、つまり普遍的な化学プロセスオペレータがあります。このオペレータは、化学操作、つまりアクションを実行できる環境に存在します。このようなアクションには、成分Aの投与、入出力フローの増減、温度の増減などが含まれます。エージェントがアクションを実行すると、特定の成分の濃度などの状態に応じて、新しい状態に移行します。

パラセタモール(PC)は、p-アミノフェノール(AP)酢酸無水物(AA)から合成されます(図1a参照)。既知の運動学に基づいて、このプロセスはモデル化され、環境を表すことができます。例えば、連続式攪拌槽反応器(CSTR)として図…に示されています。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

AIニュース

「英国初のAIカメラ、わずか3日で300人の犯罪者を摘発」

イギリスの道路安全の風景は、フリースタンディングの人工知能(AI)道路安全カメラの登場によって革命的な変革を遂げていま...

人工知能

150以上のミッドジャーニーロゴのプロンプト

「Midjourneyのような生成AIツールを使って、ビジネスのために美しいロゴを作成することができます」

AIテクノロジー

「FinTech API管理におけるAIの力を解き放つ:製品マネージャーのための包括的なガイド」

この包括的なガイドでは、AIが金融技術のAPI管理に果たす変革的な役割を探求し、各セクションごとに実世界の例を提供していま...

データサイエンス

データサイエンスのプロフェッショナルにおすすめのトップ5のAIツール

イントロダクション 今日のデータ主導の世界では、データサイエンスは情報の活用とイノベーションにおいて重要な分野となって...

機械学習

Google AIは、アクティブノイズキャンセリング(ANC)ヘッドフォンのための人工知能搭載の革新的な心臓モニタリングモダリティである音響脈波計(APG)を導入します

コンシューマーエレクトロニクスと健康技術の分野において、活発なノイズキャンセリング(ANC)ウェアラブルに健康モニタリン...

機械学習

Microsoft BingはNVIDIA Tritonを使用して広告配信を高速化

Jiusheng Chen氏のチームは加速しました。 彼らは、NVIDIA Triton Inference ServerをNVIDIA A100 Tensor Core GPUで実行する...