化学プロセス開発のためのモデルフリー強化学習

化学プロセス開発のモデルフリー強化学習

普遍的な化学プロセスオペレータへの取り組み

Alex Kondratievによる写真、Unsplashから

はじめに

プロセス開発設計最適化、および制御は、化学およびプロセスエンジニアリングにおける主な任務のいくつかです。具体的には、特定の目標(収率やスループットなど)を最大化し、潜在的な制約(入力濃度、流量、反応器容積、溶媒の沸点など)を尊重しながら、最適なレシピまたは適切な装置またはプロセスパラメータの構成を見つけることです(実験室実験を通じて)。これらのタスクを自動化することにより、例えば実験室のロボットを介して、多くの手作業を節約することができます。

最近の強化学習(RL)の進歩により、エージェントは複雑なタスクをマスターし、さまざまなゲームをプレイしたり、行列演算のためのより効率的な数学的手順を発見したりすることが明らかになりました。実験または数値シミュレーションから得られる運動学パラメータを用いることで、エージェントは最適な構成と合成レシピを見つけることができます。ただし、凸最適化とは異なり、アルゴリズム/モデルは直接プロセス制御に使用できます。このような実験は、メソッドのサンプル効率に応じて、コンピュータ上または直接実験室で行われることがあります。長期的には、これによりプロセス開発が(一部)自動化されるでしょう。この記事の目的は、パラセタモールの例を用いて、近接方策最適化(PPO)を使用して、これを説明することです。

問題の定義

ここでは、コンピュータプログラム、いわゆるエージェント、つまり普遍的な化学プロセスオペレータがあります。このオペレータは、化学操作、つまりアクションを実行できる環境に存在します。このようなアクションには、成分Aの投与、入出力フローの増減、温度の増減などが含まれます。エージェントがアクションを実行すると、特定の成分の濃度などの状態に応じて、新しい状態に移行します。

パラセタモール(PC)は、p-アミノフェノール(AP)酢酸無水物(AA)から合成されます(図1a参照)。既知の運動学に基づいて、このプロセスはモデル化され、環境を表すことができます。例えば、連続式攪拌槽反応器(CSTR)として図…に示されています。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

人工知能

「死ぬ前に試してみる必要がある9つの最高のAIウェブサイト」

「これらのAIウェブサイトで生産性を倍増させましょう」

機械学習

「拡散を支配するための1つの拡散:マルチモーダル画像合成のための事前学習済み拡散モデルの調節」

画像生成AIモデルは、ここ数ヶ月でこの領域を席巻しています。おそらく、midjourney、DALL-E、ControlNet、またはStable dDif...

AIニュース

「ChatGPTのコピーライターへの影響:AIと統合された未来における苦悩と希望」

人工知能の台頭は、コンテンツ作成の世界を含むさまざまな産業を確実に変革しました。しかし、最近のニューヨークポストの報...

AIニュース

「2023年のAI タイムライン」

はじめに 人工知能(AI)は、技術的な進歩が人間のつながりの本質と共鳴する形で私たちの日常生活と交差する魅力的な領域です...

人工知能

「2023年に試してみることができるChatGPTのトップ22の代替品(無料および有料)」

ChatGPTは、さまざまなタスクにおいて最も有名で一般的に使用されているAIツールです。さまざまなコースや教材があり、その潜...

データサイエンス

レコメンダーシステムにおけるPrecision@NとRecall@Nの解説

Accuracy Metrics(正解率指標)は、機械学習の全体的なパフォーマンスを評価するための有用な指標であり、データセット内の...