化学プロセス開発のためのモデルフリー強化学習

化学プロセス開発のモデルフリー強化学習

普遍的な化学プロセスオペレータへの取り組み

Alex Kondratievによる写真、Unsplashから

はじめに

プロセス開発設計最適化、および制御は、化学およびプロセスエンジニアリングにおける主な任務のいくつかです。具体的には、特定の目標(収率やスループットなど)を最大化し、潜在的な制約(入力濃度、流量、反応器容積、溶媒の沸点など)を尊重しながら、最適なレシピまたは適切な装置またはプロセスパラメータの構成を見つけることです(実験室実験を通じて)。これらのタスクを自動化することにより、例えば実験室のロボットを介して、多くの手作業を節約することができます。

最近の強化学習(RL)の進歩により、エージェントは複雑なタスクをマスターし、さまざまなゲームをプレイしたり、行列演算のためのより効率的な数学的手順を発見したりすることが明らかになりました。実験または数値シミュレーションから得られる運動学パラメータを用いることで、エージェントは最適な構成と合成レシピを見つけることができます。ただし、凸最適化とは異なり、アルゴリズム/モデルは直接プロセス制御に使用できます。このような実験は、メソッドのサンプル効率に応じて、コンピュータ上または直接実験室で行われることがあります。長期的には、これによりプロセス開発が(一部)自動化されるでしょう。この記事の目的は、パラセタモールの例を用いて、近接方策最適化(PPO)を使用して、これを説明することです。

問題の定義

ここでは、コンピュータプログラム、いわゆるエージェント、つまり普遍的な化学プロセスオペレータがあります。このオペレータは、化学操作、つまりアクションを実行できる環境に存在します。このようなアクションには、成分Aの投与、入出力フローの増減、温度の増減などが含まれます。エージェントがアクションを実行すると、特定の成分の濃度などの状態に応じて、新しい状態に移行します。

パラセタモール(PC)は、p-アミノフェノール(AP)酢酸無水物(AA)から合成されます(図1a参照)。既知の運動学に基づいて、このプロセスはモデル化され、環境を表すことができます。例えば、連続式攪拌槽反応器(CSTR)として図…に示されています。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

AIニュース

「AIがバービーの画像を作成し、人種差別の批判を受ける」

近日、バービーの映画に関する話題の中で、異なる国を表すAI生成のバービーの画像がインターネット上で話題となっています。...

機械学習

ソフトウェア開発におけるAIの将来:トレンドとイノベーション

「ソフトウェア開発におけるAIの絶え間なく変化する風景を探索してくださいコーディングやプログラミングの未来を形作る新興...

データサイエンス

「生成AIの組織化:データサイエンスチームから得た5つの教訓」

「経営陣が曖昧な約束をした後、新しいGen AIの機能が組織全体に組み込まれることを利害関係者に約束した後、あなたのタイガ...

コンピュータサイエンス

ジェイソン・アーボン:「100万年後、超強力なコンピュータは私たちの時代のテスターを尊重するでしょう」

「AIのテストにおける利用、やや公平でないマニュアルQA vs. 自動化QAの葛藤、指数関数的に発展する新しい技術によるテスター...

データサイエンス

スコア! チームNVIDIAが推薦システムでトロフィーを獲得しました

5人の機械学習の専門家が4つの大陸に分散し、最先端のレコメンデーションシステムを構築するための激しい競争で3つのタスク全...

人工知能

「製造業におけるAIの10の注目すべきユースケース」

現代製造業の急速な進化の中で、人工知能(AI)の導入が類を見ない革命を引き起こしました。本記事では、製造業におけるAIの...