Overview
GPT-4oを用いた麻酔学シミュレーション自動化システムの開発
複数のエージェントが医療モニターの波形を認識し、状況判断と操作実行を連携させることで、シミュレーションを自律的に進行できる構成を実現しました。
Project Facts
- 依頼者
- 某医療機関 麻酔科様
- 提供内容
- 自律操作エージェント / 画面認識 / シナリオ判断
- 対象
- Anesthesia simSTAT
- 目的
- 研究・論文執筆支援 / 医療教育の効率化
開発目的
麻酔学分野におけるAI技術の統合研究、および論文執筆のために開発されました。
AIがシミュレーション環境で適切な判断と対応を行えるかを検証し、将来的には医療教育・訓練の効率化につなげることを目指しています。
システム構成
- 画面認識エージェント：シミュレーション画面をキャプチャし、GPT-4oの画像認識でモニター波形や状態を解析
- 意思決定エージェント：認識結果に基づき、適切な麻酔処置や対応を選択
- 操作実行モジュール：PyAutoGUIによりシミュレーションソフトへ自動操作を実行
画面イメージ
Anesthesia simSTAT上での波形認識と操作自動化の様子。
成果
GPT-4oの高度な画像認識と医療知識を活用し、複雑なシミュレーション内での状況判断と操作実行を自律的に行える構成を確立しました。
複数エージェントによる役割分担を採用することで、安定した解析と意思決定、操作の自動化を実現しています。