基于强化学习的整体式AMHS防堵塞路径规划方法

作者：吴立辉; 李元生; 周秀; 张中伟^*

来源：工业工程与管理, 2023, 28(06): 119-130.

DOI：10.19495/j.cnki.1007-5429.2023.06.011

• AMHS
• 实时数据
• 强化学习
• 防堵塞
• 路径规划

整体式自动化物料运输系统（automated material handling system, AMHS）广泛应用于12英寸晶圆制造系统，AMHS中天车（overhead hoist transport, OHT）频繁堵塞严重制约AMHS的生产运输效率。为消减OHT堵塞，提出一种实时数据驱动强化学习（real-time data-driven reinforcement learning,RTDRL）的防堵塞路径规划方法。该方法根据导轨实时工况信息建立实时堵塞指标，基于实时堵塞指标与Q值对应的历史通行经验，构建动作选择策略进行路径优化决策，并设计奖励函数，提高Q值反映AMHS通行情况的真实性，从而提高防堵塞效果。实验研究表明，与现有OHT防堵塞路径规划方法相比，该方法在晶圆卡平均运输时间和晶圆卡平均等待时间指标方面具有更好的性能，有效减少堵塞发生，即RTDRL方法是有效的。

• 单位
  河南工业大学; 机电工程学院; 上海应用技术大学