CONTROLLING A MANUFACTURING SCHEDULE BY A REINFORCEMENT LEARNING TRAINED AGENT

• Main Authors: LOHSE, Oliver, ROBL, Peter
• Format: Patent
• Language: English; French
• Published: 22.09.2022
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; CONTROL OR REGULATING SYSTEMS IN GENERAL; CONTROLLING; COUNTING; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS ORELEMENTS; PHYSICS; REGULATING

In conclusion the invention concerns a method for controlling a manufacturing schedule to manufacture a product (1, n) in an industrial manufacturing environment (100), a method for training an agent (AG1, AGn) by reinforcement learning to control manufacturing schedule for manufacturing a product (1, n) and an industrial controller (1000). To improve the capability to react to unforeseen events in an industrial manufacturing process, while producing products with a high efficiency it is proposed to: - provide a product specific state observation (s1, sn) corresponding to the product (1, n) to a trained agent (AG1, AGn) as an input, - determining a subsequent manufacturing step (MS+1) for the product (1, n) as an action (a1, an), and - performing the subsequent manufacturing step (MS+1) of the action (a1, an). En conclusion, l'invention concerne un procédé permettant de contrôler un calendrier de fabrication pour fabriquer un produit (1, n) dans un environnement de fabrication industrielle (100), un procédé de formation d'un agent (AG1, AGn) par apprentissage par renforcement pour contrôler le calendrier de fabrication pour la fabrication d'un produit (1, n) et un dispositif de commande industriel (1000). Afin d'améliorer la capacité de réaction face à des événements imprévus dans un procédé de fabrication industrielle, tout en produisant des produits avec un rendement élevé, il est proposé : - de fournir une observation d'état spécifique au produit (s1, sn) correspondant au produit (1, n) à un agent formé (AG1, AGn) en tant qu'entrée, - de déterminer une étape de fabrication ultérieure (MS+1) pour le produit (1, n) en tant qu'action (a1, an), et - de réaliser l'étape de fabrication ultérieure (MS+1) de l'action (a1, an).