ELECTRONIC SYNAPSES FOR REINFORCEMENT LEARNING

• Main Authors: MODHA, DHARMENDRA SHANTILAL, MONTOYE, ROBERT KEVIN, CHANG, LELAND
• Format: Patent
• Language: English; French
• Published: 24.07.2018
• Subjects: CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; PHYSICS

Embodiments of the invention provide electronic synapse devices for reinforcement learning. An electronic synapse is configured for interconnecting a pre-synaptic electronic neuron and a post-synaptic electronic neuron. The electronic synapse comprises memory elements configured for storing a state of the electronic synapse and storing meta information for updating the state of the electronic synapse. The electronic synapse further comprises an update module configured for updating the state of the electronic synapse based on the meta information in response to an update signal for reinforcement learning. The update module is configured for updating the state of the electronic synapse based on the meta information, in response to a delayed update signal for reinforcement learning based on a learning rule. Des modes de réalisation de l'invention concernent des dispositifs synaptiques électroniques pour un apprentissage par renforcement. Une synapse électronique est configurée pour interconnecter un neurone électronique présynaptique et un neurone électronique postsynaptique. La synapse électronique comprend des éléments de mémoire configurés pour enregistrer un état de la synapse électronique et enregistrer des méta-informations pour mettre à jour l'état de la synapse électronique. La synapse électronique comprend également un module de mise à jour configuré pour mettre à jour l'état de la synapse électronique d'après les méta-informations en réponse à un signal de mise à jour pour un apprentissage par renforcement. Le module de mise à jour est configuré pour mettre à jour l'état de la synapse électronique d'après les méta-informations, en réponse à un signal de mise à jour retardé pour un apprentissage par renforcement basé sur une règle d'apprentissage.