Abram Amsel – 1922 2006

Abram Amsel

  • Décembre 1922, Montréal – 2006
  • Canadienne
  • Néobéhaviorisme médiationnel
Révisé scientifiquement · Dr. Marwa Abd-Alazim · octobre 14, 2026
Revu médicalement et scientifiquement Vérifié le : octobre 14, 2026
Dr. Marwa Abd-Alazim PhD in Psychology
Faculty Member • University of Kerbala
Critères d'évaluation et normes cliniques

Ce contenu fait l'objet d'un examen scientifique rigoureux et de normes éditoriales médicales afin de garantir l'exactitude clinique et la conformité aux directives fondées sur des preuves (APA / OMS).

Contributions majeures

  • Théorie de la frustration
  • Effet d'extinction du renforcement partiel (PREE)
  • Dispositif expérimental du double couloir

Biographie

L’histoire de la psychologie scientifique du XXe siècle demeure profondément marquée par les débats théoriques qui ont cherché à percer les mystères de la motivation, de l’apprentissage et de la persistance comportementale. Alors que le béhaviorisme classique, sous l’impulsion de pionniers tels que John B. Watson et plus tard B.F. Skinner, préconisait une approche strictement descriptive écartant toute référence aux états internes de l’organisme, un courant parallèle et dissident a vu le jour. Ce courant, qualifié de néobéhaviorisme médiationnel, s’est efforcé de concilier la rigueur méthodologique du positivisme logique avec la nécessité d’intégrer des variables intermédiaires inobservables au sein de l’équation stimulus-réponse. C’est dans ce cadre épistémologique particulièrement fécond que s’inscrit la figure monumentale d’Abram Amsel (1922-2006), dont les travaux ont révolutionné notre compréhension des dynamiques affectives et de leur rôle déterminant dans la plasticité adaptative des vertébrés.

Abram Amsel est universellement reconnu pour avoir élaboré et défendu, durant plus d’un demi-siècle, la théorie de la frustration. Cette construction théorique remarquable a permis de résoudre l’un des paradoxes les plus déroutants de la psychologie de l’apprentissage animal et humain : le phénomène d’extinction du renforcement partiel (souvent désigné sous l’acronyme anglophone PREE pour Partial Reinforcement Extinction Effect). En postulant que l’absence inattendue d’une récompense anticipée ne constitue point un néant motivationnel passif mais engendre au contraire une émotion primaire vive et aversive — la frustration —, Amsel a conféré aux états affectifs un statut causal direct au sein du conditionnement instrumental. Ce faisant, il a bâti une passerelle théorique indispensable entre l’analyse quantitative du comportement, l’éthologie cognitive naissante et les neurosciences comportementales.

Le parcours intellectuel d’Amsel témoigne d’une rare cohérence méthodologique. Formé au sein de prestigieuses institutions canadiennes avant d’accomplir son doctorat à l’Université de l’Iowa sous la houlette de Kenneth Spence, il a su allier une maîtrise expérimentale absolue à une réflexion ontologique profonde sur la mémoire et le développement cérébral. De l’analyse cinématique fine des rongeurs dans des dispositifs de couloirs doubles à l’étude ontogénétique des systèmes mnésiques hippocampiques, son œuvre a traversé les époques sans rien perdre de son actualité. Cet essai propose une analyse exhaustive de sa vie, de ses fondations théoriques, de ses paradigmes expérimentaux, de ses ramifications neurobiologiques et de son héritage pérenne pour les sciences de l’esprit contemporaines.

1. Introduction générale et mise en contexte historique d’Abram Amsel

1.1 Aux origines du néocomportementalisme au XXe siècle

L’après-guerre a constitué un tournant décisif pour la psychologie expérimentale nord-américaine. Tandis que le béhaviorisme radical défendu par B.F. Skinner s’imposait dans l’opinion publique et le champ clinique par son rejet viscéral des événements mentaux intérieurs, un malaise épistémologique croissant gagnait les laboratoires universitaires. Le modèle boîte-noire élémentaire, se limitant à l’observation exclusive des corrélations entre stimuli environnementaux périphériques et réponses motrices manifestes, révélait ses limites intrinsèques face à la complexité des apprentissages temporels et des conduites conflictuelles. Ce modèle éprouvait notamment d’immenses difficultés à rendre compte des variations spectaculaires de l’intensité d’un comportement lorsque les contingences de renforcement étaient modulées de façon probabiliste.

C’est précisément dans cette brèche intellectuelle que s’est épanoui le néobéhaviorisme médiationnel. S’inspirant des principes du physicalisme et de l’opérationnalisme de Bridgman, les théoriciens de cette mouvance ont cherché à concevoir des modèles formels capables d’intégrer des états internes inobservables sans pour autant sombrer dans le dualisme ou l’introspection spéculative. Ces variables intermédiaires devaient impérativement être ancrées, en amont, dans des opérations expérimentales mesurables et prédictibles, et en aval, dans des indicateurs comportementaux rigoureusement quantifiables. Ce mouvement a trouvé son apogée institutionnelle au sein de l’École de l’Iowa, où l’héritage mathématique de Clark L. Hull a été profondément remanié, épuré et sophistiqué.

Au cœur de ces débats animés se posait avec acuité l’impératif d’intégrer les composantes motivationnelles et affectives au sein du conditionnement opérant. Comment expliquer que la privation, la satiété, l’anticipation ou le découragement viennent moduler avec une telle vigueur l’émission d’une réponse pourtant apprise de façon routinière ? Il devenait intenable de réduire l’organisme à une simple machine associative passive. Il fallait impérativement doter les animaux de mécanismes dynamiques, capables de traiter la valeur hédonique des conséquences de leurs actes, de développer des attentes structurelles et d’éprouver des ruptures affectives lorsque ces attentes étaient brutalement déjouées par la réalité physique du milieu expérimental.

1.2 Biographie intellectuelle et trajectoire académique

Abram Amsel est né en décembre 1922 à Montréal, dans la province de Québec, au sein d’une famille issue de l’immigration est-européenne. Très tôt attiré par les disciplines scientifiques et la rigueur de l’observation empirique, il entreprend ses études supérieures à l’Université Queen’s de Kingston, avant de poursuivre son cursus à l’Université McGill. C’est à McGill qu’il subit l’influence marquante de psychologues novateurs qui l’orientent définitivement vers l’étude expérimentale de l’apprentissage chez l’animal. Conscient que l’épicentre mondial de la théorie comportementale se situe alors aux États-Unis, Amsel prend la décision déterminante de rejoindre l’Université de l’Iowa pour y accomplir ses recherches doctorales sous la direction de l’éminent Kenneth W. Spence.

L’environnement intellectuel de l’Université de l’Iowa au milieu des années 1940 et au début des années 1950 constitue un incubateur scientifique sans équivalent. Spence, élève et réformateur critique de Hull, y applique un réductionnisme logique impitoyable et exige une précision métrologique absolue dans la conception des protocoles expérimentaux. Amsel s’imprègne de cette méthode rigoureuse tout en commençant à formuler ses propres intuitions quant au rôle central de la non-récompense. Après l’obtention de son doctorat en 1948, il entame une brillante carrière académique qui le conduit d’abord à occuper un poste professoral à l’Université Tulane à La Nouvelle-Orléans. C’est au cours de cette période louisianaise qu’il conçoit son célèbre dispositif expérimental du double couloir et publie les articles fondateurs qui posent les jalons de sa théorie de la frustration.

Par la suite, Amsel répond à l’appel de l’Université de Toronto au Canada, où il développe un laboratoire de recherche de premier plan sur l’apprentissage animal et l’ontogenèse cognitive. Enfin, en 1969, il rejoint le corps professoral de l’Université du Texas à Austin, où il restera en fonction jusqu’à son accession à l’éméritat. Durant son long séjour à Austin, ses travaux atteignent une maturité théorique exceptionnelle, marquée par l’exploration neurobiologique des structures limbiques et la synthèse de décennies d’investigations empiriques. Sa stature internationale lui vaut les plus hautes distinctions : il préside la Division 3 de l’American Psychological Association (APA), reçoit la médaille Howard Crosby Warren de la Society of Experimental Psychologists et est élu membre de la très prestigieuse National Academy of Sciences des États-Unis, consacrant ainsi l’impact impérissable de son œuvre dans le panthéon des sciences comportementales.

1.3 Objectifs et portée scientifique du paradigme amselien

L’ambition première du programme de recherche développé par Abram Amsel consistait à lever une contradiction empirique majeure qui minait les fondements de la théorie classique du renforcement. Depuis les premiers travaux d’Edward Thorndike et de Clark Hull, l’axiome central de la discipline postulait que l’apprentissage est une fonction directe et croissante du nombre d’essais récompensés. Chaque présentation de nourriture après l’exécution d’une tâche devait, selon cette logique, accroître mécaniquement la force du lien associatif unissant le stimulus et la réponse motrice. Or, les données accumulées dans les années 1940 et 1950 démontraient sans ambiguïté qu’un animal entraîné selon un schéma de renforcement intermittent — où certaines réponses ne sont jamais gratifiées — démontre une résistance à l’extinction infiniment plus robuste qu’un animal ayant bénéficié d’un renforcement continu à 100 %.

Face à ce casse-tête théorique, Amsel a entrepris de formaliser de manière mathématique et mécaniste le phénomène d’extinction comportementale. L’extinction ne pouvait plus être interprétée comme la lente dissipation passive d’une trace synaptique ou la simple disparition de l’habitude sous l’effet du temps ou de l’inhibition de fatigue. Elle devenait un processus d’apprentissage actif, déclenché par un événement émotionnel violent : la frustration. En modélisant cette réaction à travers des équations associatives élégantes articulant stimuli internes, réponses fractionnelles et rétroactions proprioceptives, Amsel a démontré que la persistance face à l’échec est une compétence comportementale acquise, modulée par un processus de contre-conditionnement émotionnel.

La portée scientifique de ce paradigme dépasse de loin le cadre restreint de la psychologie animale comparée. Dès les années 1970, Amsel a élargi son spectre d’analyse pour établir des passerelles explicatives audacieuses entre l’apprentissage instrumental élémentaire, la neurobiologie du développement et la neuropsychologie cognitive. En montrant comment la tolérance à la frustration émerge conjointement avec la maturation morphologique de la formation hippocampique chez le jeune organisme, Amsel a offert à la psychiatrie et à la psychologie clinique des modèles étiologiques précieux pour comprendre les pathologies du contrôle impulsionnel, l’addiction, la persévérance dysfonctionnelle et les troubles de l’humeur.

2. Les racines épistémologiques et l’influence de l’école de Kenneth Spence

2.1 L’héritage hullien revisité par Spence

Pour appréhender la genèse de la pensée d’Amsel, il convient de scruter minutieusement le cadre théorique formalisé par Kenneth W. Spence à l’Université de l’Iowa. Spence s’était donné pour mission d’épurer le système hypothético-déductif de Clark Hull, dont les équations tentaculaires cherchaient à quantifier le potentiel de réaction excitatrice sous la forme bien connue :

sEr = sHr × D × K – (Ir + sIr)

Dans ce modèle quantitatif rigide, sHr représentait la force de l’habitude (habit strength), postulée comme dépendant strictement du nombre d’associations récompensées et ancrée dans une dynamique asymptotique. D désignait la pulsion (drive), une variable énergétique non spécifique issue de la privation physiologique (telle que la faim ou la soif), agissant comme un multiplicateur global du comportement moteur.

La grande innovation apportée par Spence, qui exercera une fascination durable sur le jeune Amsel, résidait dans la redéfinition conceptuelle de la motivation incitatrice, notée K. Contrairement à Hull qui tendait initialement à inclure la récompense dans le renforcement direct de l’habitude, Spence a démontré que la magnitude et la qualité du renforçateur agissent au niveau motivationnel et non sur l’acquisition de la force d’habitude pure. K est apparu comme une variable médiatrice interne, façonnée par des mécanismes d’anticipation pavlovienne de la récompense finale. Cependant, le modèle spencien rencontrait un écueil considérable lorsqu’il s’agissait d’expliquer l’extinction. Spence mobilisait, à l’instar de Hull, les concepts d’inhibition réactive (Ir), sorte de fatigue neuronale ou musculaire accumulée, et d’inhibition conditionnée (sIr), un apprentissage d’évitement passif. Ces concepts d’inhibition passive étaient dramatiquement insuffisants pour expliquer pourquoi un animal cesse brusquement de répondre dès lors que la récompense est supprimée, tout en manifestant des signes physiologiques évidents d’agitation motrice et d’élévation de l’éveil central.

2.2 L’apprentissage discriminatif selon Spence comme matrice théorique

Un autre apport capital de Kenneth Spence réside dans sa théorie de l’apprentissage discriminatif élémentaire. Selon Spence, l’acquisition d’une discrimination visuelle ou spatiale chez le rongeur ne requiert point l’élaboration de règles cognitives complexes ou d’un discernement relationnel préalable. Elle repose plutôt sur l’interaction mécanique et la superposition algébrique de gradients d’excitation et de gradients d’inhibition qui se développent de manière autonome autour des stimuli récompensés (S+) et non récompensés (S-). Lorsque ces deux gradients se chevauchent, la résultante nette détermine le choix de l’animal, rendant compte de phénomènes aussi subtils que le déplacement de la réponse préférentielle vers des valeurs extrêmes (le fameux peak shift).

Ce modèle mathématique attribuait un rôle de premier plan au feed-back proprioceptif généré par les micro-réponses de l’organisme. Spence postulait l’existence de réponses anticipatrices fractionnelles de récompense, notées formellement rR, accompagnées de leurs stimuli internes proprioceptifs afférents, désignés par sR. Ces entités constituaient la véritable machinerie interne de l’anticipation : dès lors qu’un rat perçoit les premiers stimuli d’un appareil expérimental, il commence à saliver, à mastiquer à vide et à engager des contractions musculaires préparatoires qui guident et stimulent son comportement de locomotion vers la mangeoire finale.

Amsel s’est emparé de cette armature conceptuelle avec une audace intellectuelle remarquable. Il a conservé le réductionnisme méthodologique strict de son maître — refusant catégoriquement de céder aux facilités d’un mentalisme désincarné —, tout en osant introduire une hypothèse révolutionnaire que Spence n’avait pas osé franchir. Si l’animal anticipe la récompense par le biais d’un complexe médiateur excitateur (rR – sR), que se passe-t-il lorsque cette prédiction motrice et sensorielle se heurte à une boîte de but rigoureusement vide ? L’inhibition ne peut plus être conçue comme un simple processus d’atténuation passive ; elle doit être le produit d’un choc émotionnel actif généré par la faillite de cette anticipation.

2.3 Rupture et continuité : de la pulsion générale à l’émotion spécifique

La rupture épistémologique accomplie par Abram Amsel s’est articulée autour de la dénonciation de l’insuffisance des modèles homéostatiques classiques. Dans le schéma orthodoxe hullien, toute action est motivée par la réduction d’une pulsion primaire générale. L’animal cherche à restaurer son équilibre métabolique rompu par le jeûne. Or, dans les situations de non-récompense intermittente, l’organisme ne subit aucune dégradation physiologique supplémentaire : le niveau de privation alimentaire demeure absolument constant d’un essai à l’autre. Pourquoi observe-t-on alors des sursauts de vélocité spectaculaires ou des refus d’avancer face à des signaux de non-récompense ?

Amsel a tranché ce dilemme en formalisant l’idée que la non-récompense constitue un événement psychologique aversif autonome, doté d’une valence émotionnelle primaire. L’omission d’une nourriture ardemment attendue n’est pas une simple absence de stimulation : c’est un choc nociceptif psychologique analogue, sur le plan fonctionnel, à l’application inopinée d’un stimulus douloureux périphérique. Ce faisant, Amsel a opéré un glissement fondamental : il est passé de l’étude d’une pulsion générale indifférenciée (la faim, la soif) à la mise en évidence d’une émotion spécifique conditionnable, la frustration, régie par des lois dynamiques propres.

Cette transition théorique a permis de convertir l’analyse associative d’une dynamique purement linéaire en un modèle sophistiqué de conflits motivationnels. L’organisme n’est plus envisagé comme un automate poussé par une force univoque, mais comme le théâtre d’une collision violente entre deux forces antagonistes : la tendance à approcher, alimentée par l’anticipation du plaisir gustatif, et la tendance à éviter ou à fuir, déclenchée par l’aversion viscérale liée à la déception de l’omission. C’est de cette dialectique dynamique entre espoir et désillusion qu’est née la Théorie de la Frustration.

3. La théorie de la frustration : architecture conceptuelle et mécanismes

3.1 La non-récompense frustrante primaire (RF)

L’édifice théorique d’Amsel repose sur une distinction cardinale entre la frustration primaire, état inconditionnel déclenché par un événement externe abrupt, et la frustration secondaire ou conditionnée, qui relève de l’apprentissage associatif. Pour qu’une réaction de frustration primaire — formellement notée RF (Frustrative Reaction) — puisse voir le jour, une condition préalable sine qua non doit être impérativement satisfaite : l’animal doit avoir préalablement acquis l’attente certaine d’un renforçateur positif. Si un rat naïf pénètre dans une mangeoire vide sans expérience antérieure de nourrissage, son comportement se résume à une exploration neutre ; il n’éprouve aucune frustration car aucune attente associative n’a été préalablement gravée dans son système nerveux.

En revanche, lorsque l’organisme a été rigoureusement conditionné à recevoir une quantité définie de récompense et que celle-ci est soudainement omise, il se produit une décharge émotionnelle immédiate d’une rare intensité. Amsel qualifie cet état de non-récompense frustrante primaire. Cette réaction RF présente des propriétés fonctionnelles strictement analogues à celles déclenchées par l’application d’un choc électrique ou d’un bruit strident : elle constitue un événement inconditionnel aversif intrinsèque. L’animal cherche spontanément à fuir cet environnement qui vient de le priver de son dû biologique.

L’un des apports les plus saisissants d’Amsel a été de démontrer que cette réaction RF possède une propriété dynamogénique immédiate. Dans les fractions de seconde et les secondes qui suivent l’omission inattendue de la récompense, le niveau général d’activation motrice et comportementale de l’animal connaît un pic paroxystique. Loin de s’effondrer d’abattement, l’organisme manifeste un décuplement temporaire de son énergie cinétique. Amsel a insisté avec une rigueur inébranlable sur la différenciation entre l’extinction passive — processus lent et progressif d’érosion de la réponse — et cette flambée active de frustration qui dynamise temporairement les schémas moteurs sous-jacents.

3.2 Le conditionnement classique de la frustration (rF – sF)

Une fois admise la réalité de la réaction primaire RF, le génie théorique d’Amsel s’est exprimé dans l’application méthodique des lois du conditionnement pavlovien à cet état affectif intérieur. Dès lors que la réaction viscérale et motrice de frustration se produit au sein d’un environnement physique spécifique, les stimuli visuels, olfactifs, tactiles et proprioceptifs qui précèdent ou accompagnent immédiatement cette déception s’associent de façon contingente à cet état de détresse. Par un mécanisme classique de substitution d’afférence, ces stimuli environnementaux acquièrent la capacité d’évoquer une fraction anticipatrice de la réaction globale de frustration.

Amsel formalise ce mécanisme par la genèse d’une réponse fractionnelle anticipatrice de frustration, désignée par le symbole rF (fractional anticipatory frustrative response). À l’image de la réponse de salivation anticipatrice conditionnée par Pavlov chez le chien, rF représente la réactivation partielle précoce de l’émotion aversive avant même que l’animal n’atteigne le lieu de la non-récompense. Crucialement, cette micro-réponse anticipatrice rF génère de manière concomitante une rétroaction proprioceptive et intéroceptive spécifique, codée formellement sous le terme de stimulus de frustration ou sF (frustrative stimulation).

Ce complexe unitaire médiationnel, désigné sous l’appellation rF – sF, modifie radicalement le statut épistémologique de l’émotion. L’émotion de frustration n’est plus cantonnée à un événement phasique post-réponse, survenant après le constat d’échec ; elle devient un signal prédictif tonique intérieur, déployé en amont de l’action. Dès que l’animal est placé à l’entrée du couloir expérimental ou à proximité du levier opérant, la perception des indices contextuels déclenche immédiatement le pattern interne rF – sF, alertant l’organisme sur l’imminence probable d’une cruelle désillusion.

3.3 Propriétés motivationnelles et aversives du signal sF

Le stimulus proprioceptif interne sF n’est point un signal informationnel neutre ou froid ; il possède des propriétés motivationnelles puissamment aversives qui dictent l’organisation du comportement adaptatif. Tout d’abord, en vertu de sa nature pénible, sF fonctionne comme un signal d’alarme capable de générer des réponses d’évitement comportemental passif ou actif. L’animal en proie à l’activation de sF est naturellement enclin à décélérer, à faire demi-tour, à tenter d’escalader les parois de l’appareil ou à s’engager dans des activités de substitution stéréotypées (toilette compulsive, reniflement erratique).

Il en résulte l’émergence d’un conflit motivationnel majeur, modélisé par Amsel selon les canons de la théorie de l’approche-évitement de Miller. Dans tout apprentissage où la récompense n’est pas distribuée de manière systématique, deux circuits associatifs internes coexistent désormais en parallèle dans le cerveau du sujet :

  • Le complexe incitatif d’approche : rR – sR, qui tire son origine des essais couronnés de succès et incite l’animal à courir vers le but dans l’espoir du gain.
  • Le complexe aversif d’évitement : rF – sF, qui découle des déconvenues antérieures et pousse l’organisme à s’arrêter ou à fuir pour ne pas revivre la douleur de l’omission.

Amsel insiste sur le fait que la frustration conditionnée doit être considérée comme l’analogue fonctionnel et structurel parfait de la peur conditionnée induite par des punitions physiques directes comme les décharges électriques. La peur anticipe la survenue d’un stimulus aversif primaire nocif ; la frustration conditionnée anticipe l’absence douloureuse d’un événement positif ardemment convoité. Dans les deux cas, le stimulus médiateur interne (peur ou sF) possède la redoutable faculté de désorganiser la trajectoire comportementale, d’élever l’anxiété basale et de précipiter la démission de l’organisme si aucun mécanisme compensatoire n’est mis en place pour maîtriser cette turbulence affective.

4. L’effet d’extinction du renforcement partiel (PREE) : explications mécanistes

4.1 Le paradoxe empirique de la persistance comportementale

L’effet d’extinction du renforcement partiel (PREE) a constitué durant des décennies la véritable bête noire des systématiciens de la psychologie de l’apprentissage. Le paradigme expérimental standard est d’une simplicité désarmante : un premier groupe de rongeurs (groupe à renforcement continu ou CRF, pour Continuous Reinforcement) reçoit une boulette de nourriture à chaque fois qu’il parcourt un couloir ou appuie sur un levier. Un second groupe (groupe à renforcement partiel ou PRF, pour Partial Reinforcement) n’est récompensé que lors de 50 % des essais, distribués de manière semi-aléatoire. Une fois cette phase d’acquisition achevée, l’expérimentateur supprime définitivement toute nourriture : c’est la phase d’extinction. On mesure alors le nombre d’essais nécessaires pour que l’animal renonce définitivement à émettre sa réponse.

Selon le sens commun et selon les équations canoniques de Thorndike ou de Hull, le groupe CRF devrait résister bien plus longtemps à l’extinction. En effet, ayant reçu deux fois plus de renforçateurs effectifs que le groupe partiel pour un nombre identique d’essais globaux, la force d’habitude (sHr) du groupe continu devrait être théoriquement maximale. Or, le résultat empirique, reproduit des centaines de fois à travers les laboratoires du monde entier et sur des espèces vertébrées innombrables (rats, pigeons, chiens, primates, humains), inflige un camouflet magistral à cette prédiction intuitive :

  • Les animaux soumis au renforcement continu cessent d’émettre la réponse de manière spectaculairement rapide dès les premiers essais sans gain.
  • Les animaux soumis au renforcement partiel manifestent une ténacité herculéenne, persistant à courir ou à appuyer sur le levier durant des dizaines, voire des centaines d’essais stériles.

Les courbes de déclin de réponse révèlent une cassure abrupte chez les sujets habitués au 100 % de réussite, tandis que les sujets du groupe PRF déclinent avec une lenteur infinitésimale. Cette aporie empirique exigeait une explication mécaniste radicalement neuve, affranchie des postulats simplistes de l’accumulation quantitative de la force d’habitude.

4.2 L’hypothèse du contre-conditionnement d’Amsel

C’est ici qu’intervient le chef-d’œuvre analytique d’Abram Amsel : l’hypothèse du contre-conditionnement par la frustration. Pour résoudre ce paradoxe, Amsel décortique minutieusement la cinétique séquentielle des événements mentaux et moteurs qui se déploient au fil des séances d’entraînement intermittent. Au début de l’apprentissage, les omissions sporadiques déclenchent RF puis le conditionnement progressif du signal rF – sF. Lorsque ce signal d’alarme s’allume, l’animal hésite, ralentit et subit une désorganisation temporaire de sa course dans le couloir.

Cependant, dans un protocole de renforcement intermittent, que se passe-t-il après un essai sans récompense ? Tôt ou tard survient un essai où la nourriture est de nouveau présente au fond de la boîte de but. Lors de cet essai victorieux consécutif à un échec, l’état interne sF était précisément activé et prégnant au moment même où l’animal a surmonté son hésitation et a fini par avancer vers le but. Par voie de conséquence, en vertu des lois universelles de l’association contiguë, le stimulus interne sF se trouve directement associé et conditionné à l’exécution de la réponse motrice d’approche !

Ce mécanisme magistral de contre-conditionnement renverse spectaculairement la polarité fonctionnelle de l’émotion négative :

  • Chez l’animal en renforcement continu, le signal sF n’a jamais été ressenti durant l’apprentissage. Lors de l’extinction soudaine, la survenue brutale et massive de sF agit comme une barrière aversive infranchissable, provoquant l’abandon immédiat.
  • Chez l’animal en renforcement partiel, le signal aversif sF a été converti, par renforcements ultérieurs successifs, en un indice d’incitation motrice. Plus l’animal éprouve la morsure de la frustration intérieure (sF), plus cette sensation lui sert d’aiguillon proprioceptif conditionné l’invitant à persévérer et à foncer vers le but.

L’inhibition a été littéralement neutralisée par son incorporation fonctionnelle au cœur même de l’acte instrumental. La persistance n’est plus l’oubli de l’échec ; elle est l’habitude acquise de redoubler d’efforts précisément sous le coup de la frustration.

4.3 Confrontation avec la théorie séquentielle de Capaldi

La théorie du contre-conditionnement d’Amsel n’a pas régné sans partage au sein de la psychologie américaine. Elle a suscité une controverse scientifique d’une rare intensité intellectuelle avec l’école cognitive et psychophysique menée par E. John Capaldi, l’auteur de la célèbre théorie séquentielle (Sequential Hypothesis). Capaldi refusait d’attribuer la persistance à une dynamique purement affective ou viscérale comme la frustration. Selon lui, le phénomène reposait exclusivement sur des traces mnésiques sensorielles objectives issues de l’ordonnancement temporel des séquences d’essais récompensés (R) et non récompensés (N).

Pour Capaldi, la non-récompense génère une trace mnésique spécifique notée SN. Lorsqu’une séquence présente des blocs d’essais infructueux suivis d’un essai fructueux (par exemple la séquence N-N-R), la trace de non-récompense SN est active au moment où l’animal mange. Par conséquent, SN devient un stimulus conditionné discriminatif prédisant l’arrivée future de la récompense. Capaldi a démontré par des protocoles d’une méticulosité chirurgicale que la longueur des séries d’essais N consécutifs (la variable N-length) exerce une influence prédictive mathématique directe sur la force de la résistance à l’extinction, remettant en cause l’obligation d’invoquer une énergie émotionnelle cumulative pour expliquer le PREE.

Cette confrontation magistrale entre Amsel et Capaldi a nourri des décennies d’expérimentations croisées d’une technicité éblouissante. Amsel a répondu en prouvant que la théorie séquentielle n’excluait nullement la dimension affective, mais en constituait plutôt le versant perceptivo-mnésique. Des travaux ultérieurs ont brillamment réconcilié les deux géants : lorsque les intervalles entre les essais sont extrêmement courts (de l’ordre de quelques secondes), les traces mnésiques de Capaldi (SN) suffisent à guider la persistance ; en revanche, dès lors que les essais sont espacés dans le temps de plusieurs minutes ou de 24 heures — interdisant la survie d’une simple trace sensorielle immédiate —, c’est bien la machinerie émotionnelle tonique rF – sF théorisée par Abram Amsel qui prend le relais pour maintenir l’effort de l’organisme face au vide.

5. Paradigmes méthodologiques et dispositifs expérimentaux clés

5.1 Le couloir double (Double Runway Apparatus)

Pour soumettre ses intuitions conceptuelles à une vérification empirique irréfutable, Abram Amsel a inventé l’un des dispositifs instrumentaux les plus célèbres de la psychologie animale expérimentale : l’appareil du couloir double (Double Runway Apparatus). Conscient que l’évaluation de la frustration au sein d’une boîte de but unique risquait d’être contaminée par des comportements parasites d’immobilité ou de recherche obstinée de miettes, Amsel a conçu une architecture linéaire séquentielle capable d’isoler chimiquement la vigueur dynamique induite par la déception.

La structure technique de ce dispositif se déploie selon une logique spatio-temporelle rigoureuse :

  1. Une boîte de départ initiale, munie d’une guillotine automatisée.
  2. Un premier couloir de course (Runway 1), long d’environ un à deux mètres.
  3. Une première boîte de but intermédiaire (Goal Box 1), équipée d’une mangeoire escamotable.
  4. Un second couloir de course (Runway 2), adjacent et dans l’alignement strict du précédent.
  5. Une boîte de but finale (Goal Box 2), systématiquement pourvue d’une copieuse ration alimentaire.

Le protocole standard institué par Amsel et son collaborateur Joseph Roussel en 1952 consistait à entraîner d’abord l’animal à courir le long de cette double séquence en le récompensant systématiquement dans les deux boîtes de but. Une fois que la vitesse de course dans le second couloir avait atteint une asymptote parfaitement stable, la phase de test débutait : de manière imprévisible pour l’animal, la nourriture dans Goal Box 1 était omise lors de certains essais, tandis qu’elle demeurait constante dans Goal Box 2. Les résultats ont constitué l’acte de naissance de l’effet de frustration : immédiatement après avoir découvert la boîte intermédiaire vide, les rongeurs s’élançaient dans le second couloir avec une vitesse de locomotion, une accélération et une énergie cinétique considérablement plus élevées qu’après avoir consommé leur repas habituel dans cette même boîte intermédiaire.

Cette méthodologie d’avant-garde a permis d’isoler expérimentalement la composante purement dynamogénique de l’émotion de frustration primaire, tout en écartant l’hypothèse d’une simple différence de charge métabolique ou d’apprentissage perceptif. La mesure chronométrique standardisée des latences de départ, des vélocités médianes et de la force de freinage à l’approche de la boîte finale a fixé de nouveaux critères d’excellence pour toute la psychophysique animale de l’époque.

5.2 Dispositifs instrumentaux alternatifs et boîtes opérantes

Bien que le couloir double soit resté la signature méthodologique indélébile d’Amsel, ce dernier a su diversifier ses protocoles pour démontrer l’universalité de ses postulats à travers une multiplicité de dispositifs instrumentaux. L’un des prolongements majeurs a consisté à transposer l’étude de la frustration au sein de la boîte de Skinner modifiée. Dans ces environnements, des capteurs de force et des jauges de contrainte piézoélectriques étaient insérés sous les leviers métalliques afin d’évaluer non plus seulement la fréquence des pressions, mais la pression physique exacte exercée par le membre antérieur de l’animal.

Les données enregistrées ont apporté une confirmation éclatante de la théorie : suite à une période de renforcement continu, l’omission soudaine de la livraison de boulettes entraînait une explosion immédiate de la force d’impact cinétique sur le levier. Les animaux ne se contentaient pas d’appuyer de manière répétée ; ils martelaient littéralement le dispositif avec une violence motrice multipliée, signature physique incontestable de la décharge pulsionnelle de frustration primaire RF.

Amsel a également perfectionné l’utilisation de labyrinthes en T et d’appareils de choix spatial forcé pour examiner la prise de décision sous incertitude de renforcement. Dans ces paradigmes plus complexes, l’expérimentateur modulait les contingences de non-récompense pour forcer l’organisme à arbitrer entre un bras sécurisé mais peu gratifiant et un bras hautement rémunérateur mais frappé d’une forte probabilité d’omission frustrante. Pour garantir l’étanchéité absolue de ses résultats contre les critiques méthodologiques, Amsel maintenait un contrôle drastique sur les variables parasites de l’environnement :

  • Ventilation continue avec bruit blanc masquant pour neutraliser les bruits acoustiques extérieurs.
  • Nettoyage méticuleux des pistes à l’éthanol pur entre chaque passage pour dissiper les traces de phéromones conspécifiques (notamment les odeurs d’alarme déposées par les congénères frustrés).
  • Régulation hygrométrique et thermique millimétrée des animaleries.
  • Protocoles stricts de privation alimentaire ajustés au gramme près pour stabiliser le poids corporel à 80 % ou 85 % de la valeur ad libitum.

5.3 Rigueur quantitative et analyse cinématique

Ce qui frappe à la lecture des publications originales d’Abram Amsel, c’est l’extraordinaire sophistication métrologique dont il a fait preuve bien avant la révolution informatique et numérique. L’instrumentation de ses laboratoires reposait sur l’interfaçage de cellules photoélectriques à infra-rouge, disposées à intervalles spatiaux réguliers le long des pistes de course, reliées par des relais électromécaniques à des chronographes d’imprimerie et à des polygraphes à dévidement continu capables d’enregistrer le temps de passage au millième de seconde près.

Cette précision chirurgicale a permis à Amsel d’effectuer des analyses cinématiques d’une rare finesse. Il a décomposé le comportement d’approche en trois segments spatiaux et temporels étanches :

  • Le temps de départ (latence d’initiation motrice dès l’ouverture de la porte).
  • Le temps de parcours médian (vitesse d’accélération pure dans le couloir neutre).
  • Le temps de franchissement terminal (phase critique de décélération comportementale ou de plongeon vers la boîte de but).

Grâce à cette décomposition micro-analytique, Amsel a pu modéliser mathématiquement comment l’inhibition conditionnée rF – sF s’insinue d’abord dans le segment terminal de la course (le rongeur ralentissant à quelques centimètres de la mangeoire par anticipation de la déception) avant de contaminer progressivement, en l’absence de contre-conditionnement, le segment médian puis la latence de démarrage. En appliquant des designs expérimentaux factoriels complexes, couplant protocoles intra-sujets et inter-sujets avec contrebalancement exhaustif de l’ordre de présentation des stimuli, Amsel a conféré à la psychologie de la motivation un statut de science dure, où chaque fluctuation affective se trouvait traduite en coordonnées cartésiennes de vitesse, de décélération et de temps de réponse.

6. Approche ontogénétique : le développement de l’apprentissage et de la mémoire

6.1 La transition des années 1970 : étude des rongeurs juvéniles

Au tournant des années 1970, alors que sa théorie de la frustration s’était imposée comme un pilier de la psychologie animale comparée, Abram Amsel a accompli une reconversion thématique aussi audacieuse que fructueuse. Observant que la quasi-totalité des lois de l’apprentissage opérant avaient été établies chez des animaux adultes ayant achevé leur développement neural, il a posé une question fondamentale : à quel moment précis de la vie d’un organisme ces mécanismes médiationnels d’anticipation et d’inhibition apparaissent-ils ?

Amsel a ainsi orienté une grande partie des ressources de son laboratoire vers l’analyse ontogénétique du comportement chez le rongeur juvénile (le raton néonatal et pré-sevrage). Ce champ d’investigation s’est révélé d’une complexité technique redoutable. Comment étudier le conditionnement instrumental chez des ratons âgés de quelques jours à peine, dépourvus de motricité autonome complète, encore aveugles et totalement dépendants de la mère pour leur thermorégulation et leur alimentation ? Avec ses collaborateurs, Amsel a conçu des dispositifs miniaturisés ingénieux, exploitant des réponses adaptées à l’âge comme l’attachement à la tétine artificielle, la succion non-nutritive ou la locomotion rampante guidée par la chaleur thermique.

L’hypothèse directrice d’Amsel était d’une lumineuse clarté évolutionniste : l’apparition chronologique successive des différentes formes d’apprentissage associatif et de leurs conséquences émotionnelles au cours de l’enfance reflète l’horloge biologique et la maturation séquentielle des différentes structures de l’encéphale. Loin d’être doté d’emblée d’une architecture cognitive unitaire, le nouveau-né n’accède à la régulation complexe de la frustration que lorsque les réseaux cérébraux sous-jacents ont atteint un seuil morphologique et synaptique critique.

6.2 L’émergence développementale du PREE

Les investigations développementales menées par Amsel et ses étudiants ont débouché sur l’une des découvertes les plus spectaculaires de l’embryologie comportementale : l’absence totale de l’effet d’extinction du renforcement partiel chez le très jeune animal. En soumettant des ratons d’âges échelonnés (du 8e au 20e jour postnatal) à des protocoles de renforcement continu ou intermittent, Amsel a mis en lumière une frontière temporelle infranchissable :

  • Avant le 12e-14e jour postnatal (P12-P14), les ratons soumis au renforcement partiel s’éteignent exactement à la même vitesse que ceux soumis au renforcement continu, voire plus rapidement. L’effet PREE est strictement inexistant.
  • C’est de manière synchrone et abrupte, autour du 14e au 16e jour postnatal, que le paradoxe du PREE émerge subitement dans le comportement du jeune rongeur.

Pour Amsel, cette bascule temporelle constituait la validation expérimentale éclatante de sa théorie. Si la persistance comportementale dépendait d’un simple calcul associatif primaire entre entrées sensorielles et sorties motrices, elle devrait s’observer dès que l’animal est capable d’apprendre une association simple (ce que le raton sait faire dès P8). Si le PREE fait défaut avant P14, c’est parce que le jeune organisme ne dispose pas encore de l’infrastructure biologique nécessaire pour encoder la mémoire aversive de l’omission frustrante et pour réaliser l’opération complexe de son contre-conditionnement adaptatif.

Le très jeune animal est littéralement incapable d’éprouver la frustration conditionnée tonique (rF – sF). Face à une tétine sans lait, il subit une extinction passive immédiate sans trace résiduelle de conflit. Cette dissociation chronologique a permis de découpler de façon formelle les mécanismes d’apprentissage d’approche élémentaire — d’apparition très précoce — des mécanismes d’inhibition comportementale active et de résilience émotionnelle, qui requièrent un réseau neural hautement spécialisé et d’apparition tardive.

6.3 Ontogenèse des systèmes mnésiques multiples

Ces découvertes pionnières ont conduit Abram Amsel à formaliser, dès la fin des années 1970 et au cours des années 1980, une théorie ontogénétique des systèmes mnésiques multiples, qui a largement préfiguré les architectures neuropsychologiques modernes de la mémoire déclarative et procédurale. Amsel soutenait qu’il existait au cours de l’embryogenèse postnatale une ségrégation fonctionnelle absolue entre deux grandes modalités de traitement de l’information :

  • Le système mnésique primitif (habit-based) : opérationnel dès la naissance, à forte dominante sous-corticale (ganglions de la base, amygdale primitive, cervelet), capable de lier directement des stimuli proximaux à des réponses d’approche guidées par le plaisir immédiat ou le renforcement continu.
  • Le système médiateur supérieur (affective-dispositional) : d’installation plus tardive, médié par les circuits télencéphaliques limbiques, permettant le stockage des représentations internes de l’absence, l’encodage du signal sF et la résolution des conflits d’approche-évitement.

Amsel a exploré avec une acuité particulière l’impact des facteurs environnementaux précoces sur l’éclosion de ces systèmes. Il a démontré expérimentalement que des épisodes répétés de séparation maternelle néonatale ou des stress thermiques précoces altèrent drastiquement la maturation de ces circuits mnésiques, précipitant ou dégradant la capacité ultérieure de l’animal adulte à développer une tolérance saine à la frustration. Cette formidable moisson de données a été magistralement synthétisée dans son ouvrage de référence paru en 1986, intitulé Developmental Psychobiology and Intersensory Communications, qui a assis sa réputation en tant que bâtisseur des neurosciences du développement cognitif.

7. Substrats neurobiologiques de la frustration et maturation cérébrale

7.1 Le rôle pivot de la formation hippocampique

L’observation méticuleuse de la chronologie ontogénétique du rongeur a conduit tout naturellement Abram Amsel à s’intéresser aux structures cérébrales dont la synaptogenèse coïncide rigoureusement avec le 14e jour postnatal. Une structure anatomique s’est immédiatement imposée comme la candidate idéale : la formation hippocampique, et plus particulièrement la neurogenèse tardive des cellules granulaires du gyrus denté. Alors que la majorité des structures cérébrales du rat sont formées in utero, le gyrus denté présente la particularité spectaculaire de générer plus de 80 % de ses neurones après la naissance, atteignant sa maturité morphologique et son câblage fonctionnel précis entre le 12e et le 18e jour de vie.

Pour valider cette corrélation anatomo-fonctionnelle, Amsel et ses successeurs ont mené une vaste série de protocoles de chirurgie stéréotaxique chez l’adulte et le juvénile. Les conclusions se sont révélées sans appel : des lésions électrolytiques ou excitotoxiques sélectives de l’hippocampe chez le rat adulte entraînent une abolition spectaculaire et sélective de l’effet PREE. Un animal lésé à l’hippocampe, bien que tout à fait capable d’apprendre à courir ou à presser un levier pour obtenir de la nourriture, s’éteint de manière fulgurante dès que les récompenses cessent, son comportement redevenant identique à celui d’un raton de dix jours.

Sur le plan computationnel, Amsel a modélisé l’hippocampe comme un comparateur central. Sa mission biologique première consiste à confronter en permanence les flux d’informations afférents actuels avec les représentations rétrospectives prédictives générées par le cortex. Dès qu’un décalage négatif survient — c’est-à-dire dès que la réalité perceptive ne livre pas le renforçateur attendu —, l’hippocampe déclenche le signal de mismatch et libère la cascade neurovégétative et motrice correspondant à la frustration primaire RF, ouvrant la voie à l’encodage du signal proprioceptif sF.

7.2 Le circuit septo-hippocampique et le rythme thêta

Pour comprendre la dynamique électrophysiologique sous-jacente à la frustration, Amsel s’est allié aux travaux des neurophysiologistes étudiant le complexe septo-hippocampique. Ce réseau interconnecté repose sur les projections massives des neurones cholinergiques et gabaergiques du septum médian vers les couches pyramidales de CA3 et CA1 de l’hippocampe. Ce circuit est le générateur oscillatoire du prestigieux rythme thêta (ondes lentes de 6 à 9 Hz chez le rongeur), qui gouverne l’éveil attentionnel sélectif, l’orientation spatiale et la modulation des traces synaptiques.

Les enregistrements électro-encéphalographiques réalisés lors du franchissement du couloir double ont permis d’observer des corrélations physiologiques directes de la théorie amselienne :

  • Au moment précis où l’animal découvre la boîte Goal 1 vide, on constate une réorganisation synchrone et spectaculaire du rythme thêta hippocampique, signant une réallocation paroxystique des ressources attentionnelles de l’organisme.
  • La transmission du signal sF au niveau des structures centrales se traduit par une hypersynchronie thêta projetée sur les aires motrices et limbiques.

Ce modèle a trouvé une confirmation translationnelle magistrale à travers la psychopharmacologie des substances anxiolytiques. Amsel et ses contemporains ont démontré que l’administration systémique ou intra-hippocampique de benzodiazépines (comme le chlordiazépoxide ou le diazépam) ou de barbituriques abolit sélectivement les effets comportementaux de la frustration sans altérer l’apprentissage général. Sous l’influence d’un anxiolytique, un animal réagit à la non-récompense sans manifester la moindre réaction RF et s’éteint rapidement sans développer de PREE. Les anxiolytiques agissent au niveau du septum médian en inhibant précisément le signal de frustration, apportant la preuve moléculaire qu’anxiété et frustration partagent le même substrat neurobiologique.

7.3 Intégration cortico-limbique et systèmes de neuromodulation

L’architecture neurale de la frustration ne saurait toutefois se résumer au seul complexe septo-hippocampique. Amsel a esquissé les contours d’une intégration cortico-limbique beaucoup plus vaste, impliquant au premier chef le cortex préfrontal médian (particulièrement le cortex cingulaire antérieur et le cortex orbitofrontal). Ces structures corticales antérieures sont indispensables à la flexibilité cognitive, permettant au sujet de réévaluer la valeur subjective des renforçateurs et de réprimer les schémas moteurs obsolètes lorsque l’environnement physique ne répond plus aux règles apprises.

Au niveau des systèmes de neuromodulation ascendants, les découvertes ultérieures ont apporté un éclairage fascinant sur les postulats d’Amsel :

  • La dopamine mésolimbique : Projetant depuis l’aire tegmentale ventrale (VTA) vers le noyau accumbens, la dopamine a été mise en lumière par Wolfram Schultz comme le vecteur de l’erreur de prédiction de récompense. Lors de la non-récompense frustrante théorisée par Amsel, les neurones dopaminergiques subissent une pause phasique immédiate dans leur fréquence de décharge basale. Ce creux dopaminergique signale chimiquement le déficit hédonique au cœur du circuit du striatum ventral.
  • La sérotonine (5-HT) centrale : Issue des noyaux du raphé médian et dorsal, la sérotonine joue un rôle régulateur critique dans la tolérance au délai et le contrôle de l’impulsivité. Un déficit en sérotonine transforme la frustration primaire en réactions agressives destructrices, confirmant le rôle stabilisateur de ce transmetteur dans la maîtrise du signal aversif sF.
  • La noradrénaline : Originaire du locus coeruleus, elle sous-tend l’explosion dynamogénique immédiate de la réaction RF en inondant le néocortex et le système végétatif pour mobiliser instantanément les réserves énergétiques de fuite ou de combat.

8. Convergence théorique : Amsel et le système d’inhibition comportementale de Gray

8.1 La théorie neuropsychologique de Jeffrey Gray

L’un des hommages les plus éclatants rendus à la robustesse conceptuelle de la théorie d’Amsel provient des travaux du psychologue et neurophysiologiste britannique Jeffrey A. Gray. Dans son ouvrage séminal de 1982, The Neuropsychology of Anxiety, Gray a formulé sa célèbre théorie de la personnalité et de la motivation en postulant l’existence de trois grands systèmes émotionnels cérébraux : le système d’approche comportementale (BAS), le système de combat-fuite (FFS) et, au centre de toute sa construction, le système d’inhibition comportementale ou BIS (Behavioral Inhibition System).

Pour bâtir son modèle du BIS, Gray s’est explicitement et intégralement adossé aux fondations empiriques et conceptuelles posées par Abram Amsel. Gray a franchi une étape théorique décisive en postulant une équivalence fonctionnelle absolue entre les signaux de punition innée et les signaux de non-récompense frustrante. Dans le modèle de Gray, le cerveau ne traite pas la déception de l’omission différemment de la menace d’un prédateur ou d’une douleur physique. Les deux événements convergent vers la même machinerie sous-corticale et activent le même système d’inhibition.

Dès lors, l’anxiété cesse d’être une entité psychopathologique floue pour recevoir une définition opérationnelle rigoureuse : l’anxiété est l’état neurobiologique et subjectif engendré par l’activation du BIS en réponse à des stimuli conditionnés de punition ou de frustration (le complexe rF – sF d’Amsel). En réunissant la clinique psychiatrique britannique et le néobéhaviorisme expérimental de l’école de l’Iowa, Gray a offert à la théorie de la frustration son couronnement neuropsychologique international.

8.2 Points de concordance et divergences conceptuelles

La relation intellectuelle entre Abram Amsel et Jeffrey Gray a été marquée par une profonde estime mutuelle et une féconde émulation théorique. Les deux savants partageaient un consensus total quant à la cartographie anatomique du système. Tous deux désignaient le complexe septo-hippocampique, le cortex entorhinal et leurs projections limbiques comme le centre nerveux névralgique de ce comparateur d’incertitude et de frustration conditionnée. Tous deux s’accordaient également sur le fait que l’efficacité thérapeutique des drogues anxiolytiques réside précisément dans leur capacité pharmacologique à court-circuiter le contrôle septo-hippocampique sur la détection de l’omission.

Cependant, des nuances théoriques instructives séparaient les deux chercheurs :

  • Amsel, fidèle à son rigorisme néobéhavioriste issu de Spence, concevait la frustration avant tout comme un apprentissage associatif spécifique d’habitudes motrices proprioceptives (rF – sF), directement branché sur la réponse instrumentale locale de l’animal.
  • Gray, influencé par la cybernétique et l’éthologie européenne, concevait le BIS comme un module émotionnel central général, un état d’éveil aversif transversal gouvernant l’attention sélective, l’évaluation du risque et l’inhibition motrice globale, indépendamment de la trajectoire spécifique d’une tâche donnée.

Cette divergence subtile portait sur le degré d’abstraction des représentations cognitives : là où Gray voyait des systèmes de contrôle computationnels hiérarchisés, Amsel préférait maintenir l’ancrage dans la dynamique séquentielle fine des chaînes de réponses fractionnelles périphériques.

8.3 Implications pour la nosographie psychiatrique

Le pont théorique bâti entre le formalisme d’Amsel et la neuropsychologie de Gray a ouvert des perspectives thérapeutiques et diagnostiques révolutionnaires pour la médecine mentale. Les cliniciens ont pu disposer d’un modèle translationnel robuste pour disséquer l’étiologie du trouble anxieux généralisé (TAG). Dans cette perspective nosographique, les patients souffrant de TAG se caractérisent par une hyperréactivité structurelle ou fonctionnelle de leur système de détection de non-récompense. Pour ces sujets, la moindre incertitude environnementale ou l’échec le plus anodin déclenche une tempête émotionnelle sF incontrôlable, provoquant une rumination inhibitrice permanente et une incapacité à s’engager dans des actions dirigées vers un but.

De même, la compréhension des troubles obsessionnels compulsifs (TOC) et des phobies spécifiques a bénéficié de ces avancées. Les compulsions peuvent être modélisées comme des tentatives désespérées d’évitement actif visant à neutraliser le signal intéroceptif intolérable de sF. L’absence d’extinction comportementale chez certains patients ne relève pas d’une simple faiblesse de la volonté, mais d’un emballement pathologique des boucles de contre-conditionnement, où l’exécution du rituel obsessionnel vient paradoxalement renforcer l’anticipation anxieuse qui le motive. Ces modélisations constituent encore aujourd’hui l’ossature explicative de l’action des inhibiteurs sélectifs de la recapture de la sérotonine (ISRS) et des thérapies cognitivo-comportementales basées sur l’exposition avec prévention de la réponse.

9. Débats théoriques et controverses épistémologiques

9.1 L’opposition radicale avec le béhaviorisme skinnerien

L’ascension de la théorie de la frustration n’a pas manqué de heurter de plein fouet l’orthodoxie régnante du béhaviorisme radical incarné par B.F. Skinner. L’opposition entre Abram Amsel et Skinner représentait la ligne de fracture la plus tranchée au sein de la psychologie américaine de la seconde moitié du XXe siècle. Pour Skinner et ses fidèles disciples de l’analyse expérimentale du comportement (EAB), toute tentative d’expliquer le comportement par le recours à des événements internes inobservables — fussent-ils baptisés réponses fractionnelles ou stimuli proprioceptifs de frustration — relevait de la pure mystification pré-scientifique et d’un retour déguisé au spiritualisme.

Skinner affirmait avec virulence que le phénomène de persistance lors des programmes à renforcement intermittent n’exigeait l’intervention d’aucun fantôme affectif dans la machine. Selon la perspective skinnerienne, les régimes de renforcement à intervalle variable (VI) ou à ratio variable (VR) modèlent simplement le taux de réponse par des contingences environnementales externes objectives. Le comportement persiste car l’extinction constitue un environnement d’apprentissage dont les propriétés discriminatives physiques sont indiscernables de la séquence de renforcement intermittent elle-même (l’hypothèse de la discrimination externe passive).

Amsel a riposté avec une vigueur méthodologique implacable. Il a démontré, données métrologiques à l’appui, que la théorie discriminative passive de Skinner était incapable d’expliquer :

  • L’augmentation subite de la force physique ou de la vélocité après une omission (l’effet dynamogénique immédiat de RF).
  • Le fait que des animaux soumis à des indices discriminatifs externes parfaitement clairs continuent néanmoins à manifester le PREE.

Pour Amsel, les variables intermédiaires n’étaient pas des spéculations métaphysiques, mais des nécessités logiques formelles, déduites rigoureusement d’expérimentations réfutables au sens de Karl Popper. En refusant d’admettre la réalité fonctionnelle des états émotionnels de l’animal, le skinnerisme s’enfermait, selon lui, dans une description stérile et superficielle du vivant.

9.2 La révolution cognitiviste et le concept d’attente

Alors même qu’Amsel bataillait sur son flanc droit contre le réductionnisme radical skinnerien, il a vu émerger sur son flanc gauche une menace épistémologique encore plus redoutable : l’avènement de la révolution cognitiviste des années 1960 et 1970. Porté par la réhabilitation des thèses d’Edward Tolman et l’essor des sciences computationnelles, le cognitivisme postulait que les animaux et les humains n’apprennent pas des connexions S-R motrices aveugles, mais élaborent de véritables cartes cognitives (cognitive maps) et des systèmes d’attentes déclaratives complexes (expectancies).

Dans ce cadre mentaliste rénové, la frustration n’avait plus besoin d’être décomposée en un réseau alambiqué de réponses fractionnelles périphériques (rF) et de rétroactions proprioceptives (sF). Il suffisait de postuler que le sujet possède une croyance cognitive sur la probabilité de gain, et que l’omission déclenche une simple révision bayésienne de ses prédictions informationnelles. Des chercheurs comme Robert Bolles ou David Dickinson ont soutenu que la modélisation computationnelle du traitement de l’information rendait caduques les métaphores hydrauliques et proprioceptives du néobéhaviorisme d’Amsel.

Amsel a résisté avec une remarquable ténacité à ce qu’il considérait comme un engouement sémantique facile pour les métaphores informatiques. Il mettait en garde la communauté scientifique contre l’illusion consistant à croire qu’en remplaçant le terme associatif rF par le terme d’« attente cognitive », on avait expliqué le mécanisme causal sous-jacent. Amsel rappelait avec force que l’information pure ne motive pas l’action : pour qu’une attente intellectuelle mette en mouvement un organisme de chair et de sang face à l’adversité, il faut nécessairement qu’elle prenne racine dans une dynamique énergétique, viscérale et émotionnelle. Sa fidélité au vocabulaire mécaniste associatif a constitué un rempart précieux contre la dérive désincarnée d’un cognitivisme oublieux des contraintes biologiques du corps.

9.3 Limites écologiques et critiques éthologiques

Une troisième ligne de critiques a été adressée aux travaux d’Amsel par les tenants de l’éthologie classique et de l’écologie comportementale. Des chercheurs inspirés par Nikolaas Tinbergen et Konrad Lorenz ont reproché aux protocoles de l’école de l’Iowa leur caractère profondément artificiel. Un rongeur placé dans un couloir en bois peint en blanc, astreint à une privation brutale de nourriture et confronté à une boîte de but stéréotypée, est-il représentatif de l’espèce Rattus norvegicus évoluant dans sa niche écologique naturelle ?

Des travaux majeurs ont souligné l’existence de puissantes contraintes biologiques pesant sur l’apprentissage :

  • L’effet Garcia (apprentissage d’aversion gustative en un seul essai même avec un délai de plusieurs heures) a prouvé que tous les stimuli ne sont pas arbitrairement associables entre eux, dynamitant l’équipotentialité universelle postulée par le béhaviorisme classique.
  • Les travaux de Martin Seligman sur l’impuissance acquise (learned helplessness) ont révélé que face à un stress inéluctable, les animaux ne développent pas nécessairement de la persistance, mais peuvent basculer dans un effondrement adaptatif généralisé.

Amsel a accueilli ces critiques avec une réelle ouverture d’esprit tout en défendant la nécessité méthodologique de l’abstraction expérimentale. Il soutenait que si le couloir de course ne reproduit pas la complexité de la savane ou du réseau d’égouts, il constitue le seul moyen de neutraliser le bruit statistique environnemental pour mettre au jour les lois fondamentales et universelles du tissu associatif cérébral. De plus, Amsel a souligné que la frustration et le contre-conditionnement constituent précisément des adaptations évolutives forgées par la sélection naturelle : dans un milieu naturel où les ressources alimentaires sont par nature éphémères, saisonnières et dispersées de façon aléatoire, les individus génétiquement programmés pour persévérer face à des échecs temporaires possédaient un avantage reproductif incontestable sur ceux qui renonçaient à la première tentative infructueuse.

10. Applications cliniques, comportementales et contemporaines

10.1 Addiction, jeu compulsif et persistance délétère

L’un des domaines où la puissance explicative de la théorie d’Abram Amsel trouve sa résonance sociétale la plus aiguë est incontestablement l’addictologie comportementale, et plus spécifiquement l’analyse du jeu de hasard et d’argent pathologique (ludomanie). Pourquoi des individus rationnels s’acharnent-ils à insérer des fortunes dans des machines à sous ou à valider des paris sportifs en ligne, alors même que le bilan économique global est inexorablement déficitaire ?

La théorie du contre-conditionnement d’Amsel offre la grille de lecture psychologique la plus aboutie pour élucider le mystère de la « poursuite des pertes » (loss chasing). Les opérateurs de jeux d’argent ont, de manière empirique puis algorithmique, calqué leurs systèmes sur des programmes de renforcement intermittent à ratio variable extrêmement agressifs. Dans ces environnements :

  • Chaque perte financière déclenche une bouffée de frustration primaire (RF).
  • La répétition de ces échecs induit le signal intéroceptif aversif de frustration conditionnée (sF).
  • Le gain occasionnel et imprévisible qui survient au détour de la séquence associe directement ce malaise interne sF à l’acte de rejouer immédiatement.

Il en résulte une conversion tragique : au lieu de fonctionner comme un signal d’arrêt ou un avertissement dissuasif, la sensation aiguë de perte devient le stimulus proprioceptif inconscient qui pousse compulsivement le joueur à miser de nouveau. L’individu ne persévère point malgré la frustration, il joue propulsé par sa frustration contre-conditionnée. Ce cycle d’assuétude comportementale explique l’inefficacité notoire des campagnes de prévention purement rationnelles et guide aujourd’hui les protocoles de remédiation cognitive visant à éteindre cette boucle réflexe délétère.

10.2 Développement de la résilience et psychologie infantile

Les prolongements des travaux d’Amsel dans le champ de la psychologie du développement et de la psychoéducation parentale sont d’une richesse inestimable. La théorie de la frustration permet de repenser radicalement la notion contemporaine de résilience chez l’enfant et l’adolescent. Les données expérimentales issues de décennies de recherches animales indiquent sans équivoque qu’un organisme élevé dans un environnement de renforcement continu à 100 % — où chaque désir est immédiatement exaucé sans délai ni épreuve — est condamné à une vulnérabilité psychologique extrême face à la moindre adversité future.

Dès lors que cet individu surprotégé est confronté à l’omission inévitable de gain dans le monde adulte réel, la survenue brutale du signal RF provoque un effondrement adaptatif massif, caractérisé soit par des colères explosives incontrôlables, soit par une résignation dépressive immédiate. À l’inverse, l’exposition mesurée, sécurisée et progressive à des échecs modérés durant l’enfance agit comme un véritable « vaccin émotionnel » :

  • Elle permet au jeune cerveau d’engager la maturation synaptique de ses circuits hippocampiques et préfrontaux.
  • Elle entraîne le sujet à apprivoiser le signal sF et à contre-conditionner le stress de l’échec en une disposition conative à l’effort soutenu.

Les programmes de psychoéducation moderne fondés sur le paradigme amselien enseignent aux parents et aux éducateurs comment calibrer le renforcement intermittent face aux caprices et crises de colère (temper tantrums). L’écueil classique consiste à céder aux hurlements de l’enfant en lui octroyant finalement la récompense convoitée : ce faisant, le parent applique involontairement un renforcement intermittent dévastateur, contre-conditionnant la détresse de l’enfant et fabriquant des conduites d’opposition d’une ténacité indestructible face à l’extinction.

10.3 Intelligence artificielle et apprentissage par renforcement moderne

De manière fascinante, les axiomes formalisés par Abram Amsel au milieu du siècle dernier connaissent une résurrection spectaculaire au sein des architectures contemporaines d’apprentissage par renforcement (Reinforcement Learning) en intelligence artificielle et en robotique autonome. Les algorithmes modernes, dérivés des formulations canoniques de Sutton et Barto sur le contrôle par différence temporelle (Temporal-Difference Learning ou TD-learning), partagent une identité mathématique troublante avec les équations de prédiction d’Amsel et de Spence.

L’un des défis majeurs auxquels sont confrontés les agents artificiels autonomes (comme les réseaux neuronaux profonds de type Deep Q-Networks) réside dans le dilemme universel entre exploration et exploitation. Si un agent se contente d’exploiter les chemins ayant déjà rapporté des gains certains, il s’enferme dans des sous-optima locaux stériles. Pour briser cette inertie, les chercheurs contemporains implémentent désormais des heuristiques bio-inspirées directement calquées sur la théorie de la frustration :

  • L’omission d’une récompense prédite génère un signal d’erreur négatif analogue à RF.
  • Ce signal induit une décharge dynamique temporaire qui élève artificiellement la température stochastique de l’algorithme (comme dans le Softmax ou la recherche par entropie maximale).
  • Cette poussée pousse l’agent à diversifier immédiatement ses schémas moteurs et à explorer des trajectoires novatrices.

De plus, l’encodage d’un coût interne analogue au signal aversif sF permet à des robots autonomes d’apprendre la persévérance au sein d’environnements physiques bruités et instables, empêchant l’abandon prématuré d’une tâche dès la première défaillance technique. La formalisation logique d’Amsel fournit ainsi l’armature conceptuelle nécessaire pour doter les intelligences non-biologiques d’une résilience fonctionnelle face à l’incertitude.

11. L’œuvre pédagogique, institutionnelle et éditoriale d’Abram Amsel

11.1 Direction de revues et gouvernance académique

L’influence exercée par Abram Amsel sur l’histoire des sciences comportementales ne s’est pas limitée à la créativité solitaire de ses travaux de laboratoire ; elle s’est déployée avec une autorité exceptionnelle à travers sa gouvernance institutionnelle et son magistère éditorial. Durant plusieurs décennies, Amsel a été l’un des piliers directeurs de la prestigieuse Psychonomic Society, société savante qui regroupe l’élite de la psychologie cognitive et expérimentale internationale. Il y a défendu avec une intransigeance absolue le respect de critères méthodologiques stricts, luttant inlassablement contre la dérive des publications sensationnalistes ou méthodologiquement fragiles.

Son mandat en tant que rédacteur en chef de la revue fondamentale Animal Learning & Behavior (rebaptisée depuis Learning & Behavior) a marqué un âge d’or de la discipline. Sous sa direction vigilante, la revue a incarné le parangon de la rigueur déductive : chaque protocole expérimental devait présenter des contrôles irréprochables, des échantillons statistiques robustes et une analyse chronométrique détaillée. Amsel s’est également illustré par sa défense courageuse et passionnée de l’expérimentation animale éthique. Face aux premières contestations sociétales et aux restrictions budgétaires fédérales, il a inlassablement rappelé que sans l’étude fondamentale du modèle animal, la compréhension des bases cérébrales de l’apprentissage, de l’anxiété et des psychopathologies humaines serait condamnée à la régression spéculative.

11.2 Les ouvrages synthétiques fondamentaux

L’aboutissement de la trajectoire intellectuelle d’Abram Amsel s’est matérialisé par la publication de deux monographies monumentales qui figurent aujourd’hui parmi les grands classiques de la littérature psychologique du XXe siècle. En 1989, il publie aux éditions de l’Université de Cambridge l’ouvrage magistral : Behavioral Analysis of Frustration: Forty Years of Theory and Research. Ce volume de plus de cinq cents pages constitue une somme encyclopédique où l’auteur rassemble, ordonne et discute quatre décennies d’investigations empiriques menées à Tulane, Toronto et Austin. Amsel y démontre avec une clarté souveraine la cohérence inaltérable de son paradigme face aux théories rivales.

Trois ans plus tard, en 1992, il livre son chef-d’œuvre théorique ultime : Frustration Theory: An Analysis of Dispositional Learning and Emotional Properties. Dans ce texte d’une prodigieuse densité épistémologique, Amsel dépasse le simple compte-rendu d’expériences de laboratoire pour proposer une théorie globale des « dispositions comportementales ». Il y articule avec brio la manière dont les émotions conditionnées sculptent durablement le tempérament, la tolérance au stress et la structure caractérielle des individus vertébrés. Ces manuels continuent de constituer des lectures obligatoires et formatrices pour des générations de doctorants et de chercheurs en psychologie expérimentale et en neurosciences comportementales à travers le monde anglophone.

11.3 Formation des chercheurs et mentorat intellectuel

La grandeur d’un homme de science se mesure également à la vitalité de sa descendance académique. Tout au long de ses passages successifs à l’Université Tulane, à l’Université de Toronto et à l’Université du Texas à Austin, Abram Amsel a fondé une véritable école de pensée, formant des dizaines de chercheurs dont beaucoup sont devenus à leur tour des figures de proue de la psychologie internationale. Parmi ses étudiants et post-doctorants les plus renommés figurent des figures majeures qui ont enrichi les neurosciences comportementales et la psychopharmacologie moderne.

Les témoignages concordants de ses anciens étudiants dépeignent un directeur de recherche d’une envergure exceptionnelle, incarnant un style socratique fait d’exigence intellectuelle implacable et d’une immense générosité humaine :

  • Lors des séminaires doctoraux hebdomadaires, il soumettait chaque projet de thèse à une critique analytique sans concession, traquant la moindre faille logique dans la chaîne déductive.
  • Il inculquait le respect scrupuleux de l’animal d’expérience, enseignant à ses disciples qu’un rongeur n’est point un objet d’exercice machinal, mais un système biologique complexe dont chaque paramètre physiologique doit être choyé et respecté.
  • Il transmettait une éthique du travail acharné, passant lui-même de longues heures nocturnes au laboratoire pour vérifier l’étalonnage des cellules photoélectriques et la synchronisation des enregistreurs à relais.

Cette culture de l’excellence méthodologique alliée à une curiosité théorique sans bornes demeure gravée dans l’ADN des laboratoires de psychologie issus de sa lignée académique.

12. Bilan historique et héritage intellectuel d’Abram Amsel

12.1 La pérennité du concept de frustration en neurosciences cognitives

Près de deux décennies après la disparition d’Abram Amsel en août 2006, la fécondité de son cadre conceptuel ne cesse de surprendre par son étonnante jeunesse. Si le lexique néobéhavioriste strict (avec ses acronymes rF – sF) s’est parfois effacé au profit du jargon contemporain des neurosciences computationnelles, les réalités psychologiques et neurobiologiques qu’il a mises au jour demeurent plus centrales que jamais. Le concept de frustration conditionnée survit et s’épanouit aujourd’hui sous les vocables d’omission aversive, de coût d’opportunité et de mise à jour de l’utilité espérée.

Les chercheurs étudiant les substrats neuraux du regret, de la déception et de la prise de décision économique sous incertitude chez l’être humain — notamment par imagerie par résonance magnétique fonctionnelle (IRMf) — redécouvrent quotidiennement les principes théorisés par Amsel. Lorsque le striatum ventral et le cortex orbitofrontal manifestent une désactivation abrupte consécutive à l’absence d’un gain financier escompté dans une tâche de loterie, c’est très exactement la réaction primaire RF d’Amsel qui est visualisée à l’échelle millimétrique. De même, les recherches actuelles sur la résilience face à la douleur chronique et à l’adversité sociale s’appuient massivement sur les protocoles translationnels de contre-conditionnement issus des paradigmes du rongeur juvénile.

12.2 Place définitive d’Amsel dans l’histoire de la psychologie

Dans la grande fresque historique de la psychologie scientifique, Abram Amsel occupe une place singulière et irremplaçable : celle de trait d’union indispensable entre le grand néobéhaviorisme mécaniste du milieu du siècle et les neurosciences affectives contemporaines inaugurées par des figures telles que Jaak Panksepp ou Joseph LeDoux. Là où d’autres ont capitulé face à la complexité des émotions en les rejetant hors du champ de la science rigoureuse, et là où certains cognitivistes ont dissous le corps dans des métaphores logicielles abstraites, Amsel a réussi la synthèse parfaite.

Il a démontré que l’on pouvait être un positiviste absolu, un adepte du déterminisme expérimental le plus strict, tout en reconnaissant aux émotions intérieures un pouvoir causal déterminant sur l’action et le destin adaptatif de l’organisme. Aux côtés de Clark Hull, de Kenneth Spence et d’Edward Tolman, Abram Amsel s’inscrit au panthéon des bâtisseurs de la science du comportement. Sa leçon épistémologique majeure résonnera encore longtemps : les forces qui façonnent la persévérance et le courage face à l’infortune ne relèvent pas du mystère métaphysique, mais de lois biologiques et associatives précises, que l’intelligence humaine est capable d’élucider et de modéliser pour le bien de la connaissance et de la clinique.

12.3 Conclusions et perspectives pour la recherche future

À l’aube du XXIe siècle, l’héritage d’Abram Amsel invite la nouvelle génération de neuroscientifiques à relever des défis passionnants à l’aide d’outils technologiques qui auraient émerveillé le maître d’Austin. L’avènement de l’optogénétique, de l’imagerie calcique à deux photons in vivo et de la transcriptomique à l’échelle de la cellule unique permet désormais de manipuler et de visualiser, en temps réel et avec une précision milliseconde, les engrammes neuronaux spécifiques de la frustration au sein des microcircuits du septum et de l’hippocampe.

Il est désormais possible d’activer artificiellement par des impulsions lumineuses le réseau cellulaire exact correspondant au signal sF chez un animal en mouvement libre, pour vérifier si cette manipulation recrée à elle seule la persistance comportementale du PREE en l’absence de tout entraînement partiel préalable. De même, les protocoles modernes de thérapie par exposition dans la réalité virtuelle pour traiter les phobies et les stress post-traumatiques appliquent avec un succès éclatant le principe amselien du contre-conditionnement de l’état aversif interne.

En s’éteignant en 2006 à l’âge de 83 ans, Abram Amsel laissait derrière lui une œuvre scientifique monumentale, exempte de toute concession à la facilité, érigée à force de patience, de rigueur et d’une passion inaltérable pour la vérité du laboratoire. Son nom reste à jamais gravé dans l’histoire de la pensée comme celui qui a su éclairer d’une lumière rationnelle et bienveillante la mécanique intime de l’un des sentiments les plus universels et les plus douloureux de l’expérience vivante : la frustration.

Références

Amsel, A. (1949). The combination of a primary appetitional drive with experimentally induced frustration. Journal of Experimental Psychology, 39(6), 843–851. https://psycnet.apa.org/record/1950-02553-001

Amsel, A. (1958). The role of frustrative nonreward in noncontinuous reward situations. Psychological Bulletin, 55(2), 102–119. https://psycnet.apa.org/record/1959-02685-001

Amsel, A. (1962). Frustrative nonreward in partial reinforcement and discrimination learning: Some recent history and a theoretical extension. Psychological Review, 69(4), 306–328. https://psycnet.apa.org/record/1963-02195-001

Amsel, A. (1967). Partial reinforcement effects on vigor and persistence: Advances in frustration theory derived from a variety of compositions. In K. W. Spence & J. T. Spence (Eds.), The Psychology of Learning and Motivation (Vol. 1, pp. 1–65). Academic Press. https://doi.org/10.1016/S0079-7421(08)60051-5

Amsel, A. (1972). Inhibition and mediation in classical, instrumental, and discrimination conditioning. In R. A. Boakes & M. S. Halliday (Eds.), Inhibition and Learning (pp. 405–439). Academic Press.

Amsel, A. (1986). Developmental Psychobiology and Intersensory Communications. Academic Press.

Amsel, A. (1989). Behavioral Analysis of Frustration: Forty Years of Theory and Research. Cambridge University Press. https://doi.org/10.1017/CBO9780511665554

Amsel, A. (1992). Frustration Theory: An Analysis of Dispositional Learning and Emotional Properties. Cambridge University Press. https://doi.org/10.1017/CBO9780511527630

Amsel, A., & Roussel, J. (1952). Motivational properties of frustration: I. Effect on a running response of the addition of frustration to the motivational complex. Journal of Experimental Psychology, 43(5), 363–368. https://psycnet.apa.org/record/1953-01053-001

Capaldi, E. J. (1966). Partial reinforcement: A hypothesis of sequential effects. Psychological Review, 73(5), 459–477. https://psycnet.apa.org/record/1966-12629-001

Capaldi, E. J. (1967). A sequential hypothesis of instrumental learning. In K. W. Spence & J. T. Spence (Eds.), The Psychology of Learning and Motivation (Vol. 1, pp. 67–156). Academic Press. https://doi.org/10.1016/S0079-7421(08)60052-7

Gray, J. A. (1982). The Neuropsychology of Anxiety: An Enquiry into the Functions of the Septo-Hippocampal System. Oxford University Press.

Gray, J. A., & McNaughton, N. (2000). The Neuropsychology of Anxiety: An Enquiry into the Functions of the Septo-Hippocampal System (2nd ed.). Oxford University Press. https://doi.org/10.1093/acprof:oso/9780198522713.001.0001

Hull, C. L. (1943). Principles of Behavior: An Introduction to Behavior Theory. Appleton-Century-Crofts.

Miller, N. E. (1944). Experimental studies of conflict. In J. M. Hunt (Ed.), Personality and the Behavior Disorders (Vol. 1, pp. 431–465). Ronald Press.

Schultz, W. (1998). Predictive reward signal of dopamine neurons. Journal of Neurophysiology, 80(1), 1–27. https://doi.org/10.1152/jn.1998.80.1.1

Skinner, B. F. (1938). The Behavior of Organisms: An Experimental Analysis. Appleton-Century.

Spence, K. W. (1956). Behavior Theory and Conditioning. Yale University Press.

Sutton, R. S., & Barto, A. G. (2018). Reinforcement Learning: An Introduction (2nd ed.). MIT Press. https://mitpress.mit.edu/9780262039246/reinforcement-learning/

Tolman, E. C. (1948). Cognitive maps in rats and men. Psychological Review, 55(4), 189–208. https://psycnet.apa.org/record/1948-04825-001

★

Rate This Content

5.0 / 5 • 1 vote