Summary

Protocolli dell'operatore per valutare l'analisi costi-benefici durante la risoluzione rinforzato dai roditori

Published: September 10, 2018
doi:

Summary

Un’analisi costi-benefici è un approccio di scala di pesatura che il cervello esegue nel corso del processo decisionale. Qui, vi proponiamo un protocollo per addestrare i ratti su un paradigma decisionale basato su operant dove ratti scegliere premi più elevati, a scapito in attesa per 15 s a riceverli.

Abstract

Rinforzo-guidato processo decisionale è la possibilità di scegliere tra concorrenti corsi d’azione basato sul valore relativo i benefici e le loro conseguenze. Questo processo è parte integrante del comportamento umano normale e ha dimostrato di essere disturbato da disturbi neurologici e psichiatrici quali dipendenza, schizofrenia e la depressione. Roditori sono stati utilizzati a lungo per scoprire la neurobiologia della cognizione umana. A tal fine, sono state sviluppate diverse attività comportamentali; Tuttavia, la maggior parte sono non automatizzati e sono alta intensità di lavoro. Il recente sviluppo del microcontrollore open source ha permesso ai ricercatori di automatizzare attività basate su strumentale per valutare una gamma di compiti cognitivi, standardizzando la presentazione dello stimolo, migliorandone la registrazione di dati e di conseguenza, l’output di ricerca. Qui, descriviamo una ritardo-base rinforzo-guida decisionale operazione automatica, usando un operant t-labirinto controllato da programmi software personalizzato. Utilizzando questi compiti decisionali, mostriamo le modifiche alle attività potenziali di campo locale nella corteccia anteriore del cingulate di un ratto mentre esegue un compito decisionale basato su ritardo costi e benefici.

Introduction

Processo decisionale è il processo di riconoscimento e selezione di scelte basate sui valori e le preferenze del decisore e le conseguenze dell’ azione selezionata1. Anche se il processo decisionale è stato ampiamente studiato in diversi campi (cioè, economia, psicologia e neuroscienze), i meccanismi neurali alla base di tali capacità cognitive ancora completamente non sono capiti. Due sottocategorie del processo decisionale sono decisioni percettive e rinforzo-guida del processo decisionale. Anche se essi incorporano concetti e considerevole degli elementi sovrapposti, percettivo processo decisionale si basa su informazioni sensoriali disponibili1,2, considerando che il processo decisionale di rinforzo-guida offerte con il valore relativo delle azioni maturate nel corso di una specifica scala cronologica3. Un aspetto importante del rinforzo processo decisionale è l’analisi costi-benefici che viene eseguita in modo intuitivo dal cervello calcolando i benefici delle scelte determinate e sottraendo i costi di ogni alternativa1.

Il t-labirinto (o la variante Y-labirinto) è uno dei labirinti più utilizzati in esperimenti cognitivi usando i roditori. Gli animali sono collocati nel braccio di inizio (la base della T) e consentiti di scegliere il braccio di obiettivo (uno dei bracci laterali). Attività come un forzato alternanza o sinistra-destra discriminazione sono usata principalmente con i roditori nel t-labirinto per testare riferimento e lavoro memoria4. T-labirinti sono anche ampiamente utilizzati nel processo decisionale esperimenti5,6,7. Nel modello più semplice, la ricompensa viene inserita nel braccio un solo obiettivo. La scelta è prevedibile, e animali certamente preferirebbe la ricompensa piuttosto che niente, indipendentemente dal valore di ricompensa. Un’altra opzione è di posizionare ricompense in entrambi i bracci obiettivo e poi lasciare che gli animali fanno una scelta di quale percorso a prendere a seconda di diversi parametri (cioè, la preferenza naturale dell’animale, la differenza nel valore di ricompense e i costi da pagare). Nella progettazione basata sul valore, il compito è più complicato avendo proprietà scala di pesatura. In questo modo, un animale riceve premi valutati in modo diverso, scegliendo tra le due alternative, nonché tra i costi delle azioni [cioè, la quantità di attesa (ritardo-base) o la quantità di sforzo (sforzo-basato) necessario per ricevere ricompense], ciascuno contribuendo alla decisione che è stata effettuata5,6.

Nel tradizionale basato su ritardo t-labirinto processo decisionale, gli animali sono addestrati per selezionare il braccio alta ricompensa (HRA) ed evitare l’opposto braccio basso ricompensa (LRA). I lati dell’Autorità registrazione integrità e il LRA rimangono invariati in tutto l’esperimento. Anche se l’attività descritta sopra è stata ben documentata nella letteratura, soffre di diversi inconvenienti procedurali. In primo luogo, avendo un braccio di obiettivo fisso, l’animale sa che braccio da scegliere all’inizio di ogni prova. In questo scenario, gli animali possono selezionare il braccio di obiettivo basato sulla loro memoria, piuttosto che il processo decisionale. Quindi, in un paradigma decisionale basato su ritardo, se un animale seleziona la ricompensa bassa a causa dell’intervento di studio, non sarà chiaro se questo è a causa di una perdita di memoria o l’intervento di studio. Un gruppo di controllo di memoria per segregare il comportamento osservato dal problema di memoria potrebbe essere considerato, ma questo oneri ricercatori e animali simili a causa del lavoro aggiuntivo7. Una seconda preoccupazione è il momento del processo decisionale da parte dell’animale: una volta che gli animali raggiungono la zona di decisione (incrocio di tutte le tre armi), di solito guardare a sinistra e a destra, pesano i costi e i benefici per quanto riguarda ogni braccio e quindi la loro decisione. Tuttavia, dopo un paio di prove, calcoli prima di arrivare alla zona della decisione e semplicemente eseguire direttamente al braccio ricompensa. Di conseguenza, questi due inconvenienti — una pre-distorsione per un braccio e trovare il momento del processo decisionale — entrambi altamente interrompere l’interpretazione di elettrofisiologici e dati di neuroimaging.

Nel metodo spiegato in questo documento, il braccio comodo (HRA) viene ricercato da un segnale uditivo e può variare da prova a prova. Animali avviare le prove di entrare nella zona di test (Figura 1) e innescando il cue uditivo da “naso-frugando” un cancello a infrarossi che è stato inserito all’incrocio delle tre armi. Il segnale audio (20 dB, tra 500 e 1.000 ms) viene riprodotto da un altoparlante all’estremità del braccio obiettivo.

Protocol

Tutte le procedure descritte qui sono stati approvati, effettuate in conformità con la guida per la cura e l’uso di animali da laboratorio e sono stati approvati dal comitato di etica animale Istituto Florey o centro di ricerca di neuroscienza. 1. alloggiamento, manipolazione e restrizione alimentare Ratti del maschio adulto (normalmente 8 settimane) (eventuali ceppi) e conservatele in camera con un ciclo luce/buio di 12 h. Limitare il loro accesso al cibo per incoraggiare…

Representative Results

I dati qui presentati sono la LFP registrate dalla corteccia orbitofrontal di sinistra (OFC) e la corteccia cingolata anteriore (ACC) di sei ratti maschii di Wistar utilizzando elettrodi bipolari (di acciaio con rivestimento PFA). La tabella 1 Mostra la lunghezza di acquisizione comportamentale per ogni fase di formazione. Le coordinate per la località di destinazione sono state determinate da un ratto Atlante9 del cervello e sono come segue: per …

Discussion

Roditori lungamente sono stati usati negli studi sulle neuroscienze che trattano diversi argomenti, da abilità cognitive quali apprendimento e memoria2,14 e comportamento rinforzato7,15,16 al controllo centrale di organi17,18 e neurofarmacologia19,20. Pr…

Divulgaciones

The authors have nothing to disclose.

Acknowledgements

Questa ricerca è stata sostenuta dalla Fondazione neuroscienze di RMH, Australia; la Fondazione di cervello australiano; il RACP Thyne Reid Fellowship, Australia; e da un progetto di concedere le Scienze Cognitive e tecnologie Consiglio, l’Iran ad Abbas Haghparast.

Materials

T-maze Self made
Dustless Precision Sugar Pellets TSE Systems Intl. Group F0023 45 mg, Sucrose
Ketamine Hydrochloride Injection, USP Sigma-Aldrich 6740-87-0
Xylazine Sigma-Aldrich 7361-61-7
stereotaxic device Stoelting
Isofluran Santa Cruz Biotechnology sc-363629Rx
PFA-coated stainless-steel wires A-M systems
acrylic cement Vertex, MA, USA
(wooden or PVC (polyvinyl chloride)-made) local suppliers
Mini-Fit Power Connector Molex 15243048
ethannol 70% Local suppliers
buprenorphine diamondback drugs
Arduino UNO Arduino https://www.arduino.cc/
Infrared emitting diode Sharp GL480E00000F http://www.sharp-world.com/
Chronux Toolbox Chronux.org
Arduino codes https://github.com/dechuans/arduino-maze

Referencias

  1. Gold, J. I., Shadlen, M. N. The neural basis of decision making. Annual Review of Neuroscience. 30, 535-574 (2007).
  2. Shi, Z., Müller, H. J. Multisensory perception and action: development, decision-making, and neural mechanisms. Frontiers in Integrative Neuroscience. 7, 81 (2013).
  3. Sutton, R. S., Barto, A. G. . Reinforcement Learning: An Introduction. 1, (1998).
  4. Khani, A., Rainer, G. Neural and neurochemical basis of reinforcement-guided decision making. Journal of Neurophysiology. 116, 724-741 (2016).
  5. Fatahi, Z., Haghparast, A., Khani, A., Kermani, M. Functional connectivity between anterior cingulate cortex and orbitofrontal cortex during value-based decision making. Neurobiology of Learning and Memory. 147, 74-78 (2018).
  6. Khani, A., et al. Activation of cannabinoid system in anterior cingulate cortex and orbitofrontal cortex modulates cost-benefit decision making. Psychopharmacology. 232, 2097-2112 (2015).
  7. Rudebeck, P. H., Walton, M. E., Smyth, A. N., Bannerman, D. M., Rushworth, M. F. Separate neural pathways process different decision costs. Nature Neuroscience. 9, 1161-1168 (2006).
  8. Gage, G. J., et al. Surgical implantation of chronic neural electrodes for recording single unit activity and electrocorticographic signals. Journal of Visualized Experiments. (60), e3565 (2012).
  9. Paxinos, G., Watson, C. . The Rat Brain in Stereotaxic Coordinates. , (1998).
  10. Bokil, H., Andrews, P., Kulkarni, J. E., Mehta, S., Mitra, P. P. Chronux: a platform for analyzing neural signals. Journal of Neuroscience Methods. 192, 146-151 (2010).
  11. Cohen, M. X. . Analyzing Neural Time Series Data: Theory and Practice. , (2014).
  12. Luk, C. -. H., Wallis, J. D. Choice coding in frontal cortex during stimulus-guided or action-guided decision-making. Journal of Neuroscience. 33, 1864-1871 (2013).
  13. Rudebeck, P. H., et al. Frontal cortex subregions play distinct roles in choices between actions and stimuli. Journal of Neuroscience. 28, 13775-13785 (2008).
  14. Goshadrou, F., Kermani, M., Ronaghi, A., Sajjadi, S. The effect of ghrelin on MK-801 induced memory impairment in rats. Peptides. 44, 60-65 (2013).
  15. Haghparast, A., et al. Intrahippocampal administration of D2 but not D1 dopamine receptor antagonist suppresses the expression of conditioned place preference induced by morphine in the ventral tegmental area. Neuroscience Letters. 541, 138-143 (2013).
  16. Esmaeili, M. -. H., Kermani, M., Parvishan, A., Haghparast, A. Role of D1/D2 dopamine receptors in the CA1 region of the rat hippocampus in the rewarding effects of morphine administered into the ventral tegmental area. Behavioural Brain Research. 231, 111-115 (2012).
  17. Chaleek, N., Kermani, M., Eliassi, A., Haghparast, A. Effects of orexin and glucose microinjected into the hypothalamic paraventricular nucleus on gastric acid secretion in conscious rats. Neurogastroenterology & Motility. 24, e94-e102 (2012).
  18. Kermani, M., Eliassi, A. Gastric acid secretion induced by paraventricular nucleus microinjection of orexin A is mediated through activation of neuropeptide Yergic system. Neurociencias. 226, 81-88 (2012).
  19. Kermani, M., Azizi, P., Haghparast, A. The role of nitric oxide in the effects of cumin (Cuminum Cyminum L.) fruit essential oil on the acquisition of morphine-induced conditioned place preference in adult male mice. Chinese Journal of Integrative Medicine. , 1-6 (2012).
  20. Ahmadi, A., et al. Synthesis and antinociceptive behaviors of new methyl and hydroxyl derivatives of phencyclidine. Current Medicinal Chemistry. 19, 763-769 (2012).

Play Video

Citar este artículo
Kermani, M., Fatahi, Z., Sun, D., Haghparast, A., French, C. Operant Protocols for Assessing the Cost-benefit Analysis During Reinforced Decision Making by Rodents. J. Vis. Exp. (139), e57907, doi:10.3791/57907 (2018).

View Video