Negative reinforcement of behavioral variability without previous training with positive reinforcement.

In a previous study, Fonseca Júnior and Hunziker (2017) provided evidence of the control of behavioral variability by avoidance contingencies. However, their study presented three methodological weaknesses: (1) only one contingency reversal was conducted in the experimental design adopted, (2) the lever press was shaped using a positive reinforcement procedure, and (3) the intermittency of reinforcement between Lag n and Yoke conditions was not successfully equaled. The present study aimed to overcome these three methodological limitations. Three experimentally naive male rats with no prior history with positive reinforcement had sequences of three lever presses between two levers negatively reinforced under the following discrete trial avoidance contingencies that provided similar intermittency of reinforcement: Lag 1, Yoke, Lag 1, and Yoke. All subjects showed high levels of behavioral variability under the Lag 1 contingency and decreased levels of behavioral variability under the Yoke contingency. These results replicate the findings of Fonseca Júnior and Hunziker, suggesting that behavioral variability can be controlled by avoidance contingency without previous exposure to positive reinforcement. Moreover, these findings suggest that the high levels of variation obtained under the Lag n condition are an effect of operant contingency and not a mere byproduct of the intermittency of reinforcement.

Can contingency rehearsal during the interval between a retrieval cue and extinction training change the effects of post-retrieval extinction?

Return of fear may be prevented by post-retrieval extinction (PRE), a procedure consisting of presenting a stimulus that was present during conditioning (retrieval cue) prior to extinction training. However, recent evidence suggests that there might be circumstances under which PRE is not effective to prevent the return of fear (boundary conditions), but some of these conditions remain unknown. We explored if rehearsing the CS, US or CS-US contingency during the interval between the retrieval cue and extinction training might change the effects of PRE. One day after differential fear conditioning, healthy human participants (n = 83) underwent either standard extinction (control condition, n = 31) or two different PRE procedures, one in which participants rehearsed the CS-US contingency during the interval between the retrieval cue and extinction (rehearsal condition, n = 25), or another in which they underwent a verbal fluency task directing their attention away from the experimental contingencies during this interval (nonrehearsal condition, n = 27). Return of fear in a reinstatement test was observed in both control and rehearsal conditions, whereas in the nonrehearsal condition there was a generalized increase in response to the CS+ and CS-. Differential response in the rehearsal condition had values slightly smaller than the control group with no significant differences from both control and nonrehearsal conditions. These results suggest that the overt behavior of participants during the interval between a retrieval cue and extinction training might change the effects of PRE in healthy human participants, but further manipulations of these variables are needed to confirm these findings.

Pain can be conditioned to voluntary movements through associative learning: an experimental study in healthy participants.

Experimental data suggest that associative learning can influence defensive avoidance behavior and pain perception in humans. However, whether voluntary movements can become conditioned stimuli (CSs) and influence pain responses is yet to be evaluated. Forty healthy volunteers participated in this study. Electrocutaneous stimuli applied to the shoulder at pain threshold level (US) and at pain tolerance level (US) were determined before a movement-conditioning paradigm. First, reaching movements to visual cues shown on one side of a computer screen were associated with the US (CS+ movements) on 80% of trials, whereas reaching movements to visual stimuli shown on the other side were never associated with the nociceptive-US (CS- movements). Next, participants underwent a test phase in which movements to visual cues on both sides were paired with the US on 50% of trials. During the test phase, participants were asked to evaluate whether the movement was painful (yes/no) and to rate pain intensity after each trial. Movement onset and duration as well as skin conductance responses were collected. The US stimuli were more likely to be perceived as painful and were also rated as more painful during CS+ movements. Movement onset latency and skin conductance responses were significantly higher in anticipation of the CS+ movement as compared to the CS- movement. These findings suggest that pain can be conditioned to voluntary movements.

A review of boundary conditions and variables involved in the prevention of return of fear after post-retrieval extinction.

Experimental evidence suggests that the return of fear may be prevented by post-retrieval extinction (PRE), a procedure consisting of extinction training after the presentation of a retrieval cue. However, attempts to replicate these findings have yielded mixed results, with some studies showing diminished fear responses after PRE, whereas others show no effect on the return of fear following this procedure. The discrepancies across studies have been interpreted as evidence that there might be conditions under which PRE is not effective (boundary conditions), but these variables have yet to be fully described. We aimed to provide an overview of PRE in humans. We briefly present the theory and research that originated post-retrieval procedures with a focus on the experimental setup used in human studies. We continue with a compilation of possible experimental boundary conditions along with some questions for future research.

Considerações sobre o modelo de seleção pelas consequências: o que mudou em 28 anos ? / Considerations about the selection by consequences model: what was changed in 28 years ?

Este artigo compara dois conjuntos de textos publicados no Brasil, em 1 988 e 201 6, focados na análise do modelo de seleção pelas consequências proposto por Skinner. São apresentados os contextos acadêmico sem que os dois conjuntos foram produzidos, um breve resumo das principais contribuições de cada texto,fazendo uma comparação entre eles para vislumbrar a evolução que se deu na comunidade de analistas de comportamento no Brasil ao longo dos últimos 28 anos. No final, sugere-se que novas publicações possam analisar dados experimentais recentes e sua compatibilidade com o nível ontogenético de seleção por consequências, complementando as considerações teórico-filosóficas aqui apresentadas em relação à seleção nos níveis filogenético e cultural

The effects of prenatal "psychological" stressor exposure on lung inflammation and hyperresponsiveness in adult rat offspring.

The aim of this study was to establish whether exposure of pregnant rats to uncontrollable (psychological) stressors might change the likelihood of their offspring to exhibit functional and histopathological abnormalities suggestive of asthma in adulthood. Pregnant rats (n = 16) underwent one of three treatments: electric shocks of a maximum duration of 10 s that could be escaped (controllable group; C) those that could not be escaped (uncontrollable group; U) or no shocks (control group; N). The offspring (n = 54) were kept in animal house under standard conditions until 3 months of age, when lung hyperresponsiveness, histopathology, immunohistochemical measurements of the cytokines interleukin (IL) 2, IL-4, IL-5, and IL-13 and actin as well as oxidative stress based on iNOS-positive cell counts and isoprostane PGF2α contents were assessed. The results showed that prenatal exposure to physical stressors (shocks) caused lung hyperresponsiveness and increased cytokine expression; exposure to uncontrollable shock (group U) had a differential effect on the expression of IL-2, IL-5, and IL-13 in inflammatory cells compared to exposure to controllable shock (group C), which characterizes the "psychological" aspect of stress. The results show that not only stress but also its uncontrollability during gestation might increase the likelihood that the offspring will exhibit functional and histopathological abnormalities suggestive of asthma. These findings strengthen the importance of psychological control with regard to environmental stimuli for the occurrence of several illnesses, suggesting the desirability of integration among various fields of science.

Contribuições das Neurociências para o Estudo do Comportamento Discriminativo1 / Contributions of Neurosciences to the Study of Discriminative Behavior

RESUMO Este artigo buscou examinar algumas das contribuições das neurociências para o estudo da discriminação de estímulos. Foram discutidos experimentos relacionados a processos discriminativos envolvendo (a) estimulação cerebral como estímulo antecedente e consequente, (b) atividade neural como resposta, (c) lesão cerebral, (d) drogas e (e) mudanças no cérebro em função do treino discriminativo. Argumenta-se que a integração entre dados comportamentais e (neuro) fisiológicos tem se mostrado uma estratégia promissora para um entendimento mais completo sobre o comportamento dos organismos.

ABSTRACT This paper aims to examine some contributions of neuroscience to the study of stimulus discrimination. Experiments are discussed concerning the discriminative processes involving (1) brain stimulation as antecedent and consequent stimulus, (2) neural activity as response, (3) brain lesions, (4) drugs, and (5) brain changes after exposure to discriminative training. We argue that the integration of behavioral and (neuro) physiological data has proved to be a promising strategy for a more complete understanding of the behavior of organisms.

Learned helplessness in the rat: effect of response topography in a within-subject design.

Three experiments investigated learned helplessness in rats manipulating response topography within-subject and different intervals between treatment and tests among groups. In Experiment 1, rats previously exposed to inescapable shocks were tested under an escape contingency where either jumping or nose poking was required to terminate shocks; tests were run either 1, 14 or 28 days after treatment. Most rats failed to jump, as expected, but learned to nose poke, regardless of the interval between treatment and tests and order of testing. The same results were observed in male and female rats from a different laboratory (Experiment 2) and despite increased exposure to the escape contingencies using a within-subject design (Experiment 3). Furthermore, no evidence of helplessness reversal was observed, since animals failed to jump even after having learned to nose-poke in a previous test session. These results are not consistent with a learned helplessness hypothesis, which claims that shock (un)controllability is the key variable responsible for the effect. They are nonetheless consistent with the view that inescapable shocks enhance control by irrelevant features of the relationship between the environment and behavior.

Comportamento de dor: análise funcional e alguns dados experimentais / Pain behavior: functional analysis and some experimental data

A dor pode ser analisada sob diferentes perspectivas, a depender dos referenciais teóricos que embasam o seu estudo. O presente texto utiliza a perspectiva analítico-comportamental considerando a dor como um comportamento encoberto. São relatados alguns experimentos com animais que exemplificam como a dor pode ser função de aprendizagens operantes ou respondentes, além de determinantes filogenéticos. Conclui-se pela necessidade de maior interação entre as diferentes ciências que estudam a dor, dentre elas a Fisiologia, a Farmacologia e a Análise do Comportamento.(AU)

The pain analysis can be done from different perspectives, depending on the theorical basis for this study. The present paper is based on the behavioral analytic perspective, understanding pains as a covert behavior. We analyze some animal studies demonstrating that pain can be a function ontogenetic processes (operant or respondent learning) moreover the phylogenetics ones. We conclude that it is necessary more interaction among the different sciences interested on the pain study, like the Physiology, Pharmacology or Behavior Analysis.(AU)

Aprendizagem discriminativa após choques incontroláveis / Discriminative learning after uncontrollable shocks

O objetivo desse estudo foi investigar se estímulos aversivos não contingentes (incontroláveis) produzem interferência em um processo de aprendizagem discriminativa reforçada positivamente. Vinte e quatro ratos foram distribuídos em três grupos (n=8) que diferiram entre si quanto ao tratamento recebido na primeira sessão: choques controláveis (C), incontroláveis (I) ou nenhum choque (N). Posteriormente, todos foram submetidos a 10 sessões de treino discriminatório com reforço positivo, em esquema múltiplo-concorrente FR-6/Extinção. Os resultados do treino discriminativo mostraram que, na primeira sessão, a exposição prévia a choques produziu menor frequência de respostas, sendo esse efeito levemente mais acentuado no grupo 1; na décima sessão, os grupos não diferiram entre si quanto à frequência de respostas e ao índice discriminativo, que ficou acima de 0,80. O efeito transitório do tratamento com choques incontroláveis, sem interferência a longo prazo no estabelecimento do controle de estímulos por reforçamento positivo, é contrário à generalidade do desamparo aprendido para contextos não aversivos.

Aprendizagem discriminativa após choques incontroláveis / Discriminative learning after uncontrollable shocks

O objetivo desse estudo foi investigar se estímulos aversivos não contingentes (incontroláveis) produzem interferência em um processo de aprendizagem discriminativa reforçada positivamente. Vinte e quatro ratos foram distribuídos em três grupos (n=8) que diferiram entre si quanto ao tratamento recebido na primeira sessão: choques controláveis (C), incontroláveis (I) ou nenhum choque (N). Posteriormente, todos foram submetidos a 10 sessões de treino discriminatório com reforço positivo, em esquema múltiplo-concorrente FR-6/Extinção. Os resultados do treino discriminativo mostraram que, na primeira sessão, a exposição prévia a choques produziu menor frequência de respostas, sendo esse efeito levemente mais acentuado no grupo 1; na décima sessão, os grupos não diferiram entre si quanto à frequência de respostas e ao índice discriminativo, que ficou acima de 0,80. O efeito transitório do tratamento com choques incontroláveis, sem interferência a longo prazo no estabelecimento do controle de estímulos por reforçamento positivo, é contrário à generalidade do desamparo aprendido para contextos não aversivos (AU)

Imunização ao desamparo aprendido após reforçamento positivo em ratos / Immunization to learned helplessness after Positive Reinforcement in Rats

Este estudo investigou se a exposição a diferentes contingências de reforçamento positivo, antes do tratamento com choques incontroláveis, pode impedir o desenvolvimento do desamparo aprendido em ratos (efeito de imunização). Foram manipulados cinco grupos de ratos Wistar (n=8). Sujeitos de três grupos foram submetidos a sessões de reforçamento positivo (CRF, RF6 ou múltiplo-concorrente FR6/Extinção) seguidas de uma sessão de choques incontroláveis e outra de teste de fuga. Sujeitos de outro grupo foram expostos apenas a sessões de choques incontroláveis e teste de fuga, sendo que os animais do grupo restante foram expostos apenas à sessão de teste de fuga. Os resultados no teste mostraram que apenas os animais submetidos previamente aos choques incontroláveis apresentaram dificuldade na aprendizagem da fuga (desamparo aprendido). Contudo, aqueles expostos inicialmente ao reforçamento positivo tiveram reduzido o efeito dos choques incontroláveis, independente da contingência utilizada. Esses resultados sguerem que a exposição repetida ao reforçamento posiivo pode produzir o efeito de imunização.

Variabilidade e repetição operantes aprendidas após estímulos aversivos incontroláveis / Operant variability and repetition learned after uncontrollable aversive stimuli

O objetivo desse experimento foi verificar se a experiência prévia com eventos aversivos incontroláveis interfere na aprendizagem da variabilidade ou da repetição operantes. Ratos (n=45) tiveram a reposta de pressão à barra reforçada positivamente em CRF e FR 4, sendo depois divididos em três grupos, expostos a choques elétricos controláveis, incontroláveis ou nenhum choque. Em seguida, receberam nove a 12 sessões de reforçamento positivo para seqüências de quatro respostas de pressão a barra, em uma caixa com duas barras (direita - D e esquerda - E): metade dos sujeitos foi reforçada por variar (VAR) e metade por repetir uma mesma seqüência (REP). Os resultados mostraram que o tratamento prévio com choques não interferiu na aprendizagem dos padrões de variabilidade e de repetição, que foram dependentes apenas da contingência em vigor. Esses dados são contrários ao previsto pela hipótese do desamparo aprendido.

The aim of the present experiment was to verify whether the previous experience with uncontrollable aversive events interferes in the learning of operant variability and repetition. Rats responses to lever pressure (n=45) were reinforced positively in CRF and FR 4 contingencies and then divided into three groups, exposed to electric shocks that could be either controllable, uncontrollable or none. After that, nine to 12 positive reinforcement sessions were conducted for sequences of four lever pressure responses in a box with two levers (right - D and left - E): half subjects was reinforced for varying (VAR) and half for repeating a same sequence (REP). The results showed that the previous shock treatment did not interfere in the learning of repetition and variability patterns which were only dependent on the contingence in force. These data are in disagreement with the learned helplessness hypothesis prediction.

Imunização ao desamparo aprendido após reforçamento positivo em ratos / Immunization to learned helplessness after Positive Reinforcement in Rats

Este estudo investigou se a exposição a diferentes contingências de reforçamento positivo, antes do tratamento com choques incontroláveis, pode impedir o desenvolvimento do desamparo aprendido em ratos (efeito de imunização). Foram manipulados cinco grupos de ratos Wistar (n=8). Sujeitos de três grupos foram submetidos a sessões de reforçamento positivo (CRF, RF6 ou múltiplo-concorrente FR6/Extinção) seguidas de uma sessão de choques incontroláveis e outra de teste de fuga. Sujeitos de outro grupo foram expostos apenas a sessões de choques incontroláveis e teste de fuga, sendo que os animais do grupo restante foram expostos apenas à sessão de teste de fuga. Os resultados no teste mostraram que apenas os animais submetidos previamente aos choques incontroláveis apresentaram dificuldade na aprendizagem da fuga (desamparo aprendido). Contudo, aqueles expostos inicialmente ao reforçamento positivo tiveram reduzido o efeito dos choques incontroláveis, independente da contingência utilizada. Esses resultados sguerem que a exposição repetida ao reforçamento posiivo pode produzir o efeito de imunização(AU)

Variabilidade e repetição operantes aprendidas após estímulos aversivos incontroláveis / Operant variability and repetition learned after uncontrollable aversive stimuli

O objetivo desse experimento foi verificar se a experiência prévia com eventos aversivos incontroláveis interfere na aprendizagem da variabilidade ou da repetição operantes. Ratos (n=45) tiveram a reposta de pressão à barra reforçada positivamente em CRF e FR 4, sendo depois divididos em três grupos, expostos a choques elétricos controláveis, incontroláveis ou nenhum choque. Em seguida, receberam nove a 12 sessões de reforçamento positivo para seqüências de quatro respostas de pressão a barra, em uma caixa com duas barras (direita - D e esquerda - E): metade dos sujeitos foi reforçada por variar (VAR) e metade por repetir uma mesma seqüência (REP). Os resultados mostraram que o tratamento prévio com choques não interferiu na aprendizagem dos padrões de variabilidade e de repetição, que foram dependentes apenas da contingência em vigor. Esses dados são contrários ao previsto pela hipótese do desamparo aprendido.(AU)

The aim of the present experiment was to verify whether the previous experience with uncontrollable aversive events interferes in the learning of operant variability and repetition. Rats responses to lever pressure (n=45) were reinforced positively in CRF and FR 4 contingencies and then divided into three groups, exposed to electric shocks that could be either controllable, uncontrollable or none. After that, nine to 12 positive reinforcement sessions were conducted for sequences of four lever pressure responses in a box with two levers (right - D and left - E): half subjects was reinforced for varying (VAR) and half for repeating a same sequence (REP). The results showed that the previous shock treatment did not interfere in the learning of repetition and variability patterns which were only dependent on the contingence in force. These data are in disagreement with the learned helplessness hypothesis prediction.(AU)

Reforçamento positivo da variabilidade e da repetição imuniza contra o desamparo aprendido / Immunization against learned helplessness due to previous exposure to positive reinforcement of behavioral variability and repetition

Esse estudo investigou se o reforçamento positivo da variação ou da repetição pode imunizar o sujeito contra o desamparo aprendido. Ratos foram divididos em três grupos, dois deles submetidos a 10 sessões de reforçamento positivo (variação ou repetição) e o terceiro sem esse tratamento. Em seguida, cada grupo foi subdividido em três,expostos a choques controláveis, incontroláveis ou nenhum choque, e posteriormente testados sob uma contingênciade fuga. Os animais expostos apenas a choques incontroláveis apresentaram dificuldade de fuga (desamparo aprendido), enquanto os demais aprenderam normalmente essa resposta; os sujeitos submetidos ao reforçamento positivo antes dos choques incontroláveis não apresentaram dificuldade de aprendizagem de fuga (efeito deimunização), independentemente do padrão reforçado: variar ou a repetir. Esses resultados sugerem que o reforçamento positivo pode imunizar os sujeitos contra o desamparo aprendido, quer seja contingente à variação ouà repetição comportamental.(AU)

The present experiment examined whether the positive reinforcement of either a variable or a repetitive behavioral pattern immunizes against learned helplessness. Rats were divided into three groups, two of which were exposed to ten sessions of positive reinforcement (either for varying or for repeating response sequences); the third group was not exposed to positive reinforcement. Following this phase, each group was further divided in to three subgroups exposed to one of the following procedures: controllable shocks, uncontrollable shocks or noshocks whatsoever. All animals were then tested in an escape contingency. The animals exposed only to uncontrollable shocks failed to escape (learned helplessness), whereas all other subgroups learned the required response. Those trained with positive reinforcement prior to the uncontrollable shocks equally learned to escape (immunization),regardless of which behavioral pattern was reinforced. These results suggest that positive reinforcement might immunize against learned helplessness, irrespective of which behavioral pattern (variability or repetition) the reinforcement is contingent upon.(AU)

O desamparo aprendido revisitado: estudos com animais / Learned helplessness revisited: animal studies

O desamparo aprendido tem sido definido como a dificuldade de aprendizagem apresentada por indivíduos que tiveram experiência prévia com estímulos aversivos incontroláveis. O objetivo deste trabalho é fazer uma revisão crítica dos estudos sobre o desamparo aprendido, com animais. Nessa análise, são considerados aspectos conceituais e metodológicos dos estudos em questão e as interpretações teóricas sobre esse efeito comportamental. Aborda-se a evolução histórica desses estudos, bem como alguns aspectos controversos das publicações que se acumularam ao longo de quatro décadas de pesquisa. A associação do desamparo aprendido com a depressão clínica é analisada criticamente, destacando-se a necessidade de maior rigor metodológico e conceitual nos estudos da área.

O desamparo aprendido revisitado: estudos com animais / Learned helplessness revisited: animal studies

O desamparo aprendido tem sido definido como a dificuldade de aprendizagem apresentada por indivíduos que tiveram experiência prévia com estímulos aversivos incontroláveis. O objetivo deste trabalho é fazer uma revisão crítica dos estudos sobre o desamparo aprendido, com animais. Nessa análise, são considerados aspectos conceituais e metodológicos dos estudos em questão e as interpretações teóricas sobre esse efeito comportamental. Aborda-se a evolução histórica desses estudos, bem como alguns aspectos controversos das publicações que se acumularam ao longo de quatro décadas de pesquisa. A associação do desamparo aprendido com a depressão clínica é analisada criticamente, destacando-se a necessidade de maior rigor metodológico e conceitual nos estudos da área. (AU)

Aprendizagem de fuga após estímulos apetitivos incontroláveis / Escape learning after uncontrollable appetitive stimuli

O presente experimento teve por objetivo investigar se estímulos apetitivos não-contingentes (incontroláveis) produzem interferência na aprendizagem de fuga (desamparo aprendido). Ratos foram divididos em três grupos (n = 8), denominados contingente (C), não contingente (NC) e ingênuo (I). Na primeira fase (tratamento), os animais do grupo C receberam reforçamento positivo (água) sob contingência de CRF, FR5 e FR20. A cada reforço liberado a um sujeito do grupo C, era liberada uma gota de água (não-contingente) a um sujeito do grupo NC. Os animais do grupo ingênuo (I) permaneceram no biotério. Na fase seguinte (teste), os animais foram submetidos a choques que poderiam ser desligados em função da resposta de saltar na shuttlebox. Todos os sujeitos aprenderam igualmente a resposta de fuga, independentemente do tratamento prévio recebido. Esses resultados sugerem que estímulos apetitivos incontroláveis não produzem o desamparo aprendido. Discute-se a generalização do efeito entre contextos aversivo e apetitivo.

Aprendizagem de fuga após estímulos apetitivos incontroláveis / Escape learning after uncontrollable appetitive stimuli

O presente experimento teve por objetivo investigar se estímulos apetitivos não-contingentes (incontroláveis) produzem interferência na aprendizagem de fuga (desamparo aprendido). Ratos foram divididos em três grupos (n = 8), denominados contingente (C), não contingente (NC) e ingênuo (I). Na primeira fase (tratamento), os animais do grupo C receberam reforçamento positivo (água) sob contingência de CRF, FR5 e FR20. A cada reforço liberado a um sujeito do grupo C, era liberada uma gota de água (não-contingente) a um sujeito do grupo NC. Os animais do grupo ingênuo (I) permaneceram no biotério. Na fase seguinte (teste), os animais foram submetidos a choques que poderiam ser desligados em função da resposta de saltar na shuttlebox. Todos os sujeitos aprenderam igualmente a resposta de fuga, independentemente do tratamento prévio recebido. Esses resultados sugerem que estímulos apetitivos incontroláveis não produzem o desamparo aprendido. Discute-se a generalização do efeito entre contextos aversivo e apetitivo. (AU)