Оперантное научение в работах Э. Торндайка, Б. Скиннера

Экспериментальное исследование условий приобретения действительно нового поведения, а также динамики научения находилось в центре внимания американского психолога Э. Торндайка^[1] (1874−1949). В его работах изучались преимущественно закономерности решения проблемных ситуаций животными. Животное (кошка, собака, обезьяна) должно было самостоятельно найти выход из специально сконструированного «проблемного ящика» или из лабиринта. Позже в качестве испытуемых в аналогичных опытах участвовали и маленькие дети.

При анализе такого сложного спонтанного поведения, каким представляется поиск способа решения лабиринтной задачи или отпирания дверцы (в отличие от ответного, респондентного), трудно выделить стимул, вызывающий определенную реакцию. По данным Торндайка, первоначально животные совершали множество хаотичных движений — проб и лишь случайно производили нужные, которые приводили к успеху. При последующих попытках выйти из этого же ящика наблюдалось уменьшение числа ошибок и сокращение количества затраченного времени. Тип научения, когда испытуемый, как правило, неосознанно пробует разные варианты поведения, операнты (от англ, operate — действовать), из которых «отбирается» наиболее подходящий, наиболее адаптивный, получил название оперантного обусловливания.

Метод «проб и ошибок» в решении интеллектуальных задач стал рассматриваться как общая закономерность, характеризующая поведение и животных, и человека. Торндайк сформулировал четыре основных закона научения.

• 1. Закон повторения (упражнения). Чем чаще повторяется связь между стимулом и реакцией, тем быстрее она закрепляется и тем она прочнее.
• 2. Закон эффекта (подкрепления). При выучивании реакций закрепляются те из них, которые сопровождаются подкреплением (положительным или отрицательным).
• 3. Закон готовности. Состояние субъекта (испытываемые им чувства голода, жажды) небезразлично для выработки новых реакций.
• 4. Закон ассоциативного сдвига (смежности во времени). Нейтральный стимул, связанный по ассоциации со значимым, тоже начинает вызывать нужное поведение.

Торндайком были выделены также дополнительные условия успешности научения ребенка — легкость различения стимула и реакции и осознание связи между ними.

Оперантное научение происходит при большей активности организма, оно контролируется (определяется) его результатами, последствиями. Общая тенденция такова, что если действия привели к позитивному результату, к успеху, то они будут закреплены и повторены.

Лабиринт в опытах Торндайка служил упрощенной моделью окружающей среды. Лабиринтная методика действительно в какой-то мере моделирует отношения организма и среды, но очень узко, односторонне, ограниченно; и переносить закономерности, открытые в рамках этой модели, на социальное поведение человека в сложно организованном обществе чрезвычайно трудно.

Виднейший теоретик строгого бихевиоризма Б. Ф. Скиннер (1904−1990) настаивал на том, что научными методами можно познать все поведение человека, поскольку оно детерминировано объективно (окружающей средой). Скиннер отвергал понятия скрытых психических процессов, таких как мотивы, цели, чувства, бессознательные тенденции и др. Он утверждал, что поведение человека почти всецело формируется его внешним окружением. Такую позицию называют иногда инвайронментализмом (от англ. environment — среда, окружение)^[2]. «Черный ящик человеческой психики» должен быть, по мнению Скиннера, исключен из эмпирического исследования, усилия должны быть направлены на изучение открытого, доступного непосредственному наблюдению, поведения человека, на установление тех факторов среды, которые, в конечном счете, определяют и контролируют действия человека.

Скиннер считал, что экспериментальный анализ поведения животных (крыс, голубей) позволит открыть принципы поведения, общие для животных и человека. С опорой на всеобщие закономерности поведения важнейшая практическая психолого-педагогическая задача обучения и воспитания становится решаемой. Манипулируя переменными окружающей среды (т.е. независимыми переменными), можно прогнозировать и контролировать поведенческие реакции индивида (зависимые переменные).

Скиннер признавал существование двух основных типов поведения: респондентного и оперантного. Однако он полагал, что главное — оперантное поведение, т. е. спонтанные действия, для которых не существует первоначального стимула, поддающегося распознаванию^[3]. Для животных и человека важны последствия — события, наступающие в результате поведения. В зависимости от последствий складывается определенная тенденция в отношении такого поведения в будущем. Оперантные реакции постепенно приобретают характер произвольных. По оперантному типу научения происходит формирование множества форм человеческого поведения (умение одеваться, привычка читать книги, сдерживать проявления агрессии, преодолевать застенчивость и т. п.).

Реакция, за которой следует позитивный результат, стремится повториться. Так, в большинстве семей можно наблюдать оперантное научение плачу. Крик и плач как безусловные реакции ребенка на физический дискомфорт вызывают у родителей стремление подойти к ребенку, успокоить его, оказать помощь и внимание. Такая забота оказывается мощным позитивным подкреплением для плача ребенка; и плач становится оперантно обусловленным средством контроля над поведением родителей.

В то же время вероятность повторения реакции, за которой следует негативный результат или наказание, уменьшается. Если знакомый в ответ на приветствие поджимает губы и делает вид, что нас нс замечает, мы скоро перестанем здороваться с ним.

Подкрепление — ключевое понятие концепции Скиннера. Подкрепление усиливает реакцию, увеличивает вероятность ее появления. В бихевиоральном научении признавали два типа подкрепления: первичное (или безусловное — вода, еда, секс) и вторичное (или условное — деньги, внимание со стороны значимого другого, одобрение родителей, сверстников, учителей). По Скиннеру, вторичные подкрепляющие стимулы становятся подкреплением в результате прошлого опыта, они общие для большинства людей и оказывают сильное влияние на их поведение.

Скиннер выделял также подкрепление позитивное и негативное. Позитивное подкрепление усиливает реакцию, сопровождая ее приятными последствиями (пища, внимание). Негативное подкрепление тоже усиливает поведенческую реакцию, но за счет устранения раздражающих стимулов (подросток начинает употреблять ругательные слова и выражения, стремясь избежать насмешек приятелей типа «маменькин сынок, малыш»).

Поведение может контролироваться также с помощью наказания (мать подростка может ударить его по губам за ругательства или лишить карманных денег). Такое последствие призвано прекратить, изжить поведенческую реакцию. Техника наказания в современном обществе применяется чаще всего, но Скиннер стремился доказать, что подобный контроль поведения неэффективен (лишь временно откладывает нежелательное поведение) и, что еще хуже, вызывает негативные побочные эффекты (страх, тревогу, падение самооценки, грубые формы асоциального поведения). Он настаивал на том, что позитивное подкрепление (поощрение желательных образцов) гораздо более надежный метод формирования поведения и у детей, и у взрослых.

В случае научения сложному поведению (такому, как навыки письма или межличностного общения или выработка аккуратности) используется метод последовательного приближения, или формирования. Шаг за шагом, ступенька за ступенькой, подкрепление многократно включается при изменении поведения в направлении желаемого. Другой принцип научения — незамедлительность подкрепления.

При обучении самостоятельной аккуратной еде ребенка последовательно подкрепляют: хвалят за попытку взять ложку в руку, направить ее в рот, восхищаются его усилиями, подбадривают малыша, хотя на первых порах он и теряет по дороге почти все содержимое. И только в результате постепенного приближения к нужному результату добиваются от ребенка аккуратности и чистоты одежды и стола.

Скиннер утверждал, что даже вербальное поведение, или устная речь, приобретается через процесс успешного последовательного приближения. Однако многие психологи совершенно не согласны с тем, что язык может быть усвоен таким способом, подчеркивая тем самым столь высокую скорость речевого развития в раннем детстве, которую невозможно объяснить исходя из принципов оперантного обусловливания.

Проблема социализации человека рассмотрена Скиннером в книгах «По ту сторону свободы и достоинства» (1971), «Размышления о бихевиоризме и обществе» (1978). В концепции Скиннера развитие ребенка — это обучение его нормативному поведению в соответствии с направлениями подкрепления. На ранних этапах родители выступают агентами социализации и источниками подкрепления, позже число источников подкрепления расширяется — это и соседи, и школа, и мнение сверстников.

Скиннер придерживался мнения, что поведение человека в течение жизни изменяется, и периодически возникают кризисы. Кризисные явления вызываются такими изменениями среды, к которым индивид не имеет адекватного набора поведенческих реакций. В бихевиоризме считается, что среда формирует поведение ребенка постоянно, непрерывно и постепенно, поэтому не следует говорить о возрастных периодах развития. Не существует единых для всех детей закономерностей развития в данный возрастной период: какова среда, таковы и закономерности развития данного ребенка. Этапы и темп развития зависит от среды. Речь может идти только о функциональной периодизации, которая намечает этапы научения, формирования определенного навыка (например, этапы развития игры, обучения письму или игре в теннис)^[4].

Постоянный опыт научения создаст то, что в других психологических школах называют личностью. Личность — это тот опыт, который человек приобрел в течение жизни. Уникальность человека задается своеобразным сочетанием генетических характеристик и индивидуального репертуара научения. Психическое развитие, таким образом, отождествляется с научением, т. е. с любым приобретением знаний, умений, навыков — и в условиях специального обучения, и возникающих стихийно. Человек таков, каким он научился быть.

В табл. 10 схематично изложена теория Скиннера.

Таблица 10

Теория оперантного обусловливания Б. Ф. Скиннера

Идеи Скиннера нашли достаточно широкое практическое применение. Стратегия успешного последовательного приближения и техники позитивного подкрепления составили основу методов модификации поведения индивида, бихевиорального тренинга^[5]. Среди конкретных областей их приложения — преодоление разнообразных страхов, тревожных и навязчивых состояний, перестройка деструктивного поведения, обучение навыкам общения, тренировка уверенности в себе, тренинг с биологической обратной связью в лечении тревоги, мигрени, мышечного напряжения и гипертензии. Применяются оперантные методики и к детям дошкольного возраста, и к пациентам психиатрических клиник, и к заключенным в тюрьмах. Широкую известность получили методики «жетонного вознаграждения», сенсибилизации и десенсибилизации, «выключенного времени», или «тайм-аута». Программированное обучение с использованием компьютера строится во многом на принципах, разработанных Скиннером. Многие специалисты признают эффективность " технологии строительства поведения" , но предостерегают от чрезмерно широкого применения этого метода, подчеркивая механистичность метода, авторитарные тенденции руководителя и игнорирование внутренних факторов развития (интересов, чувств, мыслей человека)^[6].

• [1] См.: Торндайк Э. Принципы обучения, основанные на психологии. М., 1930.
• [2] См.: Хьелл А., Зиглер Д. Теории личности. С. 354.
• [3] См.: Скиннер Б. Оперантное поведение // История зарубежной психологии. 60-е годы XX в. / под ред. П. Я. Гапьперина, А. Н. Ждан. М., 1986. С. 60−97.
• [4] См.: Марцинковская Т.Д. История детской психологии. С. 169.
• [5] См.: Раттер М. Помощь трудным детям. М., 1987. С. 374−397.
• [6] См.: Помощь родителям в воспитании детей / под ред. В. Я. Пилиповского. М., 1992. С. 91 — 146.