Беррес Скиннер: оперантное обусловливание и ящик Скиннера

Беррес Фредерик Скиннер, которого в англоязычных книгах обычно зовут B. F. Skinner, один из главных представителей бихевиоризма. Когда говорят «скиннер бихевиоризм», имеют в виду его главную идею: поведение определяется не тем, что было до него, а тем, что следует после. Из этой простой мысли выросли поведенческая терапия, программированное обучение и споры о свободе воли, которые не утихли до сих пор.

Кто такой Скиннер

Скиннер (1904-1990) был американским психологом и почти всю научную жизнь проработал в Гарварде. Он придумал оперантное обусловливание, построил знаменитый «ящик Скиннера», описал графики подкрепления и написал утопический роман об обществе, устроенном по законам научения. Общий обзор школы, её предшественников и место Скиннера в ней есть в статье о бихевиоризме. Здесь речь пойдёт о самом Скиннере.

Биография

Скиннер родился 20 марта 1904 года в Саскуэханне, маленьком железнодорожном городке в Пенсильвании. Отец был юристом, мать вела дом. Мальчик постоянно что-то мастерил: тележку с рулём, который по ошибке поворачивал в обратную сторону, хижину в лесу, устройство для сортировки спелых ягод.

После колледжа Гамильтона он решил стать писателем. Из этой затеи ничего не вышло: за год, который он потом называл «тёмным», появилась дюжина газетных заметок и несколько моделей парусников. Работая продавцом в книжном магазине в Нью-Йорке, он наткнулся на книги Павлова и Джона Уотсона и загорелся психологией.

В 24 года Скиннер поступил на психологический факультет Гарварда. Он строил прибор за прибором и в итоге изобрёл кумулятивный самописец, который отмечал каждое нажатие крысы на рычаг. Запись показала неожиданное: частота нажатий зависела не от сигнала перед ними, а от того, что следовало за ними. Такое поведение Скиннер назвал оперантным. Результаты вошли в его первую книгу «Поведение организмов» (1938).

В 1936 году он женился на Ивонне Блю и уехал преподавать в Миннесоту. Во время Второй мировой войны работал над секретным «Проектом Голубь»: учил голубей клевать изображение цели, чтобы наводить ракету на корабль. Проект закрыли, но Скиннер понял, что из лабораторных опытов выросла технология. С тех пор он работал с голубями, а не с крысами.

В 1945 году Скиннер возглавил кафедру психологии Индианского университета, а в 1948 году вернулся в Гарвард. Там вышли «Наука и поведение человека» (1953), «Графики подкрепления» (1957, вместе с Чарльзом Ферстером) и «Вербальное поведение» (1957). В 1953 году, побывав на уроке математики у младшей дочери, он в тот же день собрал первую обучающую машину: ученик решал задачу и сразу узнавал, верно ли ответил.

В 1989 году у Скиннера нашли лейкоз. За десять дней до смерти он выступил с докладом на съезде Американской психологической ассоциации перед полным залом. Статью по этому докладу он закончил 18 августа 1990 года, в день своей смерти.

Оперантное обусловливание простыми словами

В опытах Павлова сигнал звучал до еды, и собака училась реагировать на сигнал. Скиннера интересовало другое поведение: то, которое само действует на среду и меняется под влиянием результата. Ребёнок попросил вежливо и получил игрушку, значит, в следующий раз он снова попросит вежливо. Вы написали в чат коллеге и получили грубый ответ, значит, писать ему будете реже.

Последствие, которое делает поведение чаще, Скиннер назвал подкреплением. Последствие, которое делает его реже, называют наказанием. Таблица из четырёх вариантов (положительное и отрицательное подкрепление, положительное и отрицательное наказание) разобрана в статье о бихевиоризме.

Ещё одно понятие Скиннера называется формированием, или шейпингом. Сложное поведение не появляется сразу, поэтому требования подстраивают под текущий уровень и сразу подкрепляют каждый шаг, который ближе к цели. Так можно учить ребёнка завязывать шнурки: сначала хвалить за то, что он взял шнурки в руки, потом за первую петлю.

Ящик Скиннера

Ящиком Скиннера называют экспериментальную камеру, где животное может нажать на рычаг или клюнуть светящуюся кнопку и получить порцию корма. Кормушка срабатывает по правилу, которое задаёт экспериментатор, а самописец рисует кривую нажатий. Наклон кривой показывает скорость поведения, и по нему видно, как животное реагирует на любое изменение условий.

Ценность ящика была в точности. Вместо того чтобы описывать, что животное «хочет» или «понимает», Скиннер измерял, сколько раз и как быстро оно отвечает. Похожие камеры используют и сейчас, например в опытах о том, как разные графики наград влияют на мотивацию.

Графики подкрепления

Самое практичное открытие Скиннера касается расписания наград. Вместе с Ферстером он показал, что важна не только сама награда, но и правило, по которому она приходит. Таких правил четыре основных.

График	Как приходит награда	Пример из жизни
Постоянное соотношение	После определённого числа действий	Карточка кофейни: каждый десятый кофе бесплатно
Переменное соотношение	После непредсказуемого числа действий	Игровой автомат, лотерея, рыбалка
Постоянный интервал	Через определённое время	Зарплата раз в месяц
Переменный интервал	Через непредсказуемое время	Ответ на сообщение, письмо от работодателя

Почему затягивают телефон и азартные игры

Непредсказуемые награды мотивируют сильнее всего. В диссертации 2022 года из Летбриджского университета прямо сказано, что так устроены игровые автоматы. Крысы, которые получали корм по случайному графику, работали очень усердно. Других признаков зависимости у них при этом не появилось, они возникли только после добавления препарата, усиливающего действие дофамина. В этой модели непредсказуемые награды резко повышали мотивацию, но для признаков зависимости понадобился ещё один фактор.

Похожую картину нашли в соцсетях. В 2021 году исследователи проанализировали больше миллиона публикаций 4168 пользователей четырёх платформ. Люди публиковали посты чаще, когда получали больше лайков, и реже, когда лайков становилось меньше. Это совпадает с моделями научения через награду, которые выросли из опытов на животных. Авторы при этом подчёркивают, что их данные не говорят о том, вредно ли активное использование соцсетей и можно ли называть его зависимостью.

Если вы замечаете, что каждые несколько минут тянетесь к телефону, это и есть переменный интервал в действии: новое сообщение может прийти в любой момент. Помогает сделать награду предсказуемой. Например, отключить уведомления и проверять мессенджеры в заранее выбранное время.

«Уолден Два» и «По ту сторону свободы и достоинства»

Роман «Уолден Два» (1948) Скиннер написал сразу после войны, почти на одном дыхании. В нём описана община примерно из тысячи человек, где счастливое и трудолюбивое поведение сформировано поведенческими методами. Детей воспитывают сообща, а не в отдельных семьях, мужчины и женщины работают наравне, за неприятную работу начисляют больше трудовых баллов, чтобы на неё уходило меньше времени. Книга стала одной из самых известных у Скиннера и собрала и восторги, и осуждение. В Стэнфордской философской энциклопедии отмечают, что описание идеального общества в романе так и осталось неполным.

В 1971 году вышла книга «По ту сторону свободы и достоинства». В ней Скиннер утверждал, что поведение человека определяется средой и историей подкреплений, а представление об автономной личности, которая сама выбирает поступки, науке пора оставить. Журнал Time поставил на обложку материал под заголовком о том, что, по Скиннеру, мы не можем позволить себе свободу. Дочь Скиннера позже объясняла, что отец имел в виду другое: контроль в обществе есть всегда (светофоры, полиция), и вопрос только в том, чтобы в нём было больше поощрений и меньше угроз.

Миф о «ребёнке в ящике»

В 1943 году жена Скиннера ждала второго ребёнка и спросила, не может ли он сделать кроватку безопаснее обычной, где ножка застревает между прутьями, а одеяло может накрыть лицо. Скиннер построил закрытую кроватку с подогревом и стеклянной передней стенкой. Температуру и влажность регулировали родители, поэтому младенец мог спать без пелёнок и одеял.

В 1945 году Скиннер описал изобретение в журнале Ladies' Home Journal. Редакция дала статье заголовок «Ребёнок в ящике», а сам автор называл кроватку то «аппаратом», то «экспериментом». Публика сразу связала её с ящиками для крыс и голубей. Пошли слухи, что дочь Дебора выросла в клетке, сошла с ума, подала на отца в суд и покончила с собой.

Всё это неправда. Кроватка служила только местом для сна, у девочки был манеж, и вне кроватки она проводила столько же времени, сколько другие дети. В 2004 году, когда слухи повторила популярная книга, Дебора Скиннер Бузан опубликовала в газете The Guardian статью «Я не была лабораторной крысой». Она писала, что отец был ласковым и преданным, что она росла здоровым ребёнком и живёт в Лондоне, работая художницей. По оценке Ассоциации психологической науки, в таких кроватках выросло больше 300 детей.

Критика Хомского

В 1959 году лингвист Ноам Хомский опубликовал рецензию на «Вербальное поведение». Он доказывал, что поведенческие модели не объясняют, как дети так быстро осваивают язык, как они понимают и строят фразы, которых никогда не слышали, и почему им для этого не нужно подробное подкрепление каждого шага. Вместо этого Хомский предположил врождённую основу грамматики.

Скиннер на рецензию так и не ответил. Хомский прислал ему черновик, Скиннера раздражил спорный тон, и он отложил текст, не дочитав. Развёрнутый ответ в 1970 году написал бихевиорист Кеннет Маккоркодейл, но его почти не цитировали за пределами поведенческого анализа. Рецензия же стала символом когнитивной революции, и её долго подавали как окончательное опровержение бихевиоризма.

Что подтвердилось, а что нет

Подтвердилось главное: последствия действительно меняют частоту поведения, и графики подкрепления работают предсказуемо у животных и людей. На этом построены методы, которые применяют в клиниках и школах.

Не подтвердилась претензия объяснить через подкрепления всё. Язык, мышление и понимание ситуации оказались сложнее, и психология после 1960-х снова занялась внутренними процессами. Сам Скиннер под конец жизни написал книгу «О бихевиоризме» (1974), потому что считал, что его взгляды постоянно искажают.

Интересно, что «Вербальное поведение» получило вторую жизнь. Через двадцать лет после выхода книги исследователи стали применять её категории в обучении речи детей с аутизмом и детей с задержкой развития.

Где идеи Скиннера встречаются в жизни

Прикладной анализ поведения

Прикладной анализ поведения (ABA) вырос прямо из работ Скиннера. На нём основана ранняя интенсивная поведенческая помощь детям с аутизмом: от 20 до 40 часов в неделю в течение нескольких лет. Кокрейновский обзор 2018 года объединил пять исследований с 219 детьми младше шести лет. Дети, которые получали такую помощь, примерно через два года лучше справлялись с повседневными навыками, тестами интеллекта и речью, чем дети в обычных специальных программах. Выраженность симптомов аутизма при этом не изменилась, а качество доказательств авторы оценили как низкое: рандомизированным было только одно исследование.

Поведенческая терапия

Сам термин «поведенческая терапия» придумал Огден Линдсли, один из учеников Скиннера. Поведенческие техники стали половиной когнитивно-поведенческой терапии: планирование приятных дел при депрессии, постепенные шаги, поощрение за выполнение.

Воспитание и самоорганизация

Родители применяют идеи Скиннера каждый день, даже не зная его имени. Многие психологи советуют хвалить за конкретный поступок, а не говорить общее «молодец», и уделять внимание спокойной игре, а не только истерике. Подробнее об этом в статье о том, как добиться, чтобы ребёнок слушался.

То же касается взрослых. Если работа откладывается, а лента новостей открывается сама, подкрепление получает ваше бегство от задачи. Разбейте дело на маленькие шаги и награждайте себя сразу после каждого, а не после всего проекта. Другие способы сдвинуться с места описаны в статье о том, как побороть лень.