Сходство и различие рефлексов 1-го и 2-го рода

При образовании рефлексов 1-го рода животное (или человек) начинает поведение с реакции, которая впоследствии связывается с новым стимулом. Иногда даже после одного сочетания безусловной реакции и нового стимула, животное начинает отвечать на новый (условный) стимул условной реакцией. “Ответ” по-английски “response”, отсюда возник термин “респондентеное научение”, употребляющийся, когда речь идет о “павловских” рефлексах.

В природе часто встречается ситуация, когда животное находится в состоянии голода, жажды или страха, но Безусловный стимул, который вызывал бы соответствующий Безусловный рефлекс, отсутствует. При этом у животного появляется поисковое поведение, в процессе которого оно спонтанно выполняет разнообразные действия: принюхивается (если речь идет о млекопитающих), осматривается, передвигается. Иногда одно из таких действий подкрепляется (например, пищей), тогда, если ассоциация повторяется несколько раз, животное учится выполнять целую последовательность действий, приводящую к положительному подкреплению в данной ситуации.

Опыты Скиннера

Американский психолог Скиннер на основании работ Торндайка предложил в 1938 году свободно-оперантную методику научения. “Камера Скиннера”, по-существу, представляет собой “проблемный ящик” Торндайка. Но в процессе выработки научения по-Скиннеру есть отличия от методики Торндайка.

Животное, обучаемое по методу Скинера, подвергается не отдельным пробам, как предлагал Торндайк, а имеет возможность свободно совершать любую двигательную реакцию в любое время.

Обычно в камере Скинера находится приспособление, на которое животное должно научиться воздействовать. Это может быть рычаг, на который нажимает млекопитающее для того, чтобы освободиться, или “ключ”, который должна научиться клевать птица, чтобы получить пищу или воду, или стеклянное кольцо, сквозь которое должна проплывать рыба и т.д.

В начале опыта животное выполняет движения, далекие от требуемых, но из всего числа выполняемых реакций экспериментатор подкрепляет те действия, которые приближаются к желаемой для экспериментатора реакции. При этом требования к реакции, заслуживающей подкрепления, постепенно повышаются.

Например, ставится цель научить голубя клевать светящуюся лампочку (ключ) для получения пищи или воды. Вначале экспериментатор подкрепляет всего лишь нахождение птицы в той части клетки, где расположена лампочка. После того, как птица сосредотачивает все свои движения в требуемом месте, экспериментатор начинает подкреплять только те движения, при которых птица удерживает голову на высоте ключа (лампочки). Стабилизировав подкреплением подобное поведение, экспериментатор теперь уже подкрепляет только реакцию клевания самого ключа. Голуби, находящиеся в камере Скиннера, расценивают ключ, который они клюют, как пищу или как воду. При пищевом подкреплении они клюют так же, как клевали бы зерно. Если подкреплением служит вода, то они нажимают на ключ полуоткрытым клювом и делают сосущие движения, как при питье.

Подкрепление не обязательно должно следовать за каждой реакцией. Иногда оно может быть перемежающимся: например, можно подкреплять только каждый н-ный ответ (режим фиксированной доли ответов), или только первую реакцию после данного интервала времени (режим фиксированных интервалов). Если подкрепление совсем прекратить, происходит снижение вероятности и темпа реакции (происходит угашение).

Природа реакций и подкрепления должны быть выбраны с учетом особенностей изучаемого вида. Например, самцов сиамских бойцовых рыбок удобно учить выполнять оперантную реакцию проплывания сквозь кольцо, используя в качестве подкрепления демонстрацию модели другой рыбы в агрессивной позе.