Движение необихевиоризма возглавили такие американские психологи как Э. Толмен и К. Холл.
Э. Толмен свои основные идеи изложил в книге «Целевое поведение у животных и человека». Как и другие бихевиористы, он вел свою экспериментальную работу в основном на животных (белых крысах) и считал, что законы поведения одни и те же для всех живых существ и могут быть наиболее четко и досконально прослежены на элементарных уровнях поведения.
Толмен, как и все его предшественники «классические бихевиористы», отстаивал положение о том, что исследования поведения должны проводиться строго объективным методом, без всякого рода допущений о недоступном этому методу внутреннем мире сознания. Однако он возражал против того, что необходимо ограничиваться при анализе поведения только формулой «стимул-реакция», а также игнорировать те факторы, которые играют крайне важную роль в промежутке между ними. Эти факторы он называет «промежуточными переменными».
До исследований Э. Толмена считалось, что эти факторы являются чисто внутренними, открытыми только лишь для индивидуального субъекта, который способен наблюдать за собственным сознанием. Толмен доказывал, что внутренние процессы можно «вывести наружу» и придать их исследованию точно такую же точность, как и исследованию любых физических вещей. Для этого поведение необходимо рассматривать с точки зрения его целостной организации, а не как цепь отдельных реакций. Целостное поведение было описано Толменом как система, которая связана со своим окружением сетью познавательных отношений. Организм ориентируется в тех ситуациях, к которым приспосабливается, благодаря выделению определенных признаков, которые позволяют различать «что ведет к чему». Он не просто сталкивается со средой, а как бы идет ей навстречу с собственными ожиданиями, строит гипотезы и даже проявляет некоторую изобретательность в процессе поиска оптимального т наиболее целесообразного выхода из проблемной ситуации.
Толмен считал, что поведение нельзя сводить к выработке двигательных навыков. Это и отличало его от других бихевиористов. Его экспериментальные данные показывали, что организм в процессе постепенного освоения обстановки строит познавательную («когнитивную») карту того пути, которого необходимо придерживаться для решения определенной задачи. Толмен уделял огромное значение процессам научения и выделил особый тип научения, которое было впоследствии названо латентным (скрытым). Это скрытое научение играет роль тогда, когда отсутствует подкрепление, и характеризуется способностью изменять поведение.
Теория Толмена привела к пересмотру прежних взглядов бихевиористов на те факторы, которые регулируют адаптацию организма к окружающей среде. Среди всех этих факторов особенно выделяется целевая регуляция действий живых существ, их способность к активной познавательной работе даже в тех случаях, в которых речь идет о выработке двигательных навыков.
После экспериментов, проведенных Э. Толменом, стала очевидной недостаточность прежних воззрений на поведение, и потребовался их тщательный пересмотр.
К. Холл в основном опирался на учение Павлова об условных рефлексах и считал, что наиболее важную роль при использовании этого понятия необходимо придавать силе навыка. Для проявления этой силы нужны определенные физиологические потребности. Из всех факторов самое большое влияние на силу навыка оказывает редукция потребности. Чем чаще она редуцируется, тем более высокой будет сила навыка. Таким образом, величина редукции потребности определяется количеством, а также качеством подкреплений. Кроме того, необходимо отметить то, что сила навыка зависит от интервала между реакцией и ее подкреплением, а также и от интервала между условным раздражителем и реакцией. Холл разделял первичное и вторичное подкрепление. Первичным подкреплением, например, является пища для голодного организма или удар электрическим током, который вызывает прыжок у крысы. Потребность соединяется с раздражителями, реакция на которые, в свою очередь, играет роль подкрепления, но уже вторичного.
Холл считал, что поведение организма может строго научно объясняться без использования обращений к психическим образам, понятиям и другим интеллектуальным компонентам. По его мнению, достаточно такого образования, как потребность, для различения объектов. Если в одном из коридоров лабиринта животное может отыскать пищу, а в другом - воду, то характер его движений однозначно определяется потребностью и ничем иным.
Холл впервые поставил вопрос о том, возможно ли моделирование условно-рефлекторной деятельности. Он высказал предположение, что если сконструировать из неорганического материала устройство, которое способно воспроизвести все наиболее существенные функции условного рефлекса, то, организовав из такого рода устройств системы, можно было бы продемонстрировать настоящее научение методом «проб и ошибок». Эти предвосхищались будущие кибернетические модели саморегуляции поведения.
К. Холл создал большую школу, которая стимулировала разработку физико-математических методов применительно к теории поведения, а также использование аппарата математической логики и построение моделей, на которых проверялись гипотезы о разнообразных способах приобретения навыков.
Новым импульсом в развитии данного психологического направления стала теория Б. Скиннера, который разработал концепцию «оперантного бихевиоризма».
Б. Скиннер - один из наиболее ярких представителей бихевиоризма (необихевиоризма). Его теория получила название «оперантного бихевиоризма».
Скиннер стремился переработать классический бихевиоризм и исходил в первую очередь из необходимости систематического подхода к пониманию поведения человека. Одной из центральных идей Скиннера является стремление понять причины поведения и научится им управлять. Он переходит от констатации к разработке методов целенаправленного обучения и управления поведением.
Исходя из представления о том, что не только умения, но и знания представляют собой вариации по ведения, Скиннер разрабатывает его особый вид - оперантное поведение. Он исходил из того, что психика человека основана на рефлексах разного рода и разной степени сложности. Однако, сравнивая свой подход к формированию рефлексов с подходом Павлова, Скиннер подчеркивал существенные различия между ними.
Условный рефлекс, который формируется в экспериментах Павлова, он называл стимульным поведением, так как его формирование связано с ассоциацией между разными стимулами и не зависит от собственной активности субъекта. Такая реакция, как подчеркивал Скиннер, быстро формируется, но и быстро исчезает без подкрепления: она не может быть основой постоянного поведения субъекта.
Респондентное поведение подразумевает под собой характерную реакцию, которая вызвана известным стимулом. Стимул всегда по времени предшествует реакции. Хорошо знакомыми всем примеры респондентного поведения - это сужение либо расширение зрачка в ответ на световую стимуляцию, подергивание колена при ударе молоточком по сухожилию колена, дрожь при холоде. В каждом из приведенных примеров взаимоотношение между стимулом и реакцией невольное и происходит всегда спонтанно.
В противовес этому подходу, при оперантном обучении подкрепляется только то поведение и операции, которые совершает субъект в данный момент. Большое значение имеет и тот факт, что сложная реакция разбивается на ряд простых, следующих друг за другом и приводящих к нужной цели.
Так, при обучении голубя сложной реакции - выходу из клетки с помощью нажатия клювом на рычаг Скиннер подкреплял каждое движение голубя в необходимом направлении, добиваясь того, что он без ошибок выполнял эту сложную операцию. Такой подход к формированию нужной реакции имел большие преимущества по сравнению с традиционным. Прежде всего, это поведение было гораздо более устойчивым, оно очень медленно угасало даже при отсутствии подкрепления. Скиннер обратил внимание на то, что даже одноразовое подкрепление может быть эффективным, так как устанавливается хотя бы случайная связь между реакцией и появлением стимула.
Оперантное поведение (вызванное оперантным научением) определяется теми событиями, которые следуют за реакцией. То есть за поведением идет следствие, а природа этого следствия изменяет тенденцию организма повторять данное поведение в будущем. Например, катание на роликовой доске, игра на фортепиано, написание собственного имени - все это образцы оперантной реакции, контролируемые результатами, следующими за соответствующим поведением. Это произвольные приобретенные реакции, для которых не существует стимула, поддающегося распознаванию.
Если последствия являются благоприятными для организма, тогда вероятность повторения операнта в будущем увеличивается. Когда это происходит, говорят, что последствия подкрепляются, и оперантные реакции, полученные в результате подкрепления обусловились. Таким образом, сила позитивного подкрепляющего стимула определяется в соответствии с его воздействием на последующую частоту реакций, которые непосредственно ему предшествовали.
И напротив, если последствия реакции неблагоприятны и не подкреплены, тогда вероятность получения операнта уменьшается. Например, вы скоро перестанете улыбаться человеку, который в ответ на вашу улыбку всегда бросает на вас сердитый взгляд или вообще никогда не улыбается. Скиннер предполагал, что оперантное поведение контролируется негативными последствиями. По определению, негативные, или аверсивные последствия ослабляют поведение, порождающее их, и усиливают поведение, устраняющее их. Если человек постоянно угрюм, вы, вероятно, попытаетесь совсем его избегать.
Для того, чтобы изучить оперантное поведение в лаборатории, Скиннер придумал на первый взгляд простую процедуру, которая была названа свободным оперантным методом. Полуголодную крысу помещали в пустую «свободно-оперантную камеру» (известную как «ящик Скиннера»), где был только рычаг и миска для еды. Сначала крыса демонстрировала множество оперантов: ходила, принюхивалась, почесывалась, чистила себя и т.д. Такие реакции не вызывались никаким узнаваемым стимулом; они были спонтанны. В конце концов, в ходе своей ознакомительной деятельности крыса нажимала на рычаг, тем самым получая шарик пищи, который автоматически доставлялся в миску под рычагом. Поскольку реакция нажатия рычага изначально имела низкую вероятность возникновения, ее необходимо считать чисто случайной по отношению к питанию; то есть мы не можем предсказать, когда крыса будет нажимать на рычаг, и не можем заставить ее это сделать. Однако, лишив ее пищи, к примеру, на 24 часа, мы можем убедиться, что реакция нажима рычага приобретет в итоге высокую вероятность в данной ситуации. Это делается с помощью метода, который носит название научения через кормушку, посредством которого экспериментатор дает шарики пищи каждый раз, когда крыса нажимает на рычаг. После этого можно увидеть, что крыса проводит все больше времени рядом с рычагом и миской для пищи, а через соответствующий промежуток времени она начнет нажимать рычаг все быстрее и быстрее. Таким образом, нажатие рычага со временем становится наиболее частой реакцией крысы на условие пищевой депривации. В ситуации оперантного научения поведение крысы является инструментальным, то есть действует на окружающую среду, порождая подкрепление (пищу). Если далее идут неподкрепляемые опыты, то есть если пища не появляется постоянно вслед за реакцией нажатия рычага, крыса, в конце концов, перестанет нажимать его, и произойдет экспериментальное угасание.
Можно также рассмотреть пример ситуации, которая встречается почти в каждой семье, где есть маленькие дети, а именно - оперантное научение поведению плача. Когда маленькие дети испытывают боль, они плачут, и немедленной реакцией родителей является выражение внимания и предоставление других позитивных подкреплений. Так как внимание является подкрепляющим фактором для ребенка, реакция плача становится естественно обусловленной. Однако плач может возникать и тогда, когда боли нет. Хотя большинство родителей утверждают, что они способны к различению плача от расстройства и плача, который вызван желанием внимания, все же многие из них упорно подкрепляют последний.
Таким образом, Скиннер признавал два основных типа поведения:
Респондентное поведение - ответ на знакомый стимул;
Оперантное поведение - поведение, которое определяется и контролируется результатом, следующим за ним.
Работа Скиннера почти полностью сконцентрирована на оперантном поведении. При оперантном научении организм действует на окружение, производя результат, влияющий на вероятность того, что поведение повторится. Оперантная реакция, за которой следует позитивный результат, стремится повториться, а оперантная реакция, за которой следует негативный результат, стремится не повторяться. По Скиннеру, поведение самым лучшим образом можно понять в терминах реакций на окружение.
Ключевой концепцией системы Скиннера является подкрепление (зависимость от прошлого опыта).
Описаны четыре режима подкрепления, в результате которых возникают различные формы реагирования:
подкрепление с постоянным соотношением;
подкрепление с постоянным интервалом;
подкрепление с вариативным соотношением;
подкрепление с вариативным интервалом.
Режим подкрепления с постоянным соотношением характеризуется тем, что организм здесь подкрепляется по наличию заранее определенного или постоянного количества соответствующих реакций. Данный режим является распространенным в повседневной жизни каждого человека, ему принадлежит огромная роль в процессе контроля над поведением. Так, во многих сферах занятости сотрудникам платят в соответствии с тем количеством единиц, которые они производят либо продают (плата за единицу продукции).
Режим подкрепления с постоянным интервалом характеризуется подкреплением после того, как твердо установленный или «постоянный» временной интервал проходит со времени предыдущего подкрепления. На уровне человека такой режим действителен, к примеру, при выплате заработной платы за работу, выполненную за час, неделю либо месяц. Таким же образом, еженедельная выдача ребенку денег на карманные расходы образует аналогичную форму подкрепления.
При рассмотрении данного вида подкрепления интересным является тот факт, что он дает низкую скорость реагирования сразу после того, как получено подкрепление. Данный феномен получил название паузы после подкрепления.
В режиме подкрепления с вариативным соотношением организм подкрепляется на основе какого-то в среднем предопределенного числа реакций. Наиболее ярким примером поведения человека, который находится под влиянием данного вида подкрепления, является захватывающая азартная игра.
Рассмотрим действия человека, играющего в игральный автомат, где нужно опускать монетку или специальной рукояткой вытягивать приз. Эти аппараты запрограммированы так, что подкрепление (деньги) распределяется в соответствии с числом попыток, за которые человек платит, чтобы управлять рукояткой. Однако выигрыш непредсказуем, непостоянен и редко позволяет получать свыше того, что вложил игрок. Это объясняет тот факт, почему владельцы казино получают значительно больше подкреплений, чем их постоянные клиенты.
Далее, угасание поведения, приобретенного в соответствии с рассматриваемым режимом, происходит очень медленно, так как организм точно не знает, когда будет следующее подкрепление. Таким образом, игрок принуждается опускать монеты в прорезь автомата, несмотря на ничтожный выигрыш (или даже проигрыш), в полной уверенности, что в следующий раз он «сорвет куш». Такая настойчивость типична для поведения, вызванного режимом подкрепления с вариативным соотношением.
Режим подкрепления с вариативным интервалом характеризуется тем, что организм получает подкрепление поле того, как проходит неопределенный временной интервал. Подкрепление здесь зависит от времени, однако время между подкреплениями в данном случае варьирует вокруг какой-либо средней величины, а не является точно установленным. Как правило, скорость реагирования при подкреплении с вариативным интервалом является прямой функцией примененной длины интервала: короткие интервалы порождают высокую скорость, а длинные - низкую. В повседневной жизни режим подкрепления с вариативным интервалом встречается нечасто, хотя несколько его вариантов все же можно наблюдать. Так, к примеру, родители могут хвалить поведение ребенка достаточно произвольно, рассчитывая на то, что он будет продолжать вести себя также и в неподкрепленные интервалы времени.
Было также проведено различие между первичными (безусловными), и вторичными (условными) подкрепляющими стимулами. По Скиннеру, вторичные подкрепляющие стимулы (деньги, внимание, похвала) оказывают сильное влияние на поведение человека. Он также подчеркивал, что поведение контролируется аверсивными стимулами, такими как наказание и негативное подкрепление.
Позитивное наказание имеет место, когда за реакцией следует неприятный стимул, а негативное наказание состоит в том, что за реакцией следует устранение приятного стимула. Напротив, негативное подкрепление встречается, когда организму удается ограничить или избежать предъявления аверсивного стимула. Скиннер боролся с применением аверсивных методов (особенно наказания) в контроле поведения и придавал особое значение контролю посредством позитивного подкрепления.
Концепции оперантного научения многократно подвергались экспериментальной проверке. Подход Скиннера к бихевиористическим исследованиям характеризуется изучением одного субъекта, использованием автоматизированного оборудования, а также четким контролем условий окружения. В качестве примера можно привести исследование эффективности жетонной системы вознаграждения для улучшения форм поведения в группе госпитализированных пациентов психиатрической клиники.
Широко применяются принципы оперантного научения и в настоящее время. Двумя основными областями такого применения являются обучение навыкам общения и биологическая обратная связь. Предполагается, что тренировка уверенности в себе, основанная на методиках репетиции поведения и самоконтроля, очень полезна для того, чтобы люди вели себя более успешно в различных социальных интеракциях. Оказалось, что тренинг с биологической обратной связью эффективен в лечении тревоги, мигрени, мышечного напряжения и гипертензии.
Таким образом, идеи теории Б. Скиннера оказались очень важными для развития всей психологической науки и широко применяются также в настоящее время.
Движение необихевиоризма возглавили такие американские психологи как Э. Толмен и К. Холл. Толмен, как и все его предшественники «классические бихевиористы», отстаивал положение о том, что исследования поведения должны проводиться строго объективным методом, без всякого рода допущений о внутреннем мире сознания. Однако он возражал против того, что необходимо ограничиваться при анализе поведения только формулой «стимул-реакция», а также игнорировать те факторы, которые играют крайне важную роль в промежутке между ними. Эти факторы он называет «промежуточными переменными».
К. Холл в основном опирался на учение Павлова об условных рефлексах и считал, что наиболее важную роль при использовании этого понятия необходимо придавать силе навыка. Для проявления этой силы нужны определенные физиологические потребности. Из всех факторов самое большое влияние на силу навыка оказывает редукция потребности. Чем чаще она редуцируется, тем более высокой будет сила навыка. Таким образом, величина редукции потребности определяется количеством, а также качеством подкреплений. Таким образом, необихевиористы стали добавлять в схему «стимул-реакция» промежуточные переменные (образ, цель, потребность).
Новым импульсом в развитии данного психологического направления стала теория Б. Скиннера, который разработал концепцию «оперантного бихевиоризма». Скиннер признавал два основных типа поведения:
Респондентное поведение - ответ на знакомый стимул;
Оперантное поведение - поведение, которое определяется и контролируется результатом, следующим за ним.
Работа Скиннера почти полностью сконцентрирована на оперантном поведении. При оперантном научении организм действует на окружение, производя результат, влияющий на вероятность того, что поведение повторится. По Скиннеру, поведение самым лучшим образом можно понять в терминах реакций на окружение.
Важным элементом системы Скиннера является подкрепление (зависимость от прошлого опыта).
Описаны четыре режима подкрепления, в результате которых возникают различные формы реагирования:
подкрепление с постоянным соотношением;
подкрепление с постоянным интервалом;
подкрепление с вариативным соотношением;
подкрепление с вариативным интервалом.
Идеи концепции «оперантного бихевиоризма» Б. Скиннера оказались очень важными для развития всей психологической науки и широко применяются также в настоящее время.
Движение необихевиоризма возглавили такие американские психологи как Э. Толмен и К. Холл.
Э. Толмен свои основные идеи изложил в книге «Целевое поведение у животных и человека». Как и другие бихевиористы, он вел свою экспериментальную работу в основном на животных (белых крысах) и считал, что законы поведения одни и те же для всех живых существ и могут быть наиболее четко и досконально прослежены на элементарных уровнях поведения.
Толмен, как и все его предшественники «классические бихевиористы», отстаивал положение о том, что исследования поведения должны проводиться строго объективным методом, без всякого рода допущений о недоступном этому методу внутреннем мире сознания. Однако он возражал против того, что необходимо ограничиваться при анализе поведения только формулой «стимул-реакция», а также игнорировать те факторы, которые играют крайне важную роль в промежутке между ними. Эти факторы он называет «промежуточными переменными».
До исследований Э. Толмена считалось, что эти факторы являются чисто внутренними, открытыми только лишь для индивидуального субъекта, который способен наблюдать за собственным сознанием. Толмен доказывал, что внутренние процессы можно «вывести наружу» и придать их исследованию точно такую же точность, как и исследованию любых физических вещей. Для этого поведение необходимо рассматривать с точки зрения его целостной организации, а не как цепь отдельных реакций. Целостное поведение было описано Толменом как система, которая связана со своим окружением сетью познавательных отношений. Организм ориентируется в тех ситуациях, к которым приспосабливается, благодаря выделению определенных признаков, которые позволяют различать «что ведет к чему». Он не просто сталкивается со средой, а как бы идет ей навстречу с собственными ожиданиями, строит гипотезы и даже проявляет некоторую изобретательность в процессе поиска оптимального т наиболее целесообразного выхода из проблемной ситуации.
Толмен считал, что поведение нельзя сводить к выработке двигательных навыков. Это и отличало его от других бихевиористов. Его экспериментальные данные показывали, что организм в процессе постепенного освоения обстановки строит познавательную («когнитивную») карту того пути, которого необходимо придерживаться для решения определенной задачи. Толмен уделял огромное значение процессам научения и выделил особый тип научения, которое было впоследствии названо латентным (скрытым). Это скрытое научение играет роль тогда, когда отсутствует подкрепление, и характеризуется способностью изменять поведение.
Теория Толмена привела к пересмотру прежних взглядов бихевиористов на те факторы, которые регулируют адаптацию организма к окружающей среде. Среди всех этих факторов особенно выделяется целевая регуляция действий живых существ, их способность к активной познавательной работе даже в тех случаях, в которых речь идет о выработке двигательных навыков.
После экспериментов, проведенных Э. Толменом, стала очевидной недостаточность прежних воззрений на поведение, и потребовался их тщательный пересмотр.
К. Холл в основном опирался на учение Павлова об условных рефлексах и считал, что наиболее важную роль при использовании этого понятия необходимо придавать силе навыка. Для проявления этой силы нужны определенные физиологические потребности. Из всех факторов самое большое влияние на силу навыка оказывает редукция потребности. Чем чаще она редуцируется, тем более высокой будет сила навыка. Таким образом, величина редукции потребности определяется количеством, а также качеством подкреплений. Кроме того, необходимо отметить то, что сила навыка зависит от интервала между реакцией и ее подкреплением, а также и от интервала между условным раздражителем и реакцией. Холл разделял первичное и вторичное подкрепление. Первичным подкреплением, например, является пища для голодного организма или удар электрическим током, который вызывает прыжок у крысы. Потребность соединяется с раздражителями, реакция на которые, в свою очередь, играет роль подкрепления, но уже вторичного.
Холл считал, что поведение организма может строго научно объясняться без использования обращений к психическим образам, понятиям и другим интеллектуальным компонентам. По его мнению, достаточно такого образования, как потребность, для различения объектов. Если в одном из коридоров лабиринта животное может отыскать пищу, а в другом - воду, то характер его движений однозначно определяется потребностью и ничем иным.
Холл впервые поставил вопрос о том, возможно ли моделирование условно-рефлекторной деятельности. Он высказал предположение, что если сконструировать из неорганического материала устройство, которое способно воспроизвести все наиболее существенные функции условного рефлекса, то, организовав из такого рода устройств системы, можно было бы продемонстрировать настоящее научение методом «проб и ошибок». Эти предвосхищались будущие кибернетические модели саморегуляции поведения.
К. Холл создал большую школу, которая стимулировала разработку физико-математических методов применительно к теории поведения, а также использование аппарата математической логики и построение моделей, на которых проверялись гипотезы о разнообразных способах приобретения навыков.
Новым импульсом в развитии данного психологического направления стала теория Б. Скиннера, который разработал концепцию «оперантного бихевиоризма».
Б. Скиннер - один из наиболее ярких представителей бихевиоризма (необихевиоризма). Его теория получила название «оперантного бихевиоризма».
Скиннер стремился переработать классический бихевиоризм и исходил в первую очередь из необходимости систематического подхода к пониманию поведения человека. Одной из центральных идей Скиннера является стремление понять причины поведения и научится им управлять. Он переходит от констатации к разработке методов целенаправленного обучения и управления поведением.
Исходя из представления о том, что не только умения, но и знания представляют собой вариации по ведения, Скиннер разрабатывает его особый вид - оперантное поведение. Он исходил из того, что психика человека основана на рефлексах разного рода и разной степени сложности. Однако, сравнивая свой подход к формированию рефлексов с подходом Павлова, Скиннер подчеркивал существенные различия между ними.
Условный рефлекс, который формируется в экспериментах Павлова, он называл стимульным поведением, так как его формирование связано с ассоциацией между разными стимулами и не зависит от собственной активности субъекта. Такая реакция, как подчеркивал Скиннер, быстро формируется, но и быстро исчезает без подкрепления: она не может быть основой постоянного поведения субъекта.
Респондентное поведение подразумевает под собой характерную реакцию, которая вызвана известным стимулом. Стимул всегда по времени предшествует реакции. Хорошо знакомыми всем примеры респондентного поведения - это сужение либо расширение зрачка в ответ на световую стимуляцию, подергивание колена при ударе молоточком по сухожилию колена, дрожь при холоде. В каждом из приведенных примеров взаимоотношение между стимулом и реакцией невольное и происходит всегда спонтанно.
В противовес этому подходу, при оперантном обучении подкрепляется только то поведение и операции, которые совершает субъект в данный момент. Большое значение имеет и тот факт, что сложная реакция разбивается на ряд простых, следующих друг за другом и приводящих к нужной цели.
Так, при обучении голубя сложной реакции - выходу из клетки с помощью нажатия клювом на рычаг Скиннер подкреплял каждое движение голубя в необходимом направлении, добиваясь того, что он без ошибок выполнял эту сложную операцию. Такой подход к формированию нужной реакции имел большие преимущества по сравнению с традиционным. Прежде всего, это поведение было гораздо более устойчивым, оно очень медленно угасало даже при отсутствии подкрепления. Скиннер обратил внимание на то, что даже одноразовое подкрепление может быть эффективным, так как устанавливается хотя бы случайная связь между реакцией и появлением стимула.
Оперантное поведение (вызванное оперантным научением) определяется теми событиями, которые следуют за реакцией. То есть за поведением идет следствие, а природа этого следствия изменяет тенденцию организма повторять данное поведение в будущем. Например, катание на роликовой доске, игра на фортепиано, написание собственного имени - все это образцы оперантной реакции, контролируемые результатами, следующими за соответствующим поведением. Это произвольные приобретенные реакции, для которых не существует стимула, поддающегося распознаванию.
Если последствия являются благоприятными для организма, тогда вероятность повторения операнта в будущем увеличивается. Когда это происходит, говорят, что последствия подкрепляются, и оперантные реакции, полученные в результате подкрепления обусловились. Таким образом, сила позитивного подкрепляющего стимула определяется в соответствии с его воздействием на последующую частоту реакций, которые непосредственно ему предшествовали.
И напротив, если последствия реакции неблагоприятны и не подкреплены, тогда вероятность получения операнта уменьшается. Например, вы скоро перестанете улыбаться человеку, который в ответ на вашу улыбку всегда бросает на вас сердитый взгляд или вообще никогда не улыбается. Скиннер предполагал, что оперантное поведение контролируется негативными последствиями. По определению, негативные, или аверсивные последствия ослабляют поведение, порождающее их, и усиливают поведение, устраняющее их. Если человек постоянно угрюм, вы, вероятно, попытаетесь совсем его избегать.
Для того, чтобы изучить оперантное поведение в лаборатории, Скиннер придумал на первый взгляд простую процедуру, которая была названа свободным оперантным методом. Полуголодную крысу помещали в пустую «свободно-оперантную камеру» (известную как «ящик Скиннера»), где был только рычаг и миска для еды. Сначала крыса демонстрировала множество оперантов: ходила, принюхивалась, почесывалась, чистила себя и т.д. Такие реакции не вызывались никаким узнаваемым стимулом; они были спонтанны. В конце концов, в ходе своей ознакомительной деятельности крыса нажимала на рычаг, тем самым получая шарик пищи, который автоматически доставлялся в миску под рычагом. Поскольку реакция нажатия рычага изначально имела низкую вероятность возникновения, ее необходимо считать чисто случайной по отношению к питанию; то есть мы не можем предсказать, когда крыса будет нажимать на рычаг, и не можем заставить ее это сделать. Однако, лишив ее пищи, к примеру, на 24 часа, мы можем убедиться, что реакция нажима рычага приобретет в итоге высокую вероятность в данной ситуации. Это делается с помощью метода, который носит название научения через кормушку, посредством которого экспериментатор дает шарики пищи каждый раз, когда крыса нажимает на рычаг. После этого можно увидеть, что крыса проводит все больше времени рядом с рычагом и миской для пищи, а через соответствующий промежуток времени она начнет нажимать рычаг все быстрее и быстрее. Таким образом, нажатие рычага со временем становится наиболее частой реакцией крысы на условие пищевой депривации. В ситуации оперантного научения поведение крысы является инструментальным, то есть действует на окружающую среду, порождая подкрепление (пищу). Если далее идут неподкрепляемые опыты, то есть если пища не появляется постоянно вслед за реакцией нажатия рычага, крыса, в конце концов, перестанет нажимать его, и произойдет экспериментальное угасание.
Можно также рассмотреть пример ситуации, которая встречается почти в каждой семье, где есть маленькие дети, а именно - оперантное научение поведению плача. Когда маленькие дети испытывают боль, они плачут, и немедленной реакцией родителей является выражение внимания и предоставление других позитивных подкреплений. Так как внимание является подкрепляющим фактором для ребенка, реакция плача становится естественно обусловленной. Однако плач может возникать и тогда, когда боли нет. Хотя большинство родителей утверждают, что они способны к различению плача от расстройства и плача, который вызван желанием внимания, все же многие из них упорно подкрепляют последний.
Таким образом, Скиннер признавал два основных типа поведения:
Респондентное поведение - ответ на знакомый стимул;
Оперантное поведение - поведение, которое определяется и контролируется результатом, следующим за ним.
Работа Скиннера почти полностью сконцентрирована на оперантном поведении. При оперантном научении организм действует на окружение, производя результат, влияющий на вероятность того, что поведение повторится. Оперантная реакция, за которой следует позитивный результат, стремится повториться, а оперантная реакция, за которой следует негативный результат, стремится не повторяться. По Скиннеру, поведение самым лучшим образом можно понять в терминах реакций на окружение.
Ключевой концепцией системы Скиннера является подкрепление (зависимость от прошлого опыта).
Описаны четыре режима подкрепления, в результате которых возникают различные формы реагирования:
подкрепление с постоянным соотношением;
подкрепление с постоянным интервалом;
подкрепление с вариативным соотношением;
подкрепление с вариативным интервалом.
Режим подкрепления с постоянным соотношением характеризуется тем, что организм здесь подкрепляется по наличию заранее определенного или постоянного количества соответствующих реакций. Данный режим является распространенным в повседневной жизни каждого человека, ему принадлежит огромная роль в процессе контроля над поведением. Так, во многих сферах занятости сотрудникам платят в соответствии с тем количеством единиц, которые они производят либо продают (плата за единицу продукции).
Режим подкрепления с постоянным интервалом характеризуется подкреплением после того, как твердо установленный или «постоянный» временной интервал проходит со времени предыдущего подкрепления. На уровне человека такой режим действителен, к примеру, при выплате заработной платы за работу, выполненную за час, неделю либо месяц. Таким же образом, еженедельная выдача ребенку денег на карманные расходы образует аналогичную форму подкрепления.
При рассмотрении данного вида подкрепления интересным является тот факт, что он дает низкую скорость реагирования сразу после того, как получено подкрепление. Данный феномен получил название паузы после подкрепления.
В режиме подкрепления с вариативным соотношением организм подкрепляется на основе какого-то в среднем предопределенного числа реакций. Наиболее ярким примером поведения человека, который находится под влиянием данного вида подкрепления, является захватывающая азартная игра.
Рассмотрим действия человека, играющего в игральный автомат, где нужно опускать монетку или специальной рукояткой вытягивать приз. Эти аппараты запрограммированы так, что подкрепление (деньги) распределяется в соответствии с числом попыток, за которые человек платит, чтобы управлять рукояткой. Однако выигрыш непредсказуем, непостоянен и редко позволяет получать свыше того, что вложил игрок. Это объясняет тот факт, почему владельцы казино получают значительно больше подкреплений, чем их постоянные клиенты.
Далее, угасание поведения, приобретенного в соответствии с рассматриваемым режимом, происходит очень медленно, так как организм точно не знает, когда будет следующее подкрепление. Таким образом, игрок принуждается опускать монеты в прорезь автомата, несмотря на ничтожный выигрыш (или даже проигрыш), в полной уверенности, что в следующий раз он «сорвет куш». Такая настойчивость типична для поведения, вызванного режимом подкрепления с вариативным соотношением.
Режим подкрепления с вариативным интервалом характеризуется тем, что организм получает подкрепление поле того, как проходит неопределенный временной интервал. Подкрепление здесь зависит от времени, однако время между подкреплениями в данном случае варьирует вокруг какой-либо средней величины, а не является точно установленным. Как правило, скорость реагирования при подкреплении с вариативным интервалом является прямой функцией примененной длины интервала: короткие интервалы порождают высокую скорость, а длинные - низкую. В повседневной жизни режим подкрепления с вариативным интервалом встречается нечасто, хотя несколько его вариантов все же можно наблюдать. Так, к примеру, родители могут хвалить поведение ребенка достаточно произвольно, рассчитывая на то, что он будет продолжать вести себя также и в неподкрепленные интервалы времени.
Было также проведено различие между первичными (безусловными), и вторичными (условными) подкрепляющими стимулами. По Скиннеру, вторичные подкрепляющие стимулы (деньги, внимание, похвала) оказывают сильное влияние на поведение человека. Он также подчеркивал, что поведение контролируется аверсивными стимулами, такими как наказание и негативное подкрепление.
Позитивное наказание имеет место, когда за реакцией следует неприятный стимул, а негативное наказание состоит в том, что за реакцией следует устранение приятного стимула. Напротив, негативное подкрепление встречается, когда организму удается ограничить или избежать предъявления аверсивного стимула. Скиннер боролся с применением аверсивных методов (особенно наказания) в контроле поведения и придавал особое значение контролю посредством позитивного подкрепления.
Концепции оперантного научения многократно подвергались экспериментальной проверке. Подход Скиннера к бихевиористическим исследованиям характеризуется изучением одного субъекта, использованием автоматизированного оборудования, а также четким контролем условий окружения. В качестве примера можно привести исследование эффективности жетонной системы вознаграждения для улучшения форм поведения в группе госпитализированных пациентов психиатрической клиники.
Широко применяются принципы оперантного научения и в настоящее время. Двумя основными областями такого применения являются обучение навыкам общения и биологическая обратная связь. Предполагается, что тренировка уверенности в себе, основанная на методиках репетиции поведения и самоконтроля, очень полезна для того, чтобы люди вели себя более успешно в различных социальных интеракциях. Оказалось, что тренинг с биологической обратной связью эффективен в лечении тревоги, мигрени, мышечного напряжения и гипертензии.
Таким образом, идеи теории Б. Скиннера оказались очень важными для развития всей психологической науки и широко применяются также в настоящее время.
Движение необихевиоризма возглавили такие американские психологи как Э. Толмен и К. Холл. Толмен, как и все его предшественники «классические бихевиористы», отстаивал положение о том, что исследования поведения должны проводиться строго объективным методом, без всякого рода допущений о внутреннем мире сознания. Однако он возражал против того, что необходимо ограничиваться при анализе поведения только формулой «стимул-реакция», а также игнорировать те факторы, которые играют крайне важную роль в промежутке между ними. Эти факторы он называет «промежуточными переменными».
К. Холл в основном опирался на учение Павлова об условных рефлексах и считал, что наиболее важную роль при использовании этого понятия необходимо придавать силе навыка. Для проявления этой силы нужны определенные физиологические потребности. Из всех факторов самое большое влияние на силу навыка оказывает редукция потребности. Чем чаще она редуцируется, тем более высокой будет сила навыка. Таким образом, величина редукции потребности определяется количеством, а также качеством подкреплений. Таким образом, необихевиористы стали добавлять в схему «стимул-реакция» промежуточные переменные (образ, цель, потребность).
Новым импульсом в развитии данного психологического направления стала теория Б. Скиннера, который разработал концепцию «оперантного бихевиоризма». Скиннер признавал два основных типа поведения:
Респондентное поведение - ответ на знакомый стимул;
Оперантное поведение - поведение, которое определяется и контролируется результатом, следующим за ним.
Работа Скиннера почти полностью сконцентрирована на оперантном поведении. При оперантном научении организм действует на окружение, производя результат, влияющий на вероятность того, что поведение повторится. По Скиннеру, поведение самым лучшим образом можно понять в терминах реакций на окружение.
Важным элементом системы Скиннера является подкрепление (зависимость от прошлого опыта).
Описаны четыре режима подкрепления, в результате которых возникают различные формы реагирования:
подкрепление с постоянным соотношением;
подкрепление с постоянным интервалом;
подкрепление с вариативным соотношением;
подкрепление с вариативным интервалом.
Идеи концепции «оперантного бихевиоризма» Б. Скиннера оказались очень важными для развития всей психологической науки и широко применяются также в настоящее время.
