Скиннер метод проб и ошибок

Оперантное обусловливание по Скиннеру (метод проб и ошибок)

• S¹ → R¹
  → Отсутствие
  подкрепления

Запах →
Царапание пола →
Нет корма

• S¹ → R²
  → Отсутствие
  подкрепления

Запах →
Толкание стены →
Нет корма

• S¹ → R³
  → Подкрепление
  →
  Повторение

Запах → Нажатие
на кнопку → Корм →

Нажатие на кнопку
→ Корм → ………….

• S¹ → R¹
  → отсутствие
  подкрепления

• S² → R²
  → отсутствие
  подкрепления

• S³ → R³
  →
  подкрепление

• S³ → R³
  →
  подкрепление

• ……………………………

Аналогично
удовлетворенность
потребите­ля увеличивает вероятность
повторных покупок.
И наоборот, повторные
покупки маловероятны, если продукт не
удовлетво­рил потребителя.

Метод проб и
ошибок иллюстрируется ситуацией вывода
на рынок новой марки продукта,
например жевательной резин­ки. Менеджер
по продукту уверен, что новая марка
резинки обладает приятным вкусом,
который понравится потребителям. Одним
из способов побудить потребителей
обучиться использо­вать новую марку
резинки – распространить большое
количе­ство бесплатных образцов по
почте.

Многие потребители
попробуют резинку (желаемая реакция на
стимул). Возможность последующего
потребления увеличи­вается в той
степени, в которой вкус резинки
действительно приятен (подкрепление/усиление).

Подкрепление может
быть позитивным
– если
поведение ведет к получению положительных
стимулов. При негатив­ном
подкреплении
поведение ведет к устранению негативных
стимулов – так, например, лекарство
устраняет боль. Наказание,
то есть
появление неблагоприятных стимулов
как результат поведения, снижает
вероятность повторения поведения.
Напри­мер, неудовлетворительное
качество марки купленного про­дукта
снизит вероятность покупки ее в
дальнейшем. Поэтому качество
продукта имеет критическую значимость
для исполь­зования этого метода в
обучении потребителей.

Метод проб и
ошибок часто включает фактическое
исполь­зование продукта.
Таким образом, маркетинговая стратегия
в значительной степени нацелена на
обеспечение начальной про­бы. Бесплатные
образцы (дома или в магазине), специальные
ценовые скидки на новые продукты –
все это представляет собой вознаграждение,
предложенное потребителю для пробы
специфического продукта или марки. Если
они про­буют марку при данных
обстоятельствах и она им нравится
(подкрепление), они, вероятно, предпримут
следующий шаг и купят продукт в будущем.
Этот процесс поощряет частичные ре­акции,
ведущие к финальной желаемой реакции
– «потреби бесплатный образец – купи
по полной цене». Этот процесс известен
как шейпинг
(shaping
— формирование). Примером
использования шейпинга является попытка
побу­дить случайных читателей газет
и журналов стать подписчи­ками.
Эта попытка предполагает: 1) бесплатные
пробные эк­земпляры в течение первого
срока; 2) подписку по сокращен­ной цене
на следующий срок или отложенный платеж
проб­ных экземпляров для дальнейшего
получения; 3) подписку по регулярной
цене.

Метод проб и ошибок
находит широкое применение в обу­чении
потребителей. Подкрепление
не обязательно должно представлять
только качественную характеристику
товара. Оно может относиться и к качеству
услуг, сопутствующих товару,
например:

• Интерьеры магазинов,
  торговых центров, банков, офисов,
  университетов строятся так, чтобы
  превратить их в прият­ные места для
  посещения и покупки товаров и услуг –
  предоставляя развлечения, впечатляющие
  витрины-экспо­зиции и комфортную
  атмосферу.

• Поздравление
  с удачной покупкой встраивается в
  прог­раммное обеспечение компьютера
  «Canon»,
  которое видит потребитель, включив
  дома компьютер.

• Предоставление
  дополнительного подкрепления
  для после­дующих
  покупок в магазине,
  такого, как возврат части цены (rebate)
  при покупке упаковки товара, торговые
  марки (trading
  stamps)
  или призы (каждому тысячному покупателю).

• Предоставление
  дополнительного подкрепления для
  покуп­ки конкретной марки,
  например игрушки в коробках с зубной
  пастой или дисконтные (предоставляющие
  скидку) купоны.

• Предоставление
  бесплатных продуктных образцов
  (зубной пасты, шампуня) или вводных
  купонов для поощрения про­бы продукта
  (шейпинг).

• Реклама,
  которая усиливает/поощряет владение
  или использование продукта: «Лучшие
  люди имеют…»

Обучение методом
проб и ошибок наиболее вероятно возни­кает
в ситуациях высокой вовлеченности.
Ясно, что использо­вание конкретного
продукта предполагает хотя бы некоторую
мотивацию, или вовлеченность. Большинство
покупок высокой вовлеченности
сопровождается последующей оценкой
получен­ного вознаграждения. Человек,
покупающий новый костюм, ве­роятно,
посвятит хоть сколько-нибудь намеренные
усилия оценке символьного и функционального
результата покупки.

Когнитивное
обучение

Когнитивное
обучение концентрируется на
интеллектуаль­ных процессах. Когнитивный
подход к обучению охватывает всю
умственную деятельность человека,
поскольку люди рабо­тают над решением
проблем или разрешением ситуации.
Люди обучаются идеям, концепциям,
отношениям и фактам, которые увеличивают
способность рассуждать, решать пробле­мы
и обучаться отношениям с другими людьми
без прямого опыта или подкрепления.
Когнитивное
обучение варьируется от получения самой
простой информации до нахождения решения
сложных, творческих проблем.

Методы когнитивного
обучения:

1.Традиционное
заучивание
(iconic
rote
learning)
состоит в
обучении ассоциации между
двумя или более понятиями в
отсут­ствие условной рефлексии.
Например, человек может видеть рекламу,
утверждающую: «Hewlett-Packard»:
качество, не тре­бующее доказательств»
или «Процессор Pentium
II
– вот что у лучших компьютеров внутри!»,
и ассоциировать название корпоративной
или продуктной марки с высоким качеством.
Здесь нет ни безусловных стимулов, ни
прямой награды.

Низкововлеченное
обучение происходит в значительной
сте­пени методом заучивания/зубрежки.
Многократное повторение простого
сообщения может закончиться заученной
сутью сообще­ния, возможно, на слабом
уровне, как результат сканирования
среды потребителем. Посредством
традиционного заучивания потребители
могут формировать верования о
характеристиках или атрибутах продуктов,
не будучи осведомленными об ис­точниках
информации. Когда потребность возникает,
покупка может быть сделана на основе
этих верований.

2.Замещение/моделирование
(vicarious
/modeling
learning).
Этот метод
обучения
объединяет аспекты как когнитивного,
так и ус­ловно-рефлекторного обучения.
Эта форма составляет основу большей
части рекламы. Мы можем наблюдать
резуль­таты поведения других и строить
соответственно свое собствен­ное
поведение. Аналогично мы можем использовать
образ­ность для предвидения результатов
различных курсов действий.

Этот тип обучения
является общим для ситуаций как низкой,
так и высокой вовлеченности. В ситуациях
высокой вовлечен­ности, таких, как
покупка нового костюма вскоре после
по­лучения работы, потребитель может
намеренно наблюдать сти­ли одежды
сотрудников или ролевых моделей из
других сред, включая рекламные ролики.

Маркетологи могут
широко использовать замещающее обуче­ние.
Реклама обещает вознаграждение за
использование про­дукта или, что чаще,
показывает потребителей, получающих
вознаграждения за использование
продукта. Так, домохозяйка обретает
восхищение своей семьи за чисто
отстиранную новым порошком одежду и
белье. Реклама может показывать жен­щину,
получающую позитивное подкрепление
(восхищенный взгляд) потому, что на ней
надеты красивые колготки. Потен­циальная
потребительница может вообразить
аналогичные ре­зультаты для себя как
следствие использования продукта. Фокус
нередко делается также на негативных
последствиях использо­вания
конкурирующих марок или неиспользования
продукта (колготки «Conte»).

3.Рассуждение
(reasoning)
– наиболее
сложная форма когнитив­ного обучения.
Этот метод предполагает творческое
мышление потребителя для реструктурирования
и рекомбинации сущест­вующей, а также
новой информации для формирования новых
ассоциаций и понятий. Этот
метод используется при размеще­нии
аналитических статей в профессиональных
изданиях, нап­ример о состоянии и
перспективах развития компьютерного
рынка.
Большинство покупок высокой вовлеченности
– ком­пьютеры, информационные системы
– предполагает хотя бы некоторое
обучение потребителя методом рассуждения.
Приведем краткое описание методов
обучения потребителей с примерами,
основанное на формате Хокинса.

Методы обучения
потребителей с примерами уровней
вовлеченности

Метод	Описание	Пример высокой вовлеченности	Пример низкой вовлеченности
Классическая условная рефлексия	Реакция, вызы­ваемая одним объектом, бу­дет вызвана вторым объек­том, если оба объекта часто возникают вместе	Благоприятная эмо­циональная реакция, вызываемая словом Америка у амери­канских граждан, начинает вызывать­ся маркой «Chrysler» после того, как «Chrysler» объявил о планах использо­вать только сделан­ные в Америке компоненты	Благоприятная эмо­циональная реакция, вызываемая картин­кой, начинает вы­зываться марочным названием, которое последовательно показывается с картинкой, даже если потребитель не обращает вни­мания на рекламу
Метод проб и ошибок (оперантное обусловли­вание, инст­рументальное обучение)	Реакция, полу­чающая под­крепление, более вероятно будет повторе­на, когда ана­логичная ситуа­ция возникнет в будущем	Покупатель, купив костюм, обнаружи­вает, что тот не мнется, и получает несколько компли­ментов. Затем он покупает спортив­ную куртку той же фирмы	Знакомая марка горошка покупается без особых раздумий. Горошек оказался хорошим на вкус. Потребитель продолжает покупать эту марку
Традиционное заучивание	Два или бо­лее понятий становятся ассоциирован­ными без условной рефлексии	Бегун узнает о раз­личных марках бе­говых туфель в ре­зультате вниматель­ного чтения множе­ства рекламных сообщений, которые он находит занимательными	Потребитель узнает, что «Apple» делает домашние компью­теры, без каких-либо размышлений о рекламе «Apple» или ее продуктах
Замещение/ моделиро­вание	Поведению обу­чаются, наблю­дая результа­ты поведения других или воображая результаты потенциального поведения	Потребительница наблюдает за реакцией людей на новую короткую юбку своей подруги, перед тем как решает купить такую же	Дети узнают, что мужчины не носят платьев, даже не думая об этом
Рассуждение	Индивидуумы используют мышление для реструктуриро­вания и реком-бинирования существующей информации и новую ин­формацию для формирования новых ассоциа­ций и понятий	Потребитель верит, что пищевая сода устраняет запахи из холодильника. Замечая неприятный запах ковра, потребитель решает насыпать немного соды на ковер	Обнаружив отсутствие в магазине черного перца, потребитель решает заменить его белым перцем

Основные
характеристики обучения

Выбор методов
обучения определяется особенностями
ситуа­ции. Однако, независимо от
используемых методов, пять основ­ных
характеристик обучения представляют
наибольший интерес для маркетолога-менеджера:
сила обучения;
гашение, или
забыва­ние;
генерализация,
или обобщение,
стимулов; дискриминация,
или различение,
стимулов; среда
реакции.
Знание этих харак­теристик позволяет
маркетологу разрабатывать эффективные
стратегии для
имплантации информации в сознание
потреби­теля – марочных названий,
месторасположения магазина, пре­имуществ
продукта.

Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]

• #
• #
• #
• #
• #
• #
• #
• #
• #
• #
• #

20 столетие было богатым на научные открытия в области психологии. Разные направления и подходы исследования человека всячески пытались ответить на вопрос, что собой представляет человечество. На волне увлечения позитивизмом и поиска точных методов исследования самой популярной психологической концепцией долгое время считался бихевиоризм, который подразумевал идею того, что человек – это всегда творение окружающих обстоятельств, и полностью исключал важность сознания и внутренних особенностей индивида.

Именно в духе бихевиоризма была сформулирована теория оперантного обусловливания американским психологом Берресом Скиннером, который утверждал: человеческое поведение детерминировано и поэтому предсказуемо.

В этой статье мы более подробно рассмотрим самую выдающуюся концепцию Скиннера, которую неоднократно критиковали за манипулирование человеческим поведением, но в тоже время ее сторонники плодотворно использовали ее для внедрения новых черт характера.

Скиннер и критика традиционной психологии

Беррес Фредерик Скиннер (1904-1990) – один из самых известных представителей бихевиоризма, основатель необихевиоризма, а также очень противоречивая фигура в истории американской психологии ХХ столетия.

Перед тем как стать выдающимся психологом, Скиннер мечтал о карьере писателя, но после знакомства с научными работами Павлова и Джона Уотсона он поступил в Гарвард и начал изучать психологию.

Еще будучи студентом психологии в университете, Скиннер вслед за Павловым утверждал, что человек не отличается от других животных, поэтому и анализировать его стоит в тех же научных категориях что и другие живые организмы. Этим своим знаменитым мнением он бунтовал против известной концепции в психологии, согласно которой формирование человека и его поступков – это отражение внутренних переживаний, мыслей, эмоций.

Такими утверждениями о предмете психологии Скиннер остро критиковал популярный тогда психоанализ Фрейда, а также вслед за позитивистским духом в точных и естественных науках он хотел переосмыслить методологию психологии. Разделив психологию на «донаучные» концепции и бихевиористов, Скиннер пытался ее реформировать и сформулировать собственный научный метод, создать новую экспериментальную психологию.

Критикуя психологию, Скиннер пытался доказать: фундаментальная ошибка современной психологии в том, что причины человеческого поведения находятся не внутри человека, а в окружении. Он утверждал: хотя человечество перестало верить в средневековых духов и бесов, но оно до сих пор пытается описать какие-то метафорические «скрытые силы» сознания, которые нельзя доказать или подтвердить экспериментально. Эти аргументы против изучения внутреннего мира были обоснованы тем, что люди не имеют доступа к сознанию человека, поэтому психология должна заниматься только наблюдением.

Благодаря численным экспериментам в лаборатории (большое количество которых он проводил на голубях и крысах), а также своему писательскому таланту, сегодня Скиннер считается самым ярким представителем бихевиоризма. Его научный вклад в развитие психологии оказал сильное воздействие на последующие поколения психологов, которые работали в этом же направлении.

Предпосылки оперантного поведения

В психологии Скиннера главный акцент сделан на то, что свой выбор человек совершает под воздействием каких-либо событий в прошлом. Скиннер утверждал: окружающие факторы приводят нас к определенному решению и поступкам. Центральный источник нашего поведения – не люди сами по себе (их чувства, разум, планы или цели), а их ответная реакция на влияние со стороны окружения. Чтобы понять, почему мы поступаем именно так, а не иначе, согласно Скиннеру, нужно знать обстоятельства, которые стимулируют нас к действиям.

Именно поэтому окружающий мир формирует из нас тех, кем мы являемся: наши действия зависят от знания, что хорошо, а что плохо, и, хотя мы верим, что это наше внутреннее решение, именно внешняя среда сформировала наше понимание, что такое хорошо, а что плохо. Люди – это результат адаптации каждого человека к внешней среде, в которой он родился.

Согласно философии Скиннера, нет необходимости тратить так много энергии на моральное развитие индивида, ведь «черты характера» – это аккумуляция реакций на определенные внешние условия окружения. Поэтому результат будет намного лучше, если мы будем больше сил и внимания уделять исследованиям внешней среды и условий, от которых и зависит индивид. Таким образом, если мы создадим лучшие окружающие условия, мы получим лучших индивидов.

В экспериментальной психологии принято выделять два процесса, ответственных за выработку и закрепление форм реакции на любые потребности:

• обучение – акцент сделан на форме обучения обучающего;
• учение, научение – здесь важны условия обучения, которые включают три разных способа воздействия на организм (человека или животного): реактивное поведение, когнитивное научение и оперантное поведение (или научение в результате оперантного обусловливания).

Сегодня теория оперантного поведения – это, пожалуй, самый известный вклад Скиннера в развитие экспериментальной психологии. Скиннер утверждал, что люди – это не больше, чем думающие машины, которые могут изменять свои действия.

Теория оперантного поведения

Согласно теории поведенческой психологии бихевиоризма, внешняя среда – это самый важный фактор формирования навыков, а ключевую роль играют ассоциативные связи, которые организм создает в результате жизненного опыта.

Если Павлов вывел закономерность формирования условных рефлексов, то Скиннер пошел еще дальше: он описал свои научные наблюдения и возможные способы влияния на поведение организма, и назвал их «оперантное обусловливание» (или оперантный бихевиоризм) – процесс формирования ассоциаций между поведением и его последствиями. Согласно Скиннеру, существует три вида поведения человека:

• безусловно-рефлекторное;
• условно-рефлекторное;
• оперантное.

Именно идея оперантного обусловливания состоит в изучении формирования поведения человека. Сначала она была сформулирована по аналогии наблюдения за реакцией животных в лабораторных условиях. Поэтому «обусловливание» – это создание необходимых условий, которые дают возможность управлять человеческим поведением.

Обусловить – это обдуманный пошаговый процесс, который позволяет создать нужные подконтрольные условия, из-за воздействия которых меняется состояние человека, его поведение и реакции на последующие обстоятельства. «Оперантное» (от слова «операция») означает действие, имеющее воздействие на среду. Поэтому под оперантным обусловливанием Скиннер подразумевал форму обучения, в которой спонтанное поведение воспринимается как желательное. Главный акцент в оперантном обусловливании Скиннер делал не на реакции человека, а на акции – действии, которое воздействует на человека.

Поэтому принцип оперантного обусловливания можно обозначить тем, что человеческое поведение контролируется его последствиями: позитивный многоразовый опыт в прошлом формирует модель реакции на похожую ситуацию в будущем.

Как пример действия оперантного обусловливания можно представить такую ситуацию:

Джулиан вместе со своей дочерью Энн пошли в кино. Джулиан купил пакетик с разными леденцами. Он протянул пакетик Энн, и та перебрала их все, пока не нашла синий, который тут же вытащила и сунула в рот. Одно из объяснений ее выбора состоит в том, что в результате прошлого опыта она отождествила синий цвет леденца с приятным вкусом.

Развивая свою интерпретацию того, какой должна быть психология, Скиннер пытался доказать, что человеческое поведение всегда зависит от внешней среды: выбрать фильм, открыть дверь в ответ на звонок, держать партнера за руку, когда он просит – все это примеры оперантного поведения.

В свое время Скиннер обосновал закономерности, которые назвал законом оперантного обусловливания и законом субъективной оценки вероятности последствий. Этим заявлением Скиннер предлагал свое решение современных социальных проблем, создание технологии поведения, которая бы позволяла манипулировать негативным поведением людей и помогала бы создавать положительные реакции. Он предлагал изменить такие черты как гордость, стремление к власти, агрессия, наполнить людей четким пониманием смысла и целей.

Сегодня оперантное обусловливание рассматривается психологами в двух основных формах:

1. Инструментальное научение – ему свойственно подкрепление случайного поведения путем наград и наказаний. Воздействие на человека происходит за счет активизации нервной деятельности.
2. Творческое научение – нацелено на воздействие разума и активизацию творческих способностей в нужном направлении.

Правила эффективного оперантного обусловливания:

1. Простая инструкция.
2. Легкое начало.
3. Позитивный процесс обучения.
4. Регулярная система подкреплений.
5. Четкая методичность процесса обучения.

Одна из ключевых идей в концепции Скиннера – это подкрепление или «последовательное наведение на нужную реакцию». Он описывал четыре режима подкрепления в зависимости от необходимой формы реагирования:

• с постоянным соотношением;
• с постоянным интервалом;
• с вариативным соотношением;
• с вариативным интервалом.

Особенно важным в формировании нужной реакции Скиннер считал использование подкрепляющих стимулов, которые разделил на три типа:

1. Первичные подкрепления – вода, пища, секс и т. п.
2. Вторичные (условные) подкрепления – привязанность, внимание, деньги, похвала и т. п. – оказывающие сильное влияние на поведение человека;
3. Позитивные и негативные подкрепления (аверсивные) и наказания.

Также в оперантном обусловливании выделяют три типа научения:

• метод проб и ошибок;
• формирование автоматизированной реакции;
• подражание путем наблюдения и воспроизведения нужной модели поведения (бывает двух форм – чистое подражание и викарное, то есть повторение с пониманием).

Таким образом, во время оперантного научения человек воздействует на внешнюю среду, и, получая желаемый результат, усиливает вероятность повторного поведения. И также наоборот: если во время воздействия результат был негативным, человек будет стремиться избегать подобного опыта.

Критика Скиннера и его научный вклад в развитие психологии

Несмотря на широкое одобрение научного вклада Скиннера бихевиористами, с его позицией не соглашались многие известные психологи – Эрих Фромм, Ноам Хомский, Стивен Пинкер. Они критиковали Скиннера за пренебрежение человеческими чувствами, когнитивными способностями и ролью человеческих влечений. Поэтому «психология» Скиннера для Фромма, например, была наукой о манипулировании поведением человека.

Однако невзирая на острую критику, научные результаты Скиннера также принесли и немало плодов. Ведь не зря в 1972 году Американская ассоциация психологов внесла Скиннера в число самых выдающихся психологов ХХ столетия. Его идеи и наблюдения многократно подтверждались в разных областях применения, где самыми успешными сферами стали обучение навыкам общения, тренировка навыков уверенности, самоконтроля, а также лечение тревоги, мигрени, артериальной гипертензии и мышечного напряжения.

Кстати, о формировании полезных привычек. Если вы хотите понять как можно эффективно справляться со стрессом, тревогой и страхами, обратите внимание на нашу онлайн-программу «Психическая саморегуляция». С ее помощью за 6 недель можно освоить эффективные способы сохранять ясность ума и справляться с трудными ситуациями на работе, в университете и личных отношениях.

Что же касается оперентного обусловливания Скиннера, то относиться к нему можно по-разному, и это личный выбор каждого. Но все же хочется верить в то, что человек – это не просто животный материал, руководимый лишь реакциями, а осознанное существо, способное всегда и везде опираться на разум, принимать обдуманные решения и действовать самым лучшим образом.

Желаем вам успехов и ждем на наших уроках!

В 1972 году Американская психологическая ассоциация назвала Берреса Фредерика Скиннера самым выдающимся психологом XX века. Зигмунд Фрейд остался вторым. Одного этого факта достаточно, чтобы заинтересоваться ученым, о котором у нас не так уж много известно.

Б.Ф.Скиннер (1904-1990) был представителем бихевиоризма, он развивал идеи Ивана Павлова и Джона Уотсона во второй половине XX века. Как и его великие предшественники, в своей профессии, а часто и в жизни он не признавал компромиссов, доводя каждую идею до логического конца и не считаясь с тем, будет ли это шокировать окружающих. А еще он был увлечен практическим воплощением своих идей, и хотя далеко не все его замыслы были реализованы, он останется в истории как создатель программированного обучения.
Мне кажется, это был интересный и необычный человек.

Скиннер как изобретатель
Один небольшой эпизод из детства Скиннера неплохо иллюстрирует суть его подхода к психологии (хотя о психологии он тогда вряд ли думал). Дело в том, что он постоянно забывал вешать свою пижаму в шкаф, что не нравилось его маме. А Скиннер был любящим сыном и хотел, чтобы мама была довольна.
Как бы подошел к этой проблеме «классический» психолог? Возможно, он стал бы рассуждать о силе воли и необходимости ее тренировки. Психоаналитик с хорошей вероятностью стал бы копаться в конфликтах и противоречиях отношений матери с сыном. Что сделал юный Скиннер? Он сконструировал несложный механизм: соединил веревочкой крючок в шкафу с табличкой над дверью. Когда пижама висела на крючке, механизм не действовал. Если пижамы не было, табличка загораживала дверной проем. На ней было написано «Повесь пижаму». И проблема была решена раз и навсегда
Идея с пижамой в каком-то смысле является метафорой бихевиоризма: вместо копания в дебрях психики, задать внешнюю ситуацию так, чтобы она неизбежно привела к нужному результату.

Уже будучи психологом, Скиннер сконструировал специальную воздушную камеру для младенцев. Он придумал ее, когда родилась его младшая дочь Дебора, чтобы облегчить жене уход за девочкой. В камере поддерживалась комфортная для младенца температура, ее передня часть была стеклянной, а внизу лежала мягкая подстилка, которую было легко менять. Маленькая Дебора Скиннер находилась в камере без одежды, у нее была неведомая другим младенцам свобода движений, а маме уже не нужно было постоянно следить за ней, достаточно было кормить ребенка и поддерживать чистоту. Дебора провела в такой камере первые два года жизни.

Психологам конечно было интересно, как повлияло на судьбу девочки такое необычное воспитание. В сети есть информация о том, что Дебора Скиннер пыталась покончить жизнь самоубийством, что она страдала серьезными нервными расстройствами. Но на самом деле она выросла психически и физически здоровой, стала художником и писателем и написала статью под названием «Я не подопытная крыса», где опровергла все слухи о себе. Главные последствия двух лет, проведенных в необычных условиях, это очень цепкие пальцы ног и привычка спать без одеяла.
Попытка Скинера наладить промышленное производство подобных камер провалилась из-за отсутствия спроса, хотя несколько сотен камер было продано.

Развитие теории: научение по Скиннеру
Основной вклад Скиннера в психологию — это развитие теории научения. Как и основатель бихевиоризма Уотсон, он был сторонником схемы «стимул — реакция». Он полагал, что для того, чтобы выработать нужное поведение (реакцию), необходимо и достаточно правильно организовать окружающую среду (стимулы). Скиннер считал основные идеи Уотсона  недостаточно обоснованными экспериментами и опередившими свое время.
Павлов и вслед за ним Уотсон считали условный рефлекс (или, языком бихевиоризма, обусловливание) основным механизмом научения. Однако, если вдуматься, то станет понятно, что условная реакция лишь повторяет уже имеющиеся формы поведения в новых условиях (слюна у собаки капает в ответ на горящую лампочку точто так же, как в ответ на попадание пищи в желудок). Остается непонятным, как развиваются новые формы поведения. Именно на этот вопрос и ответил Скиннер.

Еще до Скиннера был известен «метод проб и ошибок», который изучали с помощью «проблемного ящика». Это такая  клетка с хитрым запором, снаружи котроой ставилась пища. Чтобы получить ее, животное (собака, кошка, крыса) должно было научиться открывать запор.
Животное, оказавшись в клетке, делает много беспорядочных движений, и одно из них случайно открывает запор. Когда его снова сажают в проблемный ящик, нужное движение скорее всего оно сделает несколько быстрее, потом еще быстрее, пока наконец не научится делать его как только попадет в ящик.

Скиннер ввел понятие о двух видах научения. В первом, по Павлову, подкрепление предшествует действию (сначала собака получает еду, когда загорается лампочка и только потом она начинает выделять слюну при виде лампочки). А во втором варианте действие предшествует подкреплению: крыса нажимает на рычаг, который открывает выход из проблемного ящика, и после этого, выбравшись из ящика, получает еду. Теперь вероятность того, что крыса выполнит то же самое действие (нажмет на рычаг), повышается.

Именно такой способ научения, по мнению Скиннера, является основным механизмом формирования сложных форм поведения у человека и животных.

Второй компонент теории научения Скиннера — метод последовательных приближений. Весь путь по выработке нужного поведения разбивается на несколько этапов. Нужно последовательно и систематически подкреплять каждый из этапов, подводя к нужной форме поведения и вознаграждая каждое действие, приближающее к цели.
К примеру, необходимо научить голубя ударять клювом по маленькому кружку. Голубя награждают зернышком сначала за заход на нужную половину клетки, потом за поворот головы к нужной стенке, потом за касание клювом кружка, потом только за удар по кружку Кстати, это напоминает систему дрессировки животных Владимира Дурова

.

Во время Второй мировой войны Скиннер, используя свои методы научения, создал прообраз самонаводящейся ракеты: он обучал голубей, находящихся внутри ракеты, клевать изображение мишени, на которую она была нацелена. С помощью клевков голуби контролировали движение ракеты и направляли ее к цели, пока она не попадала в цель и не взрывалась (вместе с голубем). Разработка была признана перспективной, но не была доведена до реализации, поэтому ни один голубь не пострадал.

Скиннер считал, что метод последовательных приближений лежит в основе обучения ребенка первым словам. Сначала любой лепет ребенка вызывает восторг родителей (подкрепление), потом они потихоньку привыкают к нему (перестают подкреплять), и восторг (подкрепление) вызывают только звуки, отдаленно напоминающие человеческие слоги, а на следующем этапе — только нечто, похожее на слова. Не исключено, что слово «мама» является самым первым у подавляющей части человечества именно потому, что вызывает наибольший восторг у самого близкого ребенку человека. Есть  сплетня (за достоверность не ручаюсь) что первым словом ребенка одной известной  дамы-политика, родившегося, когда мама была предельно занята своей карьерой, было «няня». Если это действительно так, то вполне «по Скиннеру».

По мнению Скиннера,научение человека отличается от научения животных тем, что человек стремится к сотрудничеству (если стремится). Эффективность обучения (и у тех и у других) зависит от частоты и регулярности подкрепления. Научение часто бывает неудачным, потому что люди, сами того не желая, за одно и то же то хвалят, то ругают (подкрепляют то положительно, то отрицательно) или подкрепляют совсем не то, что собираются. Иными словами, нежелательные формы поведения легко могли бы исчезнуть, если бы воспитатели действовали правильно и не были вынуждены наказывать за то, что вначале сами непроизвольно поощряли.
Вот житейская иллюстрация к этом тезису.

Маленькому мальчику купили новые ботиночки, родственники ставят его на диван, чтобы ботиночки были лучше видны. Мальчик получает позитивное подкрепленире в виде внимания и улыбок родных. На следующий день он возвращается с прогулки, идет в ботинках по комнате, пытается залезть на диван и получает отрицательное подкрепление в виду ругани или наказания. Чему он научится на этом опыте???

Скиннер и программированное обучение
Концепция программированного обучения появилась гораздо раньше массового распространения компьютеров. И создал ее Скиннер, благодаря все той же Деборе — своей младшей дочери. Недовольный дочкиными школьными успехами, Скиннер пришел к ней на занятия и ужаснулся тем, как преподается в классе математика — одни давно усвоили материал и скучают, а другие не успевают ничего понять. И тогда Скиннер сконструировал первую примитивную обучающую машину — устройство, в котором на сложенной гармошкой бумажной ленте были напечатаны математические задачи. Они были подобраны с постепенно возрастающей трудностью. Подвижной рычаг с помощью прозрачного окошка показывал, верно ли решена задача. Если ответ учащегося был правильным, передвигался другой рычаг, выставляя следующий вопрос. Если ответ на вопрос оказывался неверным, рычаг не мог двигаться, и ученику предоставлялась возможность попытаться решить задачу правильно.
Сутью Скиннеровской идеи была разработка учебных схем, в которых было обеспечено продвижение ученика от выполнения простейшего задания к все более трудным, но так постепенно, что ученик редко ошибался. Подкрепление в виде демонстрации в окошке правильного ответа побуждало ученика переходить к следующему вопросу, потом к следующему, позволяя в конце концов усвоить материал. Таким образом, ученик осваивал тему не методом проб и ошибок, а движимый стимулом в виде подкреплений — его собственных правильных ответов на вопросы.
Скиннер вместе с коллегами разработал набор программ для машинного обучения самым разным дисциплинам, надеясь запустить в массовое производство сравнительно недорогие «обучающие машины».

Безусловными достоинствами программированого обучения являются возможность обучаться в индивидуальном темпе, не делая ошибок, и почти стопроцентная эффективность метода. Однако вряд ли можно полностью изгнать из обучения живой контакт с преподавателем, которого лишен этот метод, к тому же он еще довольно скучный. Тем не менее, еще в докомпьютерную эпоху был создан целый ряд «программированных учебников», в котором были последовательно реализованы концепции Скиннера. А с массовым распространением компьютеров появилось огромное количество разнообразных обучающих программ, так или иначе опирающихся на эту концепцию.

Скиннер и иллюзия свободы

В своих поздних работах Скиннер вышел за пределы конкретных психологических теорий и экспериментов и покусился на святая святых современного демократичсекого общества — понятия свободы, воли, ответственности. В своей книге «По ту сторону свободы и достоинства» он утверждал, что «Свобода — ярлык, которым мы клеймим поведение, когда не знаем или не понимаем его причин». Или, выражаясь в терминах бихевиоризма, это реакция на стимул, оставшийся для нас неизвестным.

«Бред», — скажут все, кому дороги ценности свободы, и мне очень хочется присоединиться к ним. Но…
Вспомните знаменитый эксперимент с 25-м кадром. Рекламный кадр с призывом, к примеру, пить Кока-Колу вставлялся в кинофильм так, что на сознательном уровне был незаметен (слишком быстро мелькал). Однако после выхода из кинотеатра зрители исправно покупали Кока-Колу гораздо чаще, чем те, кто кадра не видел.
Этот эксперимент многократно критиковали, но никто не подвергал сомнению опыты с так называемым постгипнотическим внушением, которые проводились еще в конце XIX века. К примеру, девушке внушают, что после пробуждения от гипнотического сна она раскроет зонтик. Она просыпается, глядит в окно и говорит: «Кажется дождик собирается, надо проверить зонтик» — и раскрывает его.

И зрители в кино, и девушка, раскрывавшая зонтик, были уверены, что действуют свободно, однако если знать причину их поведения, или, на языке бихевиоризма, стимул, определивший реакцию (рекламный кадр, внушение), то мы понимаем, что их поведение было отнюдь не свободным.
Вот и задумайтесь над тем, много ли правды в тезисе Скиннера о том, что наша свобода — не более, чем иллюзия. А заодно о том, какие стимулы определяют наш «свободный выбор»..

Ах до чего поpой обидно что хозяина не видно
Ввеpх и в темноту уходит нить
А куклы так ему послушны и мы веpим пpостодушно
В то что куклы могут говоpить

А заодно желающие могут примерить на современную ситуацию слова Скиннера: «Наиболее репрессивные формы контроля — это именно те, которые укрепляют в человеке ощущение свободы». Я их довольно часто вспоминаю, когда думаю о политических новостях…

Скиннер покушался также на другое фундаментальное понятие демократического общества — ответственность:

«Если мы не в состоянии указать на причины, определяющие поведение индивида, то говорим, что он сам несет за него ответственность. Прародители физической науки уже однажды пошли по этому пути, но к счастью, сейчас ветер дует уже не из-за Эола, точно так же, как и дождь идет не по воле Юпитера.»

Я часто думаю, в идеях Скиннера гораздо больше здравого, чем хочется считать.
Впрочем, многие ученые заслуживают уважения, даже если мы не разделяем их идеи. Мне кажется, к Скиннеру это относится в полной мере.

Психология уже много веков пытается исследовать человеческую душу и понять ее порывы и влечения. Но в 20-м веке появились бихевиористы, которые сконцентрировали свое внимание на поведении и заявили, что у людей оно вполне предсказуемо и на него можно влиять.

Что такое оперантное обусловливание

• условно-рефлекторное – она вызвана формированием условного рефлекса и была сформулирована И.П. Павловым;
• оперантное – организм сам активно воздействует на окружающую среду и, в зависимости от тех или иных последствий, вырабатывает определенный способ поведения.

 В теории Скиннера, обусловить – значит создать продуманные условия, которые приведут к подкреплению нужного поведения. «Оперантное» от слова «операция», то есть определенное действие.

Классический эксперимент Скиннера

Лучше всего понять суть оперантного обусловливания помогает описание эксперимента, который провел Скиннер. Он посадил крысу в специальный ящик, где была педаль. Стоило на нее нажать, как в ящике появлялась еда.

При хаотичных передвижениях крыса случайно нажала на педаль и у нее появился корм. После нескольких повторов у крысы сформировалась ассоциативная связь: «нажатие на педаль приводит к сытости».

Суть эксперимента в том, что в отличии от собак Павлова, которые никак не влияли на окружающую среду, крысы Скиннера действовали по своему усмотрению. Они понимали, к чему приведет тот или иной их поступок и меняли свое поведение, чтобы получить желаемое.

Основная идея Скиннера

Согласно теории оперантного обусловливания, люди ничем не отличаются от «подопытных» Скиннера.

Если человек несколько раз заходил в ресторан, где его вкусно кормили, у него сформируется ассоциативная связь, и дальше он, при прочих равных, будет выбирать тот же ресторан.

Если ребенок, пробуя леденцы, натыкался на апельсиновый и тот казался ему самым вкусным, после нескольких «проб», он всегда будет выбирать именно апельсиновый. Но если несколько раз подряд наткнется на «плохие», то он изменит свой выбор.

Все человеческое поведение зависит от окружающий среды, прошлого опыта взаимодействия с этой средой, и тех последствий, то есть видов подкреплений, к которым привело то или иное действие.

Виды подкрепления

Согласно теории оперантного обусловливания, подкрепление может быть:

• первичным – это жизненно важные потребности, такие как еда, секс, безопасность, отсутствие боли;
• вторичным – деньги, уважение, престиж, внимание, социальное одобрение и т.д.

Например, ребенок получил хорошую оценку и за это родители его похвалили. Это повторяется несколько раз. У него формируется ассоциативная связь: «хорошая отметка приведет к похвале». Ради одобрения родителей, он начнет стремиться получать только хорошие оценки.

Но, чтобы эта теория «работала» нужно соблюдать правила эффективного подкрепления. Одно из них – это постоянство и предсказуемость.

Когда крыса каждый раз после нажатия педали получала еду, ее поведение было стабильным и четко направленным. Но потом Скиннер немного изменил условия. После нажатия педали крыса не всегда получала еду, а через раз.

После этого наступило угасание реакции – ассоциативная связь, которая была когда-то сформирована, разрушилась. Также и с людьми. Если ребенок, принося из школы хорошие оценки, то получает похвалу, то нет – его поведение быстро изменится.

Он поймет, что хорошие оценки ему никак не помогут получить желаемое от родителей, потому что их похвала зависит не от него, а от их настроения, усталости и прочего.

Также и со взрослыми. Если человек, вовремя закончив проект, всегда получает премию, работодатель обретет исполнительного и старательного сотрудника.

Но если премии выплачиваются не постоянно, то работник сделает вывод, что нет особого смысла оставаться по вечерам.

Скиннер выделял 3 вида подкрепления:

• позитивное подкрепление;
• негативное подкрепление;
• наказание.

Позитивное подкрепление

Это последствия, которые вызывают у человека или любого другого существа, позитивные эмоции: радость, удовольствие, а также приятные ощущения, например, сытость, тепло. Это та награда, которую мы получаем за работу.

Негативное подкрепление

Это ситуация, в которой удалось избежать наказания. Например, если ребенку угрожают, что за плохое поведение он лишиться подарков на Новый год. Или сотруднику говорят, что если он сорвет сроки работы, он будет уволен.

Чтобы избежать неприятного наказания, человек ведет себя «хорошо».

Наказание

Это наказание за определенные действия: боль, голод, игнорирование, осуждение, штрафы, лишение премии и так далее. А также, это лишение чего-то приятного за неправильное и нежелательное действие.

В общем все, что вызывает у человека негативные эмоции, и не важно, это ребенок, которого поставили в угол или муж, которому не приготовили ужин.

Что лучше «работает»

Одним из революционных открытий Скиннера было то, что благодаря своим экспериментам он смог доказать – наиболее эффективным является позитивное подкрепление. Именно похвала, премии, награда лучше всего мотивируют человека делать то, что нужно.

На втором месте было негативное подкрепление – желание избежать неудовольствия и наказания тоже повышает эффективность работы.

А вот наказание, как показали эксперименты, не стимулирует правильное поведение. Наоборот, в какой-то момент происходит снижение мотивации. Человек перестает делать то, что от него требуется даже понимая, что будут санкции.

Критика и вклад теории оперантного обусловливания

Теория Скиннера подвергалась критике со стороны таких психологов, как Э. Фромм, С. Пикнер, Н. Хомский. Они считали, что в теории оперантного обусловливания есть существенный недостаток – она не учитывает роль человеческих влечений, чувств, а также логического мышления.

Общественность критиковала Скиннера за то, что суть его теории сводится к тому, как можно манипулировать другим человеком и влиять на его поступки. Многие считали, что Скиннер пренебрегает вопросами морали, этики, человечности и отрицает право на свободу воли.

Несмотря на это Скиннер был признан одни из выдающихся деятелей в области психологии. Его исследования оказали значительное влияние на мир.

Его теории и принципы применяются в сфере мотивации, менеджмента, воспитания. Также они прекрасно помогают развивать навыки общения, избавляться от вредных привычек, тренировать самоконтроль.

Оперантное обусловливание поведения Скиннера

Беррес Фредерик Скиннер (1904-1990) – один из самых известных представителей бихевиоризма (научное направление в психологии, изучающее поведение людей и животных), основатель необихевиоризма. Он вслед за Павловым утверждал, что человек не отличается от животных, поэтому и анализировать его стоит в тех же научных категориях что и другие живые организмы.

Скиннер пытался доказать: фундаментальная ошибка современной психологии в том, что причины человеческого поведения находятся не внутри человека, а в окружении. Центральный источник нашего поведения – не люди сами по себе (их чувства, разум, планы или цели), а их ответная реакция на влияние со стороны окружения.

Чтобы понять, почему мы поступаем именно так, а не иначе, нужно знать обстоятельства, стимулирующие нас к действиям. Окружающий мир формирует из нас тех, кем мы являемся: наши действия зависят от знания, что хорошо, а что плохо, и, хотя мы верим, что это наше внутреннее решение, именно внешняя среда сформировала наше понимание, что такое хорошо, а что плохо.

Люди – это результат адаптации каждого человека к внешней среде, в которой он родился. В экспериментальной психологии принято выделять два процесса, ответственных за выработку и закрепление форм реакции на любые потребности:

• обучение – акцент сделан на форме обучения обучающего;
• научение – здесь важны условия обучения, которые включают три разных способа воздействия на организм человека или животного: реактивное поведение, когнитивное научение и оперантное поведение.

Сегодня теория оперантного поведения – это, пожалуй, самый известный вклад Скиннера в развитие экспериментальной психологии. Скиннер утверждал, что люди – это не больше, чем думающие машины, которые могут изменять свои действия. Согласно теории поведенческой психологии бихевиоризма, внешняя среда – это самый важный фактор формирования навыков.

Согласно Скиннеру, существует три вида поведения человека:

• безусловно-рефлекторное;
• условно-рефлекторное;
• оперантное.

Человеческое поведение контролируется его последствиями: позитивный многоразовый опыт в прошлом формирует модель реакции на похожую ситуацию в будущем. В свое время Скиннер обосновал закономерности, которые назвал законом оперантного обусловливания. Этим он предлагал свое решение современных социальных проблем

Он ратовал за создание технологии поведения, которая бы позволяла манипулировать негативным поведением людей и помогала бы создавать положительные реакции, предлагал изменить такие черты как гордость, стремление к власти, агрессия, наполнить людей четким пониманием смысла и целей.

Сегодня оперантное обусловливание рассматривается психологами в двух основных формах:

• Инструментальное научение – ему свойственно подкрепление случайного поведения путем наград и наказаний. Воздействие на человека происходит за счет активизации нервной деятельности.
• Творческое научение – нацелено на воздействие разума и активизацию творческих способностей в нужном направлении.

Правила эффективного оперантного обусловливания:

• Простая инструкция.
• Легкое начало.
• Позитивный процесс обучения.
• Регулярная система подкреплений.
• Четкая методичность процесса обучения.

Скиннер описывал четыре режима подкрепления в зависимости от необходимой формы реагирования:

• с постоянным соотношением;
• с постоянным интервалом;
• с вариативным соотношением;
• с вариативным интервалом.

Особенно важны подкрепляющие стимулы:

• Первичные подкрепления – вода, пища, секс и т. п.
• Вторичные (условные) подкрепления – привязанность, внимание, деньги, похвала и т. п. – оказывающие сильное влияние на поведение человека;
• Позитивные и негативные подкрепления (аверсивные) и наказания.

Также в оперантном обусловливании выделяют три типа научения:

• метод проб и ошибок;
• формирование автоматизированной реакции;
• подражание путем наблюдения и воспроизведения нужной модели поведения (бывает двух форм – чистое подражание и викарное, то есть повторение с пониманием).

Таким образом, во время оперантного научения человек воздействует на внешнюю среду, и, получая желаемый результат, усиливает вероятность повторного поведения. И также наоборот: если во время воздействия результат был негативным, человек будет стремиться избегать подобного опыта.

Продолжает и развивает идеи Уотсона Беррес Ф. Скиннер (1904-1990), который разработал теорию оперантного научения. Он является лидером современной формы бихевиоризма (или необихевиоризма).

Скиннер считал теории психоаналитические умозрительными, т.е. основанными на предположении. Они предполагают существование интрапсихических факторов (влечения, бессознательное), которые нельзя эмпирически проверить. Скиннер считал, что поведение человека надо изучать с позиции того, что его формируют обстоятельства окружения (окружающая среда и люди). Все действия человека и его поведение объясняются влиянием окружения.

Скиннер утверждал, что человеческий организм — это «черный ящик». Его содержимое (эмоции, мотивы, интрапсихические конфликты, влечения) нельзя объективно измерить, поэтому их следует исключить из сферы эмпирического наблюдения.

Поведение человека можно и нужно надежно и объективно измерить. И таким образом теория Скиннера из разряда умозрительных переходит в разряд эмпирических (научно-обоснованных). Он ставил науку о поведении в разряд естественных наук, т.е. наук: основанных на фактах (1) и цель которых предсказать и проконтролировать изучаемое явление (2).

Скиннер предложил в качестве метода исследования поведения — функциональный анализ поведения. Он указывал, что поведение лучше всего изучать, обращаясь к тому, как оно соотносится с предшествующими событиями. Он полагает, что поведение можно изучить и контролировать посредством манипулирования средой, в которую включен организм. При этом нет необходимости рассматривать механизмы, действующие внутри организма.

Так, функциональный анализ дает возможность установить точные и обусловленные взаимоотношения между открытым поведением (реакцией) и условиями окружающей среды (стимулами), которые контролируют поведение. Функциональный анализ дает возможность установить причинно-следственные отношения между поведением и окружающей средой. Манипулируя переменными окружающей среды (независимыми переменными — теми, которыми манипулирует экспериментатор), можно предсказывать и измерять поведение человека (зависимую переменную — ту, которая изменяется в результате манипуляции).

Скиннер не принял идею о личности или самости, которая направляет или стимулирует поведение. Он считает, что необходимо отказаться от мысли, что поведение порождается силами, находящимися внутри индивида (чертами, потребностями, мыслями, чувствами), в пользу более научных представлений о силах, лежащих вне человека. Он полагает, что поведение человека регулируется не изнутри, а снаружи — окружающей средой. Изучение личности по Скиннеру -это нахождение своеобразного характера взаимоотношений между поведением организма и результатами этого поведения, которые и подкрепляют его в последствии. Этот подход фокусируется на прогнозировании и контроле наблюдаемого поведения.

Как и Уотсон Скиннер огромное внимание уделял научению, но в отличие от Уотсона главным его интересом было не классическое, а так называемое оперантное научение. При классическом научении организм ассоциирует разные стимулы, при оперантном научении организм ассоциирует свое поведение с последующим результатом. Оперантное научение подчиняется закону эффекта, который был открыт американским психологом Эдвардом Торндаком в конце 19 века. В своих опытах Торндайк использовал так называемые проблемные клетки, в которые он помещал голодных кошек. Что бы выйти из такой проблемной клетки кошке нужно было потянуть за веревку или приподнять крючок. Наблюдая за животными, Торндайк заметил, что, помещенная в проблемную клетку кошка беспорядочно металась по клетке и, в конце концов, случайно задевала веревку или крючок. Однако с каждой следующей попыткой активность животных все больше сосредоточивались вокруг веревки или крючка и после многократных проб кошка научалась выходить из клетки. Такое научение также называется научением методом проб и ошибок. Это научение подчиняется закону эффекта, согласно которому если поведение приводит к желаемому результату (вознаграждается), вероятность его повторения увеличивается.

Для своего подхода к пониманию личности в свою теорию Скиннер добавляет положения о двух видах поведения: респондентное и оперантное поведение.

Респондентное поведение — подразумевает реакцию, вызываемую стимулом. Стимул всегда предшествует реакции.

Выделяют два вида респондентного поведения:

1. условно рефлекторное
2. безусловно рефлекторное.