Материал: Влияние подкрепления и наказания на поведение

Режим соотношения: в этом режиме подкрепление появляется если поведение осуществляется Х раз. Х может быть вариативным числом.

Интервальный режим - в этом режиме первая реакция в любое время по истечении определенного промежутка времени подкрепляется.

Режим длительности - в этом режиме поведение должно происходить на протяжении какой-либо длительности времени чтобы подкрепиться.

Все эти графики подкрепления могут быть фиксированными или вариативными. В фиксированном графике подкрепление будет появляться в течении заданного периода времени, или после фиксированного числа ответов. В вариативном графике подкрепления, время или количество ответов будет меняться вокруг определенного числа; например, подкрепление будет даваться когда действие будет выполнено от 10 до 20 раз. Если мы примем, что постоянный режим и угасающий режим подкрепления являются ничем иным как двумя экстремумами периодического режима то мы получаем восемь базовых режимов подкрепления Herrnstein, R. J. (1970). On the law of effect. Journal of the Experimental Analysis of Behavior, 13, 243-266. В примерах режимов подкрепления значительное внимание уделяется примерам как из реальной жизни, так и в игровой среде.

Фиксированное соотношение - подкрепление дается после точно определенного количества верных ответов. На рис. №1 изображен график динамики поведения животного в режиме фиксированного соотношения. Полосы перекрывающие линию динамики поведения означают момент получения подкрепления. Буквой А отмечена пост-подкрепляемая пауза (Bernstein, Roy, Srull, & Wickens, 1991; Bootzin, Bower, Crocker, & Hall, 1991)[13].

Примеры:

Работа на фабрике, оплачиваемая по количеству произведённых деталей.

Получение премии на работе на каждые (х) проданных товаров.

Сбор жетонов в игре. Многие игры требуют от игрока сбора определенного количества жетонов для перехода на следующий уровень, чтобы получить дополнительное очко жизни, или другое подкрепление.

Достижение нового уровня в RPG - ролевой игре (или "РПГ"). Некоторые RPG показывают в точности, сколько требуется опыта для достижения нового уровня. Высокий показатель определенности того, сколько потребуется работы для достижения нового уровня, заключает игрока в режим фиксированного соотношения подкрепления.

Вариативное соотношение - подкрепление дается после заданного количества верных ответов.

На рисунке №2 изображен график динамики поведения животного в режиме вариативного соотношения. Полосы перекрывающие линию динамики поведения означают момент получения подкрепления.

Примеры:

Игровые автоматы в казино. [13].

Покупка лотерейных билетов (Pettijohn, 1992).

Поочерёдное закидывание и сматывание удочки перед тем как поймать рыбу. Bootzin, Bower, Crocker, & Hall, 1991;

Сбор жетонов. Некоторые игры требуют от игрока собирать жетоны чтобы чего-то достичь, но варьируют количество требуемых жетонов.

Получение нового уровня в РПГ. Некоторые РПГ не дают точной информации о том, сколько требуется опыта для достижения следующего уровня. Это заключает игрока в режим вариативного соотношения подкрепления.

Крафтинг (производство каких-либо вещей или экипировки самим игроком) в РПГ. Может потребоваться множество попыток, чтобы достичь успеха, и чтобы вещь получила новый уровень, но чем больше раз вы пытаетесь, тем более вероятно что ваше поведение подкрепится.

Фиксированный интервал - первый ответ после фиксированного временного интервала подкрепляется.

На рис. №3 изображен график динамики поведения животного в режиме фиксированного интервала. Полосы перекрывающие линию динамики поведения означают момент получения подкрепления. (Peterson, 1991).

Примеры:

Получение зарплаты каждую неделю.[13]

Проверка почтового ящика по утрам.

Ожидание респауна (возрождения) монстров, где респаун происходит после заданного периода времени. Заметка: в онлайн-играх другие игроки также могут ожидать этого монстра, и в этом случае они находятся в режиме фиксированного интервала и ограниченного удержания.

Получение объектов, сокровищ, или усилений в игре, которые появляются только в фиксированные интервалы времени.

Вариативный интервал - режим, где первый ответ после вариативного временного интервала подкрепляется (Gleitman, 1981).

На рис. №4 изображен график динамики поведения животного в режиме вариативного интервала. Полосы перекрывающие линию динамики поведения означают момент получения подкрепления.

Примеры:

Сотрудники ГАИ, следящие за соблюдением скоростного режима за чертой города.

Ожидание приезда такси. (Baron,1992).

Ожидание респауна монстров в игре, где респаун происходит только в вариативные интервалы времени. Заметка: в мультиплеерных играх другие игроки могут также ожидать этого монстра, и в таком случае они находятся в режиме фиксированного интервала и ограниченного удержания.

Фиксированный интервал с ограниченным удержанием - первый ответ после фиксированного интервала времени подкрепляется, обеспечивая осуществление реакции в течении заданного периода до его окончания.

Примеры:

Ожидание респауна монстров в заполненном мире онлайн игры. Если монстр респаунится в регулярные интервалы времени - игрок должен ждать фиксированный период времени чтобы его убить. Тем не менее если монстра после определенного периода ожидания нету - высока вероятность того, что его убил другой игрок.

Получение объектов, сокровищ, или усилений, которые появляются только в ограниченный период фиксированных временных интервалов.

Вариативный интервал с ограниченным удержанием - первый ответ после вариативного интервала времени подкрепляется, обеспечивая осуществление реакции в течении заданного периода до его окончания.

Примеры:

Получение наград, объектов, или усилений которые появляются только на ограниченное время в случайный момент.

Ожидание респауна монстра в заполненном людьми онлайн мире - если монстр респаунится в вариативные интервалы времени игрок должен ожидать фиксированное количество времени чтобы убить монстра, тем не менее, если монстра нету после определенного периода ожидания - вероятно что его убил другой игрок.

Фиксированная длительность - чтобы быть подкрепленным, поведение должно осуществляться непрерывно на протяжении всего фиксированного временного интервала.

Примеры:

Игры с ограниченным временем на прохождение уровня. Для продвижения, игроку требуется постоянно проявлять активность на протяжении фиксированного периода, к примеру стрелять в инопланетян или зачищать все предметы на уровне.

Вариативная длительность - чтобы быть подкрепленным, поведение должно осуществляться непрерывно на протяжении всего вариативного интервала времени.

Примеры:

Симуляторы охоты. Игроку необходимо сидеть в засаде. Для успешного итога вариативной длительности поведение должно продолжаться неопределённое количество времени, и игрок должен продолжать сидеть в засаде в течении всего периода.

Симуляторы гонок. Игрок должен водить средство передвижения всю гонку, чтобы выиграть.

.3 Какой режим подкрепления является "наилучшим"

Если целью является генерация наибольшего количества повторений поведения в течении наибольшей длительности - в таком случае, осознанное применение режимов соотношения подкрепления является наилучшим способом. Кроме того, вариативное соотношение подкрепления демонстрирует более длительную сопротивляемость затуханию (снижению эффективности) любого режима подкрепления, и это означает, что возможно значительно увеличить время между подкреплениями без снижения количества ответов. Таким образом, осуществляя вариативное соотношение режима подкрепления, гейм-дизайнер может обуславливать игроков продолжать совершать поведение на протяжении очень долгих интервалов времени без получения какого-либо подкрепления Ferster, C. B. & Skinner, B. F. "Schedules of Reinforcement", 1957 New York: Appleton-Century-Crofts. . Неудивительно, что игры ,которые считаются как затягивающими, или которые становятся причиной зависимости более чем вероятно пользуются вариативным соотношением режима подкрепления. Это, как бы то ни было, не означает, что этот режим подкрепления - наилучший, и могут существовать веские причины для того, чтобы пользоваться другими коэффициентами режима подкрепления.

В то время как режимы соотношения подкрепления вырабатывают наибольший уровень ответов, не означает, что этот тип подкрепления является наиболее приятным для игрока. Работники на фабриках часто получают оплату согласно режиму соотношения, то есть их зарплата зависит от количества произведённых ими деталей. Владельцы фабрик предпочитают такой способ оплаты. Работники, однако, находят такой режим зарплаты нежелательным, потому что они заставляют их работать перенапрягаясь, оставляя их нервными и истощенными после рабочего дня. Давление профсоюзов часто приводит к смене режима заработка на почасовую систему, т.е. на режим длительности. Злоупотребление вариативным соотношением в игре может привести к тому, что игроки будут чувствовать себя перегоревшими, уставшими, и безрадостными независимо от их игрового опыта даже если они осознают что их вынуждают играть. Эта реакция - не то, чего хочет гейм-дизайнер для своих игроков. Дизайнер также желает использовать другие режимы подкрепления - интервальные, которые продолжат мотивировать игрока, но оставят его менее истощенным к концу игровой сессии.

Другие режимы подкрепления хорошо подходят для определенных ситуаций. Пока вариативное соотношение подкрепления - лучшее в поддержании поведения, фиксированное соотношение и режимы длительности - лучшие для усвоения новых видов подкрепления Ferster, C. B. & Skinner, B. F. "Schedules of Reinforcement", 1957 New York: Appleton-Century-Crofts. Экспериментаторы часто используют режим фиксированного соотношения, когда с самого начала научают поведению, и только потом переключаются на вариативный режим соотношения подкрепления. К примеру, во многих видеоиграх дизайнеру требуется сначала научить или натренировать игрока как играть в игру, и для этого фиксированное соотношение и режимы длительности - лучшие способы этого достичь.

На рисунке №5 показано сравнение динамики подкрепления поведения такими режимами как Вариативное соотношение, Фиксированное соотношение, Вариативный интервал и Фиксированный интервал. Как мы можем увидеть, количество ответов за временной период увеличивается при переходе от Фиксированного интервала к Вариативному интервалу, и от Фиксированного соотношения к Вариативному. Как уже было сказано выше, интервальные режимы имеют слабую сопротивляемость росту напряжения в системе, а следовательно им тяжелее вызывать всё более высокий уровень ответов. В дополнение, фиксированные интервалы вызывают пост-подкрепляемые паузы, таким образом они проигрывают вариативным режимам подкрепления по количеству повторений поведения Kazdin, A.E. Behavior Modification in Applied Settings, Belmont, Brooks/Cole, 1989.

.4 Система наград в типичных приключенческих видеоиграх

Типичная система совершенствования в играх, от ранних "ручка-бумага", таких как "Dungeons and Dragons", до таких РПГ как "World of Warcraft" и "Dark age of Camelot", в которых персонажи игрока должны улучшать свой уровень и способности. Чтобы получить уровень, персонажи должны заработать очки опыта, которые обычно даются за убийство монстров, или получение сокровища. Способности обычно получаются посредством практики, каждое успешное применение способности увеличивает шанс, что игрок станет лучше пользоваться этой способностью, или сам уровень способности повысится. В дополнение к убийству монстров и улучшению способностей, игроки могут получить объекты и сокровища, выучить новые заклинания, исследовать игровой мир, заводить друзей и достигать статуса.

Вариативные награды часто взаимосвязаны. Ниже даны примеры подобных событий.

Игроку может потребоваться получить определенный уровень, чтобы выучить новую способность или заклинание.

Наилучшие заклинания, броня и оружие позволяют игрокам убивать монстров, а следовательно получать опыт быстрее и легче.

Лучшие способности позволяют игрокам убивать более сильных монстров, и, создавать лучшее оружие, получать внутриигровую валюту, и т.д.

На высоких уровнях игроки могут убивать более сильных монстров, получая больше опыта и зарабатывать больше наград

Получение редкого или востребованного предмета и получение большего уровня увеличивает статус игрока в игре.

Для того, чтобы поддерживать дружеские отношения, игрок должен продвигаться по уровням с той же скоростью что и его друзья, иначе, они останутся позади (или наоборот) и не смогут пережить сражение с монстрами, которых их друзья берут на себя. Для игр без сетевой поддержки это также работает, но в другом виде социального подкрепления.

Для многих игроков достижение новых уровней (или продвижение по игре) и следственно увеличение статуса, становятся первостепенным подкреплением, и причиной, по которой они продолжают играть. Если достижение новых уровней будет простым, их ценность как подкрепления (за единицу) снизится. Игроки смогут быстро достичь максимального уровня, и статус получения самого высокого уровня снизится. Дизайнеры, следовательно, должны внедрить систему уровней, так, что достижение каждого уровня требует больших усилий, и получение высочайших уровней потребует огромного количества усилий.