[아카이브] 47가지 게임 매커니즘의 비밀

[Zerasion 4]

Voosco 님이 작성하셨던 포스팅의 아카이빙입니다.

---

어딘가에서 '재미를 느낄 수 있는 매커니즘을 모두 밝히겠다'라며 장기 프로젝트(?)를 하는 것도 봤는데, 
그 비슷한 개념으로 몇 가지 잘 알려진 매커니즘을 정리한 글이 있네요. 

http://www.looah.com/article/view/1120

[Zerasion 4]

moongstory 님이 작성하셨던 리플라이의 아카이빙입니다.

---

 

매우 좋은 번역글이라 자주 찾아봅니다. 일단 번역하신 분과 옮겨주신 분께 감사드립니다.

개인적으로 볼 때마다 잘 읽히지 않는 부분이 있어, 좀 고민해보니 원문 자체가 제대로 이해하지 않은채 써내려간 글로 보이더군요. 양질의 자료를 받은 감사에 부응하고자 저도 몇 가지 항목에 부연설명을 붙여봅니다. 

// 대부분 심리학적인 배경지식이 필요한 내용이라, 필요에 따라 주석을 넣었습니다. 

// 아래 사용되는 "강화(reinforcement)"의 의미는 '어떤 행동의 강도를 증가 또는 유지시키는 결과를 가져다주는 절차'로써, 행동주의 심리학에서 사용되는 용어입니다. 이 강화를 인챈트로 이해하시면 안됩니다;; 

 

5. Behavioral Momentum

 Definition: The tendency of players to keep doing what they have been doing.
 the tendency for behavior to persist following a change in environmental conditions. 

그리고 실제로 의미하는 바는, 
The greater the rate of reinforcement, the greater the behavioral momentum.

 행동주의 심리학에서 스키너의 중요한 이론 중 하나로, "강화(reinforcement)를 많이 받은 행동은 장애물에 부딪혔을 때 지속될 가능성이 높다"는 이론입니다. 
// 좀 더 설명하자면, 낮은 행동 가능성을 가진 특정 행동에 대해서 적절한 강화기법을 이행하면, 그 행동의 가능성을 높일 수 있다는 말입니다. 

 예컨대, 만약 유저들에게 매일 오후 6시마다 접속하면 대박상자 아이템을 하나씩 주는 것으로 유저를 강화시켰다면, 어떤 유저가 오후 6시에 갑작스럽게 중요한 미팅이 있었다 하더라도(장애물에 부딪힘), 그 유저는 여전히 게임에 접속할 가능성이 높습니다. 

물론 이전 경험에서 중요한 미팅으로 더 큰 강화를 받아왔다면 사정이 달라집니다.

애시당초 예시가 연속적 조건강화 스케쥴이라서 별로이긴 한데, 이 이유는 아래의 19번에서 설명합니다.

이를 활용한 또다른 테크닉으로는 '작은 모멘텀으로 행동변화를 만들기'로 시작해 '큰 모멘텀이 필요한 행동변화'까지 확대해가는 기법이 있습니다.

 

8. Chain Schedules

이것이 의미하는 바는 '강화 스케쥴의 연쇄를 활용하라'입니다. 강화 스케쥴은 여러 종류가 있는데, Fixed Ratio 스케쥴의 경우(이하 FR), 어떠한 환경에서 목표행동 n회 시마다 강화인을 제공하는 스케쥴을 의미합니다. Variable Interval스케쥴의 경우(이하 VI), 어떠한 환경에서 목표행동을 했을 때 약 (평균적으로) n시간(또는 분, 초)마다 강화인을 제공하는 스케쥴을 의미합니다. 원문에 있는 예시가 바로 이 두 개를 연결(어떤 강화스케줄이 완료되면, 다른 강화스케줄이 발동)하게 된 예를 말합니다.
'[몬스터]"오크" 10 마리 잡으면 던전 입구가 열린다.' + '약 30분에 한 번씩 던전에 [몬스터]"용"이 출현한다'
물론 원문에는 FR + FI를 썼지만, FI보다 VI가 더 효과가 좋다고 생각해서 각색을 했...

 

11. Contingency

이는 '수반성'을 의미합니다. 행동주의 심리학의 조작적 조건 형성 과정에서 <b>조작적 반응(행동)과 그에 대한 강화자극(a.k.a. 보상) 사이에는 반드시 강력한 상관이 있어야 한다</b>는 것을 강조하고 있습니다. 

원문에서는 three part paradigm of reward schedules라고 썼지만 강화 스케쥴 패러다임 측면에서는 세 부분의 패러다임 같은건 없고요, 

/굳이 말하자면 고전적 조건화를 제1패러다임으로, 조작적 조건화를 제2패러다임으로 구분할 수는 있겠지만 제3패러다임 같은건 없습니다./

 조작적 조건화를 기반으로 한 three-term contingency를 말하려고 한 것으로 보입니다. 그 세 가지는 바로 변별 자극, 조작적 반응, 강화인/처벌인을 말합니다. '조작적 반응과 강화인 사이에 반드시 수반성이 존재해야 한다'를 강조하고 싶었던 것으로 해석됩니다. 

//참고로, 수반성 이외에 근접성도 함께 확보가 되어야 완벽합니다. 근접성(continguity of reinforcement)이란 반응(행동)과 강화적 결과 사이의 시간을 말하는데, 이 시간이 짧을수록 강화학습이 빨리 일어납니다.

 

13. Cross Situational Leader-boards

랭킹 매카니즘으로 불공평한 기회를 제공하지 않도록 주의하라는 의미로 해석하고 있습니다. 
// 다른 해석을 하시는 분은 첨언 부탁 드립니다.

 

14. Disincentives

한국어 해석이 잘못되었습니다. 행동 변화를 유도하기 위해 패널티(또는 대안적 상황)를 사용하는 게임 요소를 말합니다. 
//아마도 번역하신 분께서 induce를 reduce로 착각하신 듯 합니다.

 

15. Endless Games

'정적인 상태 자체가 보상인 게임'인 부분에 대해 독자들 중 누군가는 '엔딩이 있는 게임을 말하는 건가?'라고 오해가 있을 것 같아 좀 더 부가설명을 붙입니다.

'고정된(하지만 긍정적인) 상태 자체가 보상인 게임'이 의미하는 바는, '게임이 끊임없이 변화되고 있기에 이를 바로잡아 정적인 상태로 만들어야 하는 게임'입니다. 이런 의미에서 끝이 없기 때문에 정의에 포함해 설명하고 있습니다. 

 

18. Extinction

심리학 용어 중 '소거'를 의미합니다. 이미 강화학습이 일어난 행동에 대해서 강화인이 더이상 주어지지 않을 때, 유기체(인간 포함)는 강화행동을 순간적으로 엄청 늘리다가(소거 폭발) 결국 그 행동을 멈춥니다(소거 완료). 애써 강화시켜놓은 행동이 다시 빈도수가 현저히 떨어지는걸 원치 않겠지만, 때로는 목표행동의 빈도를 줄여야 할 때도 있으므로, 소거 기법에 대해서도 잘 알아두면 좋습니다.

//물론 소거될 때 쯤에 강화인을 던져놓으면 간헐적 강화 스케줄(VR, VI)로 들어가버려 중독의 길로 빠져듭니다... 
'물욕 센서가 발동했다!'

 

19. Fixed Interval Reward Schedules

반응(=목표행동)을 했을 때, 정해진 시간이 지날 때마다 한 번씩 강화를 시키는 강화 스케줄입니다. 
일반적으로 "FI 3-s"식으로 표기하고, 첫 반응으로부터 3초 후에 강화가 발생하는 스케줄을 의미합니다. 

예시에서 팜빌의 30분 마다 작물이 나오는걸 강화스케줄로 설명하면 다음과 같습니다.
FI 30-min ; 수확 후 30분이 지나면 작물이 생긴다.
//여기서 '수확하기'는 기획자가 유저로하여금 빈도를 높이고자 하는 행동입니다. (조작적 반응)

 

20. Fixed Ratio Reward Schedule

"FR 5"라는 식으로 사용합니다. 예상하신대로, 5번의 반응마다 한 번씩 강화를 시키는 스케줄입니다. 문제는 강화를 받고 나서 다음 반응까지의 시간이 걸리는 문제가 있습니다. 그리고 이게 매번 싸이클마다 반복됩니다. 이 부분을 염두해두시고 이벤트 같은 기획을 하셔야 합니다.

//참고로, FR 1의 경우 CFR로 부르며, 가장 소거되기 쉬운 형태의 스케줄입니다. 

[몬스터]"장로"를 죽일 때마다 [아이템]"데이얀푸헬스"라는 엄청난 아이템이 반드시 나오다가(CFR) 
갑자기 어느순간부터 이 아이템이 안나오기 시작한다면(소거 시작), 
유저들이 [몬스터]"장로"를 엄청 찾아 죽이기 시작할겁니다. (소거 폭발)
그리고 얼마 후 [몬스터]"장로"는 유저들이 제일 잡지 않는 몬스터가 됩니다. (소거 완료)

이 시나리오를 다시 뒤집는, 모든 유저들이 장로만 눈에 불을 켜고 찾게되는 계기를 45번에서 설명합니다.

 

23. Interval Reward Schedule

Fixed Interval 강화 스케줄(FI, 8번에서 설명함)와 Variable Interval 강화 스캐줄(VI)로 나눠집니다.
VI스케줄은 '반응 후 평균적으로 n시간(혹은 분, 초) 후에 강화를 시키는 스케줄'을 의미합니다.
평균이란 의미는 예시를 보면 이해가 쉽습니다.
VI 5-min의 예: 
- 유저가 '무료 보물상자'를 엽니다. (반응) 
- 접속을 유지한채 2분이 지나자, (평균 5분의 인터벌 중 2분에 걸림)
- 다시 무료 보물상자가 제공 됩니다. (강화인 제공)
- 유저가 '무료 보물상자'를 엽니다. (강화 반응)
- 접속을 유지한 채, 이번엔 8분이 지납니다. (앞서 2분 + 8분의 평균은 기획자가 의도한 VI 5-min)
- 무료 보물상자가 제공됩니다. (강화인 제공)

이렇듯, 길게 보면 평균에 수렴하는 시간 인터벌로 반응과 강화 처치가 이뤄지는 스케줄을 의미합니다.

// FI가 좋을 때도 있지만, VI가 좋을 때도 있습니다. VI에 관심있으신 분들은 팀포트리스의 아이템 드롭 위키에 접속하셔서 그 시스템을 깊이 한 번 정독하시면 도움이 될 듯 합니다.

 

에고고... 넘나 기네요. 나머진 나중에 제가 맘 내킬 때 이어가겠습니다. (도망)
 

2017년 12월 20일 Zerasion님이 수정하였습니다.