안녕하세요.

이 글은 다음 질문에 대해 확실한 근거를 가지고 알아보고자 작성하였습니다.

15분 CS 지표가 과연 게임 승패에 얼마나 영향을 미칠까?


최근 이 통계 관련 자료가 핫하기에 이런 의문에 대해 논문과 명확한 데이터를 가지고 한번 알아보고자 합니다.


여러분은 어떻게 생각하시나요?

이에 대해 Ph.D 박사 학위를 가진, Raluca D. Gaina 라는 분이 쓴 <League of Legends: A Study of Early Game Impact>라는 논문을 통해 한번 그 결과를 나눠보도록 하겠습니다. 2018년에 작성되어 현 메타를 완벽히 반영하지는 못하겠지만 큰 틀에서 롤이란 게임은 대동소이 하므로 여전히 매우 의미있는 논문이라 볼 수 있습니다.

살펴볼 논문
- <League of Legends: A Study of Early Game Impact>(리그오브레전드: 초반 게임의 영향 연구>
- 작성: Ralluca D. Gaina. Ph.D
- Queen Mary University of London에서 Intelligent Games and Games Intelligence 분야로 박사 학위를 받음.
- 2018년 6월에 발표한 논문


자, 그럼 논문 내용 살펴보기 시작합니다.

논문 배경
이 논문의 가설(귀무가설)은 초반 지표가 게임 승패에 분명히 큰 영향을 끼칠 것이라고 생각하면서 생각을 이어나갑니다.

저자는 먼저 초반 Early game(여기서는 15분이 아닌 10분을 기준으로 했습니다)에서 4가지 지표를 추출하였는데요,

그 4가지 지표는 "경험치, 골드, 받은 피해량, CS점수" 입니다.

확실히 CS 잘 먹는게 게임 승률이 얼마나 영향을 끼치는지 알 수 있겠죠?


사용한 데이터
이 논문에서는 1,000개 솔로 랭크 게임을 바탕으로 분석을 했습니다. 이 중 듀오가 포함된 게임을 제거하여 793 게임을 반영했고, 한 게임에 각 포지션별 2명이 있으니(레드/블루), 각 포지션별로 2배수인 1586개의 데이터를 사용했습니다.

즉 탑 1586명, 미드 1586명... 을 분석한 결과라는 겁니다.



결론1: 각 포지션의 초기지표가 게임의 결과에 어떤 영향을 주는지

논문은 이렇게 말합니다. 

"승패와 관련된 큰 차이를 관찰할 수 없었다. 개별 선수들의 초기지표와 게임의 결과 사이에는 상관관계를 찾아 볼 수 없었다."
No significant difference was observed where winning and losing teams are concerned - this individual player correlation does not appear to be an indication for theoutcome of the game.


결론2: 4가지 지표와 승패 분석

그럼 실제로 4가지 지표가 승패에 어느 정도 영향을 미쳤는지 알아볼까요?



위 이미지는 논문의 일부를 캡쳐한 것인데, 각 포지션별로 "CS, 골드, 경험치, 받은 데미지"가 게임 승패애 얼마나 영향을 미쳤는지의 상관관계를 나타낸 겁니다.

아무 흥미로운 지표인데 한번 살펴 보자면,

정글
- CS: 0.0327 / Gold: 0.399/ XP: 0.178/ DT: 0.391
- 정글은 확실히 CS가 게임 승패와 큰 차이가 없습니다. 물론 지금은 메타가 좀 바뀌었지만, 어찌됐든 정글에게 가장 중요한 지표는 골드, 받은 데미지입니다. 그리고 좀 재미있지만 이때는 정글이 많이 맞아줄수록, 즉 탱킹을 잘 하는 것이 승패에 영향을 많이 끼침을 알 수 있습니다.

탑
- CS: 0.137 / Gold: 0.282 / XP: 0.411 / DT: 0.169
- 탑에게 가장 중요한 것은 바로 경험치였습니다. CS보다 3배 이상 승패에 영향을 주네요.

미드
- CS: 0.122 / Gold: 0.558 / XP: 0.154 / DT: 0.169
- 미드에게 가장 큰 영향을 주는 수치는 바로 골드였는데요, CS보다 4배 이상 승패에 영향을 줍니다.

서포터
- CS: 0.057 / Gold: 0.289 / XP: 0.349 / DT: 0.304
-  서포터에게 CS는 확실히 안 중요하다는 것이 나타납니다. 그리고 가장 중요한 수치는 경험치였습니다. 아마 빠르게 6렙을 찍는게 큰 영향을 끼치기 때문이 아닐까 하네요. 그리고 DT(받은 데미지) 수치도 꽤 영향이 높은 것이, 탱 서폿의 경우 탱을 잘 하는게 승리에 영향을 많이 미치기 때문이 아닐까 합니다.

원딜
- CS: 0.025 / Gold: 0.474 / XP 0.287 / DT: 0.214
- 원딜에게 가장 중요한 것은 골드네요. 여기서 정말 의외의 수치인게, 5개 포지션 중 원딜의 CS는 승패에 영향을 끼치는 정도가 가장 낮다는 겁니다. 원딜에게는 골드가 CS에 비해 18배 이상 중요했네요.

전체
- CS: 0.033 / Gold: 0.373 / XP: 0.178 / DT: 0.416
- 전 포지션 평균으로 봐도, 4가지 수치 중 CS가 압도적으로 승패에 영향을 덜 미침을 볼 수가 있습니다. 골드의 1/10도 안 되는 수치입니다.



논문의 결론

이 논문의 저는 처음 "초기 게임의 지표가 승패에 영향을 미칠 것이다."라고 생각하고 가정했다고 합니다(귀무가설). 그러나 이런 결과들을 통해 이렇게 결론을 내립니다.


"...경기 초반 성적이 승패에 미치는 영향, 그리고 전체 팀의 초반 성적이 승패에 끼치는 퍼포먼스 역시 우리의 귀무가설을 부인한다. 또한 낮은 상관관계로 우리의 가정을 검증할 수 없었다."
...The impact observed from the early game performance on the end game individual, as well as overall team performances rejects the null hypothesis, although the low correlation values do not confirm our hypothesis either.


즉 초기 게임의 지표가 통계학적으로 승패에 영향을 끼친다는 유의미한 데이터를 얻어내지 못했다는 거지요.

정리해봅시다.

- 초기 게임의 지표는 승패의 큰 영향을 끼치지 못한다.
- 그 초기게임의 4가지 지표 중에서도 CS지표는 가장 영향력이 낮다(전체 포지션으로 보면 다른 지표에 비해 1/10의 영향도 못주고, 가장 높은 영향을 주는 라인에서도 1/3 수준).

그래선 논문에서는 제안하기를,


"추가로, 심지어 CS는 초기 게임조차 원딜이랑 미드 쪽에서 큰 영향을 주지 못하기에 수동적으로 행동하는 것보다는 적극적으로 행동하는 것이 더 성공적일 것이다."
Additionally, the CS feature does not have a high impact in the “Carry” and “Mid” roles even in the early game, suggesting aggressive players to be more successful than passive ones"


고 말합니다. 탑과 서폿에 대해서는


"결과는 또한 제안하기를, 탑과 서폿의 경우 CS를 먹거나 골드를 버는 것보다 경험치를 얻어서 레벨업하는 것이 팀에 도움이 될 것이다."
The results also suggest that both the “Top” and “Support” roles should focus most on earning experience and levelling up to be able to better support their teammates, instead of their own CS or gold increase


라고 하네요.


영어가 되시는 분들은 이 논문을 천천히 뜯어 보시면 생각보다 재미 있는 부분이 많을 겁니다.

자, 최종 결론을 다시 말하고 글을 끝내겠습니다.



최종 결론
- 초반 지표는 게임 승패에 통계학적으로 유의미한 영향을 준다고 할 수 없다.
- 초반 지표 중에서도 CS 지표는 가장 낮은 영향력을 지닌다.


추가 자료 - 대회
위 자료는 솔랭 자료이고 대회와는 다르기 때문에 반박이 안 된다는 의견이 있어서 추가 자료를 첨부합니다. 저는 솔랭과 대회는 물론 다르지만, 솔랭에서 라인 격차로 겜 터지는 경우가 대회보다 훨씬 많기에, 오히려 대회가 라인전 영향이 더 적으면 적다고 가정하여 직접 조사를 해보았습니다.

아래 자료는 gol.gg 에 있는 "2020년 전 세계 모든 롤 프로들 2,185명의 2020년 대회 지표"를 가지고 만든 그래프입니다.



위 그래프 X축은 15분 CS 리드, 아래쪽은 골드 15분 리드. Y축은 둘 다 승률을 나타냅니다. 보시면 아시겠지만 15분 CS 리드율은 높든 낮든 승률에 거의 영향을 끼치지 않습니다. 아주 살짝 오른쪽으로 기울어져 있을 뿐이죠.

반면에 골드 같은 경우는 CS에 비해 더 영향이 큼을 알 수 있습니다. 

프로와 대회 역시, 15분 CS 리드율 같은 경우는 그냥 그래프에서 보듯이 고르게 분포가 되어 있기에, 통계적으로 승률에 유의미한 영향을 끼친다고는 보기 어려움을 알 수 있습니다.