[UX 방법론/스터디] 카드소팅 테스트 정량적 분석법

 

박은정, 서종환. (2008). 카드 소팅 테스트를 위한 정량적인 분석 기법의 개발. 디지털 디자인학 연구, 8(1), 111-121. 를 스터디하며 정리한 글입니다.

 

✳️이전 글 ✳️

[UX 방법론/스터디] 카드 소팅과 덴드로그램 그룹화

 

---

 

기존 카드소팅 테스트에는 몇 가지 문제점이 있습니다.

 

① 정량적인 수준에서 세부적으로 비교 불가하다.
② 단순히 정성적인 수준에서 활용되기 때문에 문제점과 개선방향을 파악해내는 데에 있어 디자이너 개인의 경험과 통찰력에 의존한다.

 

-

기존 카드소팅의 한계점을 극복하고자 박은정, 서종환. (2008)에서는 열린 카드 소팅과 닫힌 카드 소팅에 따른 정량적 분석법을 제안합니다. 

 

열린 카드소팅	닫힌 카드 소팅
카드만 주어지고 카테고리는 피실험자 마음대로 정할 수 있음.	카테고리가 주어지고 피실험자는 카드를 카테고리에 맞춰 조합함.
- 미리 정해진 이름이 없는 메뉴 아이템들을 실험 참가자가 원하는 대로 카테고리를 만들어 분류 후 이름을 붙이는 방법 - 참가자의 다양한 정보 분류 체계를 확인할 수 있지만 서로 다른 분류 결과에서 특정한 패턴을 찾아내기 어려움.	- 주어진 메뉴 아이템들을 주어진 카테고리 중 선택해 분류하는 방법 - 열린 카드 소팅보다 명확한 결과를 얻을 수 있음. - 카드 명칭과 설명이 적절하지 않으면 오히려 결과의 신뢰도가 떨어짐.

 

---

 

 

1. 닫힌 카드 소팅 분석법

→ 메뉴 카테고리 적합도와 카테고리 매칭률을 중심으로

메뉴 카테고리 적합도 = 해당 메뉴를 해당 카테고리로 분류한 피실험자 수 / 전체 피실험자 수 X 100

 

Step 1

피실험자들이 각 메뉴들을 어느 카테고리로 분류했는지를 정리한 후 메뉴별로 피실험자들이 가장 많이 선택한 카테고리를 찾아낸다. 해당 카테고리를 선택한 피실험자의 수가 전체 피실험자 수에 차지하는 백분율을 계산하여 카테고리 적합도로 활용한다.

 

 

 

Step 2

카테고리 적합도를 기반으로 가장 많이 선택된 각 카테고리들을 재배치한 후 카테고리 평균을 내어 카테고리 매칭률을 산출한다.

 

 

 

Step 3

기존 메뉴구조의메뉴 구조의 매칭률과 재배치된 메뉴 구조의 카테고리 매칭률을 비교함으로써 카드 소팅테스트 결과에 따라 메뉴구조가 얼마나 개선되었는지를 정량적으로 분석한다.

 

 

---

 

 

2. 열린 카드소팅 분석법

→ 메뉴 간 적합도와 메뉴 매칭률을 기반으로

 

메뉴 간 적합도 = 해당 메뉴가 기준이 된다고 분류한 메뉴 수 / 전체 메뉴 수 X 100

 

Step 1

피실험자들이 메뉴들을 어떻게 분류하였는지 파악하여 모두 작성한다.

 

 

Step 2

그 후 기준이 되는 메뉴별로 타 메뉴들을 몇 번이나 함께 분류했는지 그 수를 찾아낸다.

 

 

Step 3

메뉴 간 적합도가 비교적 높은 쪽으로 이동시켜 재배치한 후, 기존 메뉴 구조의 메뉴 간의 매칭률과 재배치된 메뉴간의 구조의 메뉴간의 매칭률을 비교함으로써 개선 정도를 정량적으로 분석한다.

메뉴간 매칭률 = 재배치된 메뉴구조의 메뉴들 간의 적합도 평균

 

 

---

 

3. 그룹 간 유사도 분석 활용하기

스포카에서는 카드 소팅 결과 얻어낸 정보 뭉치들의 패턴을 확인하고자 유사도 분석을 실시했다. 대량의 데이터 분석 시 SPSS를 사용기도 하지만, 표집이 적어 유사도 분석을 직접 그려 그룹 패턴을 파악했다. (표집은 적었으나 눈으로 패턴을 확인하기 어려울 때 사용한다면 좋을 것이다.) 1점 만점을 기준으로 1에 가까울수록 그룹 간 유사도가 높은 것을 확인할 수 있다. 이를 통해 개선된 메뉴 구조를 도출할 수 있다.

 

 

자세한 방법 👇

https://spoqa.github.io/2016/09/26/card-sorting-analysis.html

 

카드 소팅 분석기

 

 

다음과 같은 분석론을 통해 기존 카드 소팅이 갖고 있는 한계점을 극복할 수 있다. 논리적으로, 이해하기 쉽게 숫자를 설명한다면 내 옆자리의 동료와 임원들을 설득할 수 있다.

 

 

참고

- https://spoqa.github.io/2016/09/26/card-sorting-analysis.html
- 박은정, 서종환. (2008). 카드 소팅 테스트를 위한 정량적인 분석 기법의 개발. 디지털 디자인학 연구, 8(1), 111-121.

 

 

---