[R] Cohen's kappa, Fleiss' kappa / 코헨의 카파 상관계수, 플레이스 카파 상관계수

• 코헨의 카파 상관계수

: 두 명의 관찰자(또는 평가자)의 신뢰도를 확보하기위한 확률로서 평가지표로 사용되는 상관계수이다.

 

• 플레이스 카파 상관계수

: 두 명 이상에서 신뢰도를 얻기위해서는 플레이스 카파 상관계수(Fleiss' kappa)를 사용할수있다.

 

코헨의 카파 상관계수에 관한 정보는 많이 있는데 내게 필요한건 플레이스 카파 상관계수라서

한 번 정리해보았다.

 

두 명 이상의 관찰자 간 일치도 계산(intra/inter-observer)하는 방법인데

R에 라이브러리로 구현되어있어서 데이터를 넣어주기만 하면된다.

#패키지 설치
install.packages("irr")
 
#패키지 불러오기
library(irr)
 
#csv데이터가져오기
data <- read.csv("filename.csv", stringsAsFactors = FALSE)
 
#데이터 기본 통계 보기
str(data)
 
#데이터의 Fleiss' Kappa 계산
kappam.fleiss(data)
 
#a table with category-wise kappas and the corresponding test statistics
kappam.fleiss(data, detail=TRUE)

 

플레이스 카파 k 해석 기준

플레이스 카파는 SPSS 26이상 버전이면 SPSS에서도 구현가능하고,

SPSS 25이하 버전이라도 플러그인 설치하면 된다. SPSS 사용하는 방법은 나중에 정리되면 포스팅 예정이다.