스피더 탐지: 빠른 응답 자동 검출로 데이터 품질 보호

응답 시간이 비정상적으로 짧은 응답자를 자동으로 탐지해 데이터 품질을 지키는 기능. 검출 기준, 플래그 관리, 집계 제외 방법을 정리합니다.

스피더란 조사표의 내용을 거의 읽지 않고 극단적으로 짧은 시간에 응답을 완료해 버리는 응답자를 가리킵니다. 보수 목적의 대충 응답이나 봇 같은 자동 입력의 징후로서 나타나므로, 데이터 품질을 지키는 데 있어서 가장 기본적인 부정 탐지 항목입니다.

탐지 구조

kicue에서는 다음의 심플하고 견고한 규칙으로 스피더를 판정합니다.

  • 임곗값 = 문항 수 × 3초
  • 조사 전체의 응답 소요 시간이 이 임곗값을 밑도는 경우에 스피더 플래그가 세워집니다

예를 들어 30 문항의 조사라면 90초 미만, 50 문항의 조사라면 150초 미만이 임곗값입니다.

어떤 때에 효과적인가

  • 조사 회사의 패널을 이용하고 있어 보수 목적의 대충 응답이 섞여 들어갈 리스크가 있다
  • 확산형 WEB 조사로 관심 없이 스쳐 지나가며 응답되는 것을 피하고 싶다
  • 매트릭스 문항이 많고 신중한 독해가 전제가 되는 조사

플래그의 상태

탐지된 응답에는 다음 상태가 부여됩니다.

  • pending(미확인): 탐지 직후의 기본 상태
  • confirmed(확정): 관리자가 "부정으로 판정"한 것
  • dismissed(기각): 관리자가 "문제없음"으로 판정한 것

모니터링 화면에서의 확인

모니터링 화면의 플래그 목록에서 스피더 탐지 결과를 확인할 수 있습니다.

  • 응답자별 소요 시간
  • 탐지 시각
  • 로 응답으로의 링크

집계에서의 제외

confirmed 상태의 스피더는 집계의 부정 제외 토글을 ON으로 함으로써 집계에서 제외할 수 있습니다. 자세한 내용은 플래그 관리와 집계 제외를 참고하세요.