설문 문항 수, 몇 개가 한계일까 — 설문 길이와 이탈률

설문이 길면 응답자가 중간에 나간다는 말은 누구나 합니다. 그런데 정작 몇 문항이 한계인지는 아무도 말해주지 않습니다. 결론부터 적으면, 이탈을 결정하는 것은 문항의 개수가 아니라 응답자가 느끼는 남은 시간입니다. 같은 20문항이라도 어떤 설문은 1분에 끝나고 어떤 설문은 7분이 걸립니다.

응답자는 '문항 수'를 세지 않는다

설문을 만드는 사람은 문항 번호를 기준으로 생각합니다. 하지만 응답하는 사람은 번호를 세지 않습니다. 대신 스크롤을 내리면서 끝이 보이는지를 봅니다. 이탈이 일어나는 순간은 대체로 셋 중 하나입니다.

• 도입문을 읽고 예상보다 부담스럽다고 느꼈을 때 — 시작조차 하지 않습니다
• 절반쯤 갔는데 진행률이 30%라고 표시될 때 — 남은 분량이 처음 예상을 배신한 경우입니다
• 갑자기 서술형 문항이 연달아 나올 때 — 여기서 손이 멈춥니다

세 경우 모두 문항 수 자체가 원인이 아닙니다. 예상한 길이와 실제 길이가 어긋난 것이 원인입니다. 그래서 길이 문제를 다룰 때는 문항을 몇 개로 줄일지가 아니라, 내 설문이 실제로 몇 분짜리인지부터 알아야 합니다.

문항마다 무게가 다르다

문항 수로 길이를 가늠하면 거의 항상 틀립니다. 객관식 단일선택은 읽고 누르면 끝나지만, 서술형 한 문항은 응답자에게 문장을 만들어내는 일을 시킵니다. 체감 부담은 비교가 되지 않습니다. 무거운 순서대로 대략 이렇습니다.

• 서술형(주관식) — 가장 무겁습니다. 답을 생각해내야 하고, 오타를 고치게 되고, 스스로 성의 없어 보일까 신경 씁니다
• 순위 매기기, 항목 배분 — 선택지 전체를 동시에 머리에 올려야 합니다
• 리커트 행렬(표 형태로 늘어선 척도 문항) — 한 화면에 여러 문항이 들어가 짧아 보이지만, 모바일에서는 가로로 잘리면서 가장 흔한 이탈 지점이 됩니다
• 복수선택 — 선택지를 끝까지 읽어야 해서 단일선택보다 확실히 깁니다
• 단일선택, 예/아니오 — 가장 가볍습니다

같은 15문항이어도 단일선택 15개짜리 설문과 서술형이 다섯 개 섞인 설문은 전혀 다른 물건입니다. 앞의 것은 1분, 뒤의 것은 5분이 넘어갈 수 있습니다.

내 설문이 몇 분짜리인지 재는 법

추정하지 말고 직접 재는 편이 정확합니다. 방법은 단순합니다.

• 완성된 설문 링크를 본인 휴대폰으로 엽니다. PC에서 재면 거의 반드시 과소평가합니다
• 스톱워치를 켜고 처음부터 끝까지 실제로 성의 있게 응답합니다. 서술형도 진짜로 씁니다
• 나온 시간에 1.5를 곱합니다. 만든 사람은 문항의 뜻을 이미 알고 있어서 남보다 빠르기 때문입니다

가능하면 주변 사람 한 명에게도 같은 방식으로 부탁해 재보세요. 만든 사람은 문항의 애매한 부분에서 멈추지 않지만, 처음 보는 사람은 거기서 몇 초씩 멈춥니다. 그 멈춤이 쌓인 값이 실제 소요시간입니다.

목적별로 감당 가능한 길이

맞썰 둘러보기에 올라오는 설문들은 소요시간이 카드에 함께 표시됩니다. 실제로 많이 쓰이는 구간이 그대로 현실적인 기준선입니다.

• 1분 이내 — 학교 과제, 간단한 인식 조사. 문항 다섯에서 열 개 남짓, 서술형 없음. 가장 많이 응답되는 구간입니다
• 3분 이내 — 시장조사, 포트폴리오 리서치, 문항이 조금 있는 과제. 여기까지는 큰 저항 없이 끝까지 갑니다
• 5분 이내 — 학위논문 설문의 현실적인 상한선입니다. 표준화된 척도를 여러 개 써야 하면 이 아래로 내리기 어렵습니다
• 그 이상 — 불가능하지는 않지만, 응답자 한 명을 얻는 비용이 눈에 띄게 올라간다는 것을 감수하고 시작해야 합니다

학위논문처럼 척도를 통째로 써야 하는 설문은 길이를 줄이는 데 한계가 있습니다. 검증된 척도에서 문항을 임의로 빼면 그 척도의 신뢰도를 더 이상 인용할 수 없기 때문입니다. 이럴 때는 척도를 건드리는 대신 그 밖의 모든 곳에서 줄여야 합니다.

길이를 줄이는 순서

막연히 줄이려 하면 정작 필요한 문항을 지우고 습관적으로 넣은 문항을 남기게 됩니다. 다음 순서로 훑으면 대체로 20~30%가 빠집니다.

• 분석 계획에 없는 문항을 지웁니다. 문항마다 "이 답을 받아서 결과에 무엇을 쓸 것인가"를 한 문장으로 적어봅니다. 적히지 않는 문항은 궁금해서 넣은 것이지 필요해서 넣은 것이 아닙니다
• 인구통계 문항을 정리합니다. 성별·연령·거주지·학력·직업·소득을 습관처럼 다 넣지만, 실제로 교차분석에 쓰는 것은 보통 한두 개입니다. 쓰지 않을 항목은 응답자에게 개인정보를 요구하는 대가만 치르는 셈입니다
• 서술형을 최소화합니다. 서술형 다섯 개 중 정말 인용하고 싶은 것은 대개 하나입니다. 나머지는 객관식으로 바꾸거나 지웁니다. 남기는 하나도 선택 응답으로 두는 편이 전체 완료율에 유리합니다
• 조건 분기를 씁니다. 해당 없는 사람에게까지 물어보는 문항이 있다면, 앞 문항의 답에 따라 건너뛰게 만듭니다. 전체 문항 수는 그대로여도 개인이 실제로 답하는 문항 수는 줄어듭니다
• 중복을 찾습니다. 표현만 다르고 같은 것을 묻는 문항이 서로 다른 문단에 흩어져 있는 경우가 많습니다

줄일 수 없다면, 끝까지 데려가는 방법

길이를 더 못 줄이는 설문도 있습니다. 그럴 때는 이탈 지점을 관리합니다.

• 도입문에 정직한 소요시간을 적습니다. 3분짜리를 1분이라고 적으면 시작은 늘지만 중간 이탈이 늘고, 무엇보다 다음번에 그 사람이 다시 응답해주지 않습니다
• 첫 세 문항은 가장 쉬운 것으로 배치합니다. 시작하자마자 어려운 문항이 나오면 아직 아무것도 투자하지 않은 상태라 미련 없이 나갑니다
• 인구통계는 뒤로 미룹니다. 첫 화면부터 나이와 직업을 묻는 설문은 응답자 입장에서 정보를 받아가는 인상부터 줍니다
• 진행률 표시를 켭니다. 남은 길이가 보이면 같은 길이라도 체감이 다릅니다
• 필수 응답을 남발하지 않습니다. 답하기 곤란한 문항 하나가 필수로 걸려 있으면 그 지점에서 설문 전체가 끝납니다
• 모바일에서 한 번 더 확인합니다. 리커트 행렬이 가로로 넘치는지, 선택지 글자가 두 줄로 깨지는지는 PC에서 보이지 않습니다

길이는 배포 단계에서도 작동한다

설문 길이는 응답 중에만 영향을 주는 것이 아닙니다. 맞썰처럼 설문 목록을 보고 응답자가 직접 고르는 곳에서는, 소요시간이 참여를 결정하는 조건으로 먼저 노출됩니다. 대상 연령과 소요시간을 보고 열어볼지 말지를 정하기 때문에, 긴 설문은 응답 화면에 도달하기 전에 이미 후보에서 빠집니다.

맞썰에서는 지금까지 맞설문 요청 2,055건이 오갔고, 최근 14일 동안에만 1,000건이 오갔습니다. 그만큼 많은 사람이 다른 사람의 설문을 하나씩 열어보고 있다는 뜻이고, 동시에 하나를 열어볼 때마다 다른 하나는 지나쳤다는 뜻이기도 합니다. 문항을 다섯 개 덜어내는 일은 설문 품질을 깎는 일이 아니라, 그 선택의 순간에 살아남는 일에 가깝습니다.

정리

• 이탈을 만드는 것은 문항 수가 아니라 예상과 실제 길이의 차이입니다
• 문항마다 무게가 다릅니다. 서술형과 리커트 행렬이 가장 무겁습니다
• 길이는 추정하지 말고 휴대폰으로 직접 재고, 잰 시간에 1.5를 곱합니다
• 과제·시장조사는 3분 이내, 학위논문은 5분 이내가 현실적인 선입니다
• 줄일 때는 분석 계획에 없는 문항, 쓰지 않을 인구통계, 인용하지 않을 서술형 순으로 지웁니다
• 못 줄이면 정직한 소요시간 안내, 쉬운 첫 문항, 진행률 표시로 이탈 지점을 관리합니다

본문에 인용한 수치는 맞썰에서 오간 맞설문 요청 집계값이며, 2026년 8월 30일 기준입니다.