논문설문조사, 왜 항상 시간이 모자랄까
대학원생이나 연구원들이 가장 많이 하는 하소연이 “설문조사 때문에 논문 일정이 밀린다”입니다. 저는 현장에서 논문설문조사 의뢰를 수백 건 받아봤는데, 실제로 응답 수집 단계에서 예상보다 2~3배 시간이 걸리는 경우가 다반사입니다. 특히 300명 응답을 목표로 할 때, 처음 계획한 3주가 6주로 늘어나는 일은 흔합니다.
왜 그럴까요? 대부분 응답자 모집 경로를 과소평가합니다. “학과 게시판에 올리면 금방 모이겠지”라는 생각으로 시작하지만, 실제로 학과 게시판의 하루 유입은 많아야 50명 수준이고, 그중 설문에 응답하는 비율은 10% 미만입니다. 300명을 모으려면 최소 3,000명에게 노출해야 한다는 계산이 나옵니다.
또 하나는 응답률 하락입니다. 온라인 설문 링크를 받은 사람 중 실제로 끝까지 응답하는 비율은 평균 15~20%에 불과합니다. 이메일로 발송할 경우 5%까지 떨어지기도 합니다. 이런 현실을 모르고 일정을 잡으면 마감일이 코앞인데 응답자는 100명도 안 되는 상황을 맞게 됩니다.
저는 이런 문제를 겪는 의뢰인에게 항상 묻습니다. “응답자에게 어떤 동기를 제공하고 있나요?” 대부분은 아무런 보상이 없습니다. 무보상 설문의 완료율은 보상이 있을 때보다 30% 이상 낮습니다. 작은 인센티브 하나가 전체 일정을 단축시키는 열쇠가 됩니다.
응답률을 좌우하는 세 가지 변수: 대상, 채널, 타이밍
논문설문조사에서 응답률을 결정짓는 핵심 요소는 크게 세 가지입니다. 첫째, 대상자 선정입니다. 무작위로 링크를 뿌리는 것보다 특정 조건(예: 20대 대학생, 수도권 거주 직장인)을 명확히 하고 그에 맞는 커뮤니티나 오픈채팅방을 공략해야 합니다. 예를 들어 “20대 여성 소비자”를 대상으로 할 때, 대학가 카페보다 뷰티 관련 설문지만들기 온라인 카페에서 응답률이 2배 이상 높았습니다.
둘째, 채널의 특성입니다. 이메일은 공식적이지만 개봉률이 낮고, SNS는 빠르지만 스팸으로 인식되기 쉽습니다. 최근에는 전문 설문 패널 서비스를 이용하는 경우가 많은데, 비용은 들지만 300명 기준 2~3일 내에 완료되는 경우도 있습니다. 다만 패널의 경우 응답의 성실도가 떨어질 수 있어 주의해야 합니다.
셋째, 타이밍입니다. 설문 발송 시간대에 따라 응답률이 달라집니다. 직장인 대상이라면 점심시간 직후(12:3013:30)나 퇴근 후(18:0020:00)가 효과적입니다. 학생 대상은 공강 시간이나 저녁 시간대가 좋습니다. 같은 링크라도 발송 시간만 바꿔도 응답률이 10~15%포인트 차이 나는 것을 여러 번 확인했습니다.
이 세 가지를 동시에 고려하지 않으면, 아무리 좋은 설문 문항을 만들어도 응답 수를 채우기 어렵습니다. 실제로 한 의뢰인은 대상은 잘 선정했지만 발송 시간을 오전 9시로 고정해 직장인 응답률이 4%에 그친 사례가 있었습니다. 오후 7시로 바꾸자 같은 조건에서 12%로 올랐습니다.
300명에서 3주로: 실제로 줄인 방법
작년에 진행한 한 논문설문조사 프로젝트가 기억납니다. 의뢰인은 심리학 석사 과정생으로, 300명의 대학생 응답이 필요했고 마감까지 4주가 남아 있었습니다. 처음 계획은 온라인 커뮤니티와 학교 게시판에 링크를 올리는 것이었지만, 2주가 지나도 응답자는 90명에 불과했습니다.
그때 제가 제안한 방법은 세 가지였습니다. 먼저, 응답자에게 소정의 기프티콘(편의점 3,000원)을 제공했습니다. 예산은 총 90만 원(300명×3,000원)이었지만, 이 비용으로 2주 만에 210명의 추가 응답을 받을 수 있었습니다. 두 번째로, 설문 링크를 단축 URL로 바꾸고, 첫 화면에 “소요시간 3분”이라는 문구를 넣었습니다. 완료율이 눈에 띄게 올랐습니다. 세 번째로, 주중 저녁 7시에 맞춰 링크를 발송하고, 2일 후 리마인드 메시지를 보냈습니다.
결과적으로 3주 만에 300명을 채웠고, 의뢰인은 논문 일정을 맞출 수 있었습니다. 물론 모든 프로젝트에 이 방법이 통하는 것은 아닙니다. 하지만 응답률을 높이는 가장 확실한 방법은 “응답자가 왜 이 설문에 참여해야 하는가”에 대한 명확한 답을 주는 것입니다. 금전적 보상이 아니더라도, 결과 요약본을 제공하거나 추첨을 통해 상품을 주는 것도 효과적입니다.
또 하나 간과하기 쉬운 점은 설문 문항 수입니다. 20문항이 넘어가면 완료율이 급격히 떨어집니다. 꼭 필요한 문항만 남기고 10~15문항으로 줄이는 것만으로도 완료율이 20% 이상 올라가는 경우가 많습니다.
비용과 기간, 숫자로 비교해보면
논문설문조사를 의뢰할 때 가장 궁금한 것이 비용과 기간입니다. 제가 경험한 바로는 크게 세 가지 방식이 있습니다.
첫째, 직접 모집하는 방법입니다. 비용은 거의 들지 않지만(기프티콘 비용 정도), 300명 기준 평균 6~8주가 걸립니다. 응답자와의 커뮤니케이션, 독려, 데이터 정제까지 직접 해야 하므로 시간 부담이 큽니다.
둘째, 전문 리서치 회사에 의뢰하는 방법입니다. 300명 기준 150만300만 원 정도의 비용이 발생하지만, 23일 내에 응답이 완료됩니다. 다만 패널의 특성상 응답의 질이 균일하지 않을 수 있고, 설문 문항에 따라 추가 비용이 발생할 수 있습니다.
셋째, 하이브리드 방식입니다. 일부는 패널로 채우고, 일부는 직접 모집하는 방법입니다. 예를 들어 200명은 패널(비용 100만200만 원), 100명은 직접 모집(23주)으로 하면 총 3~4주에 완료할 수 있고, 비용도 절충할 수 있습니다. 실제로 한 의뢰인은 이 방법으로 4주 만에 300명을 모으고, 비용은 120만 원으로 줄였습니다.
어떤 방법이 좋을지는 연구의 특성에 따라 다릅니다. 응답자의 대표성이 중요한 연구라면 직접 모집이 낫고, 시간이 촉박하다면 패널을 활용하는 것이 현명합니다. 다만 패널을 사용할 경우, 응답자 구성이 연구 대상과 일치하는지 반드시 확인해야 합니다. 한 번은 패널을 통해 받은 응답 중 30%가 대상 연령이 아닌 경우가 있어 데이터를 다시 수집한 적도 있습니다.
가장 흔한 실수: ‘응답자 수’만 채우면 된다는 착각
논문설문조사에서 가장 위험한 실수는 목표 응답자 수만 채우면 된다고 생각하는 것입니다. 저는 이 함정에 빠진 의뢰인을 여러 번 봤습니다. 300명을 채웠는데, 막상 데이터를 열어보니 불성실 응답이 30%가 넘는 경우입니다. 한 문항을 1초 만에 찍고 지나간 응답, 모든 문항에 동일한 번호를 선택한 응답, 주관식에 “없음”만 적은 응답 등입니다. 이런 데이터는 분석 단계에서 걸러내야 하고, 결국 추가 모집이 필요해집니다.
이를 방지하려면 설문 설계 단계에서 장치를 마련해야 합니다. 예를 들어, 중간에 “이 문항은 3번을 선택해주세요”와 같은 주의 문항을 넣거나, 응답 시간을 측정해 비정상적으로 빠른 응답을 표시하는 기능을 활용하는 것입니다. 또한 주관식 문항을 1~2개 포함해 응답의 성실성을 가늠할 수 있습니다.
또 다른 실수는 표본의 대표성을 무시하는 것입니다. 300명을 모았더라도 특정 성별이나 연령에 치우쳐 있으면 연구 결과를 일반화하기 어렵습니다. 예를 들어, 온라인 커뮤니티에서만 모집할 경우 20대 남성 비율이 과도하게 높아질 수 있습니다. 이를 보정하려면 모집 단계에서부터 할당 표집(quota sampling)을 고려해야 합니다.
결국 논문설문조사의 성패는 “얼마나 빨리, 얼마나 많이”가 아니라 “얼마나 신뢰할 수 있는 데이터를 확보했는가”에 달려 있습니다. 시간과 비용을 줄이더라도 데이터의 질을 담보할 수 있는 최소한의 장치는 반드시 갖춰야 합니다. 그렇지 않으면 300명을 채우는 데 성공해도 논문의 신뢰성을 잃을 수 있습니다.
자주 묻는 질문
논문설문조사 비용은 얼마인가요?
300명 기준으로 직접 모집하면 기프티콘 비용 등 30만90만 원, 전문 리서치 회사에 의뢰하면 150만300만 원 정도입니다. 패널을 일부 활용하는 하이브리드 방식은 100만~200만 원 선에서 가능합니다. 비용은 응답자 수, 대상의 특수성, 설문 문항 수에 따라 달라지므로 여러 업체에 견적을 비교해보는 것이 좋습니다.
논문설문조사 응답자 수는 몇 명이 적당한가요?
연구 방법론에 따라 다르지만, 학부 논문은 보통 100200명, 석사는 200300명, 박사는 300명 이상을 목표로 합니다. 통계적 검정력을 고려하면 최소 150명 이상이 안전합니다. 다만 질적 연구나 특수한 대상인 경우에는 인원보다 응답의 깊이가 더 중요할 수 있습니다.
논문설문조사 대행 업체를 이용해도 되나요?
가능합니다. 다만 학교나 학회의 연구윤리 규정을 확인해야 합니다. 일부 기관은 대행 업체를 통한 데이터 수집을 허용하지만, 응답자에게 연구 목적과 개인정보 활용에 대한 동의를 반드시 받아야 합니다. 또한 대행 업체가 제공하는 표본이 연구 대상과 일치하는지 검토하는 것이 중요합니다.
설문 문항을 다 만들고 나서야 고민이 시작되는 이유
석사 논문을 준비하는 연구자들이 가장 많이 하는 착각이 있습니다. 설문지는 자기가 만들고, 배포와 수집만 업체에 맡기면 된다는 생각입니다. 실제로 상담을 해보면 문항은 이미 40개가 넘는데, 이걸 그대로 돌려도 되는지 확신이 없어서 연락을 주는 경우가 대부분입니다. 문항이 확정되지 않은 상태에서 견적을 요청하면 업체는 응답자 수와 문항 수만 보고 금액을 부릅니다. 그런데 막상 수집이 시작되면 응답자들이 중간에 포기하는 비율이 20~30%에 달합니다. 40문항짜리 설문을 끝까지 완주하는 사람이 생각보다 적다는 뜻입니다.
제가 작년에 상담한 한 대학원생은 문항 55개짜리 설문으로 300부를 목표로 했습니다. 예산은 150만 원 정도를 생각하고 있었죠. 그런데 실제로 견적을 받아보니 300부 수집에 280만 원이 나왔습니다. 이유는 간단했습니다. 문항이 많으면 응답자 한 명을 모으는 단가가 올라갑니다. 업체 입장에서는 응답자에게 지급하는 리워드가 커지고, 중간 이탈자를 보정하기 위한 추가 모집 비용도 발생하기 때문입니다. 결국 그 연구자는 문항을 35개로 줄이고, 리커트 5점 척도를 7점으로 바꾸면서 응답 시간을 단축시켜 190만 원에 마무리했습니다. 문항 수를 20개 줄이는 것만으로 90만 원이 절약된 셈입니다.
논문설문조사를 의뢰할 때 가장 먼저 결정해야 할 것은 ‘얼마를 쓸 수 있는가’가 아니라 ‘내가 지금 가진 문항으로 응답자가 끝까지 답할 수 있는가’입니다. 저는 보통 문항 수가 30개를 넘어가면 응답 시간을 체크해보라고 권합니다. 예비 테스트로 주변 사람 5명에게 풀게 해보면 평균 몇 분이 걸리는지 금방 알 수 있습니다. 10분이 넘어가면 응답률이 급격히 떨어집니다. 온라인 설문에서 10분은 꽤 긴 시간입니다. 모바일로 답하는 사람이 절반 이상인 요즘, 5분 안에 끝나는 설문이 완주율 70%를 넘고, 10분을 넘기면 40% 아래로 떨어지는 걸 여러 번 봤습니다.
문항을 줄이는 게 어렵다면 척도를 바꾸는 방법도 있습니다. ‘매우 그렇다’부터 ‘전혀 그렇지 않다’까지 7단계로 나누면 응답자가 고민하는 시간이 길어집니다. 5단계로 줄이면 평균 응답 시간이 15~20% 짧아집니다. 물론 연구 설계상 7점 척도가 필요할 수도 있습니다. 그럴 때는 문항 수를 그만큼 줄여야 합니다. 예산과 응답률, 두 가지를 동시에 잡으려면 결국 문항과 척도 사이에서 타협점을 찾아야 합니다.
표본 300명과 500명, 비용 차이보다 중요한 것
논문설문조사 견적을 문의하면 가장 먼저 나오는 질문이 “몇 명 필요한가요?”입니다. 연구자가 “300명이요”라고 답하면 업체는 바로 단가를 계산합니다. 그런데 정말 300명이어야 할까요? 모집단이 명확하지 않은 상태에서 숫자부터 정하는 경우가 너무 많습니다. 저는 상담할 때 항상 이렇게 되묻습니다. “이 300명이 무엇을 대표하나요?” 대부분은 대답을 못 합니다. 그냥 선행연구에서 300명을 썼기 때문에, 또는 지도교수가 300명 이상을 권했기 때문에 숫자를 정했다고 합니다.
표본 크기는 연구 목적과 분석 방법에 따라 달라집니다. 단순 빈도 분석이나 기술통계가 목적이라면 200명으로도 충분한 경우가 많습니다. 반면 구조방정식이나 회귀분석을 돌릴 계획이라면 변수 수에 따라 최소 250400명이 필요합니다. 예를 들어 독립변수 5개, 매개변수 2개, 종속변수 1개를 설정한 연구라면 최소 300명은 확보해야 검정력이 나옵니다. 여기에 불성실 응답 1015%를 제외할 것을 감안하면 실제로는 350명 이상을 모집해야 합니다. 업체에 300명을 요청하면 300명의 유효 응답을 받는 게 아니라 300명에게 발송하고 그중 유효 응답이 250명 남짓 나올 수 있다는 점도 알아야 합니다.
비용은 표본 크기에 정비례하지 않습니다. 300명과 500명의 견적 차이는 대략 30~40% 수준입니다. 300명에 200만 원이라면 500명은 280만 원 정도입니다. 왜 선형이 아닐까요? 응답자 모집 단가가 수량이 늘어날수록 조금씩 낮아지기 때문입니다. 하지만 여기서 간과하기 쉬운 것이 있습니다. 표본을 무작정 늘리면 오히려 분석이 어려워질 수 있습니다. 응답자 수가 많아지면 사소한 차이도 통계적으로 유의하게 나옵니다. 500명 데이터에서 p값이 0.04가 나왔다고 해서 그 효과가 실질적으로 중요한 것은 아닙니다. 300명으로도 유의성을 확보할 수 있는 효과 크기라면 굳이 500명을 고집할 이유가 없습니다.
제가 아는 한 박사과정 연구자는 800명을 목표로 설문을 돌렸습니다. 예산은 400만 원이 넘었죠. 그런데 막상 분석을 해보니 연구 가설을 검증하는 데 필요한 건 300명이면 충분했습니다. 나머지 500명 데이터는 분석에 제대로 쓰이지도 못했습니다. 표본이 크면 논문 심사에서 유리할 것이라는 기대가 있었지만, 심사위원들은 표본 크기보다 표본의 대표성과 분석의 적절성을 더 봅니다. 무작위 표집이 되지 않은 800명보다, 모집단 특성을 잘 반영한 300명이 훨씬 설득력 있습니다.
결국 표본 크기는 ‘몇 명을 모을 수 있나’가 아니라 ‘몇 명이면 내 분석을 뒷받침할 수 있나’로 접근해야 합니다. G*Power 같은 도구로 필요한 표본 수를 미리 계산해보는 걸 권합니다. 효과 크기 0.3, 유의수준 0.05, 검정력 0.95를 기준으로 하면 회귀분석에서 필요한 표본이 대략 150~200명으로 나오는 경우도 많습니다. 물론 이 숫자는 변수 수와 연구 설계에 따라 달라지니, 지도교수와 상의해서 최종 결정을 내리는 게 안전합니다.
온라인 패널과 직접 배포, 어디에 돈을 써야 할까
설문 수집 방법은 크게 두 가지로 나뉩니다. 전문 패널 업체를 통해 응답자를 모집하는 방식과 연구자가 직접 링크를 뿌리는 방식입니다. 비용 차이는 상당합니다. 패널 업체를 이용하면 응답자 1명당 5,00010,000원을 지불합니다. 300명이면 150만300만 원입니다. 반면 직접 배포는 비용이 거의 들지 않습니다. 커뮤니티에 링크를 올리거나 지인에게 부탁하면 됩니다. 그런데 왜 사람들은 돈을 내고 패널을 쓸까요?
첫째는 속도입니다. 직접 배포로 300명을 모으려면 보통 36주가 걸립니다. 패널 업체는 조건에 맞는 응답자를 보유하고 있어서 37일이면 목표를 채웁니다. 둘째는 표본의 통제 가능성입니다. 연구자가 ‘20대 여성, 수도권 거주, 대학생’ 같은 조건을 걸면 패널 업체는 그 조건에 맞는 사람만 모아줍니다. 직접 배포로는 이런 조건을 맞추기가 거의 불가능합니다. 셋째는 데이터 품질입니다. 패널 업체는 응답자에게 일정한 리워드를 지급하기 때문에 중간에 포기하는 비율이 낮고, 불성실 응답을 걸러내는 시스템을 갖추고 있는 경우가 많습니다.
하지만 패널 조사가 항상 정답은 아닙니다. 연구 주제가 특수하거나 모집단이 매우 좁다면 패널로는 접근이 어렵습니다. 예를 들어 ‘희귀질환 환자 가족’이나 ‘특정 산업 종사자’를 대상으로 하는 연구라면 패널 업체에 해당 논문설문조사 조건의 응답자가 거의 없습니다. 이럴 때는 커뮤니티나 협회를 통해 직접 접근하는 수밖에 없습니다. 제가 상담했던 한 연구자는 ‘반려동물 장례 서비스 이용 경험자’를 대상으로 설문을 해야 했는데, 패널 업체 세 곳에서 모두 불가능하다는 답변을 받았습니다. 결국 반려동물 관련 카페와 커뮤니티 12곳에 직접 배포해서 6주 만에 250명을 모았습니다. 비용은 30만 원(소정의 기프티콘)으로 끝났습니다.
직접 배포의 가장 큰 약점은 응답률입니다. 링크를 100명에게 보내면 실제 응답은 10~20명 정도입니다. 10% 안팎도 흔합니다. 특히 온라인 커뮤니티에 올린 링크는 하루가 지나면 묻힙니다. 그래서 직접 배포를 할 때는 ‘리마인드’ 전략이 필수입니다. 일주일 간격으로 세 번 정도 독려 메시지를 보내야 응답률이 20%를 넘어갑니다. 또 하나, 직접 배포는 응답자의 연령과 성별이 한쪽으로 치우치기 쉽습니다. 20대 여성이 과다 표집되는 경우가 많습니다. 이를 보정하려면 가중치를 적용해야 하는데, 그 과정이 번거롭고 논문에 추가로 설명해야 할 것도 늘어납니다.
저는 연구 주제와 예산을 함께 고려해서 방법을 선택하라고 조언합니다. 모집단이 일반적이고 예산이 어느 정도 확보되어 있다면 패널 조사가 시간과 품질 면에서 유리합니다. 반대로 모집단이 특수하거나 예산이 빠듯하다면 직접 배포를 하되, 리마인드와 커뮤니티 공략을 철저히 준비해야 합니다. 두 방법을 섞는 것도 좋습니다. 패널로 기본 표본을 확보하고, 특수 집단은 직접 접근해서 보완하는 방식입니다. 예를 들어 전체 300명 중 250명은 패널로, 50명은 특정 커뮤니티에서 모집하는 식입니다. 이렇게 하면 비용을 줄이면서도 표본의 다양성을 높일 수 있습니다.
업체가 ‘문제없다’고 말할 때 확인해야 할 한 가지
논문설문조사를 의뢰할 때 가장 흔하게 저지르는 실수는 업체의 말을 그대로 믿는 것입니다. 특히 ‘IRB(기관생명윤리위원회) 승인 문제없습니다’, ‘개인정보 처리 문제없습니다’라는 말을 액면가로 받아들이는 경우가 많습니다. 업체 입장에서는 계약을 따내야 하니 ‘문제없다’고 말하기 쉽습니다. 하지만 실제로 논문 심사에서 문제가 되는 경우가 적지 않습니다.
가장 빈번한 사례는 IRB 승인 전에 설문을 시작하는 것입니다. 대학원생들은 ‘IRB는 나중에 받아도 된다’고 생각하기 쉽습니다. 하지만 인간 대상 연구에서 IRB 승인 없이 데이터를 수집하면, 그 데이터는 논문에 쓸 수 없습니다. 이미 수집한 데이터를 폐기해야 하는 상황이 생깁니다. 업체가 ‘IRB는 나중에 제출해도 된다’고 말해도, 그 말은 업체의 책임이 아닙니다. 연구자 본인이 감당해야 할 위험입니다. 실제로 작년에 한 연구자가 IRB 승인을 기다리지 않고 설문을 먼저 돌렸다가, 승인이 거절되면서 300명 데이터를 전부 폐기한 사례를 봤습니다. 업체는 이미 수집을 완료했기 때문에 환불도 되지 않았습니다.
또 하나, 개인정보 처리 방침을 제대로 확인하지 않는 경우입니다. 설문 응답에는 나이, 성별, 직업, 소득 수준 같은 민감한 정보가 포함될 수 있습니다. 업체가 이 정보를 어떻게 저장하고 폐기하는지, 연구자에게 어떤 형태로 전달하는지 확인해야 합니다. 특히 응답자 식별이 가능한 정보(이메일, 전화번호 등)를 수집하는 경우에는 별도의 동의 절차가 필요합니다. 업체가 ‘알아서 처리한다’고 말하면 구체적으로 물어보세요. 데이터를 암호화해서 전달하는지, 수집 후 즉시 파기하는지, 제3자에게 제공하지 않는지 등을 서면으로 확인하는 게 안전합니다.
논문설문조사에서 업체를 선택할 때는 가격보다 ‘IRB 대응 경험’이 있는지를 먼저 보라고 권합니다. IRB 심사위원들이 어떤 부분을 문제 삼는지 아는 업체는 설문 문항 구성 단계에서부터 조언을 줄 수 있습니다. 예를 들어 ‘이 문항은 민감 정보에 해당할 수 있으니 동의 문구를 추가해야 한다’거나 ‘이 척도는 저작권 문제가 있을 수 있으니 대체 척도를 쓰라’는 식입니다. 이런 조언을 해주는 업체는 보통 견적이 10~20% 높습니다. 하지만 그 비용은 나중에 발생할 수 있는 재수집 비용에 비하면 훨씬 저렴합니다.
마지막으로, 계약서에 ‘데이터 품질 보증’ 조항이 있는지 확인하세요. 응답자 중 불성실 응답(예: 모든 문항에 동일한 번호를 선택한 경우, 응답 시간이 비정상적으로 짧은 경우)을 제외하고 유효 표본을 보장하는지, 그 기준은 무엇인지 명시되어 있어야 합니다. ‘유효 표본 300명’이라고만 적혀 있고 불성실 응답 제외 기준이 없다면, 나중에 분쟁이 생길 수 있습니다. 제가 본 계약서 중에는 ‘전체 응답 중 80% 이상이 유효해야 하며, 그렇지 않을 경우 재수집 비용의 50%를 업체가 부담한다’는 조항을 넣은 사례도 있습니다. 이런 조항 하나가 나중에 큰 차이를 만듭니다.
자주 묻는 질문
논문설문조사 비용은 보통 얼마인가요?
온라인 패널 기준 300명 유효 표본에 150만300만 원 선입니다. 문항 수가 30개를 넘거나 응답자 조건이 까다로우면 350만 원까지 올라갑니다. 직접 배포는 거의 무료지만 응답률이 1020%에 그쳐 3~6주가 걸립니다.
IRB 승인 없이 설문조사 먼저 해도 되나요?
안 됩니다. 인간 대상 연구는 IRB 승인 후에 데이터를 수집해야 하며, 승인 전 수집한 데이터는 논문에 쓸 수 없습니다. 업체가 ‘나중에 제출해도 된다’고 말해도 책임은 연구자에게 있습니다. 승인을 먼저 받고 설문을 시작하세요.
설문 응답자 수는 몇 명이 적당한가요?
분석 방법에 따라 다릅니다. 단순 기술통계는 200명, 회귀분석은 250300명, 구조방정식은 300400명이 일반적입니다. 불성실 응답 10~15%를 감안해 목표의 1.2배를 모집하는 게 안전합니다. G*Power로 필요한 표본을 미리 계산해보세요.
온라인 패널과 직접 배포의 차이는 뭔가요?
패널은 비용이 들지만 3~7일 내에 조건에 맞는 응답자를 모을 수 있고 품질 관리가 됩니다. 직접 배포는 비용이 적게 들지만 응답률이 낮고 특정 집단에 치우치기 쉽습니다. 모집단이 특수하거나 예산이 빠듯하면 직접 배포, 일반적 모집단이고 예산이 있으면 패널이 유리합니다.