가늠 › 진행자 첫걸음

진행자 첫걸음

처음 한 번만 읽으시면 됩니다. 나머지 안내는 그때그때 화면 안에 있습니다.

혼자 전 과정을 겪어 보는 법

이 컴퓨터로 진행하면서, 본인 폰으로 QR을 찍으세요. 1인 2역으로 카드 내기부터 결과까지 그대로 돌려 볼 수 있습니다 — 참가자에게 무엇이 보이는지가 함께 확인되는 것이 핵심입니다.

진행자 화면에 아무도 접속하지 않은 동안에는 이 안내가 그 화면에도 떠 있습니다.

쌍대비교·2×2 조사를 혼자 돌려 보려면 작업대에서 만들어 발행하고, 본인 폰으로 링크를 열어 답해 보세요 — 마감하면 응답이 1명이어도 집계가 보입니다(인원이 적다는 주의가 함께 붙습니다). 작업대에서 만들어 보기 →

▶2:35워크샵 한 바퀴 — 아래 여섯 칸을 실제 화면으로

흐름은 여섯 칸입니다

카드 → 묶기 → 평가 → 투표 → AHP 전환 → 결과

이 줄은 진행자 화면과 조사 편집 화면 위에도 늘 떠 있고, 지금 어느 칸인지가 표시됩니다. 각 칸에서 무엇을 해야 하는지는 그 화면이 직접 말합니다 — 기다릴 차례인지, 진행자가 할 차례인지까지.

2×2 매트릭스(실행 선별)는 이 여섯 칸 밖의 선택 도구입니다. 현장에서 가중치를 확인한 뒤 «무엇부터 손댈지» 를 함께 보고 싶으면, 결과 화면의 «실행 선별 돌리기(2×2)» 로 그 자리에서 한 바퀴 더 돌립니다 — 현황판에는 권유를 두지 않습니다(현황판의 일은 수집 감독뿐입니다). 가중치와 매트릭스는 합산되지 않고 나란히 읽습니다.

여섯 칸을 다 밟지 않아도 됩니다

단계는 생략하거나 나눠서 하실 수 있습니다. 그날 무엇을 정해야 하는지에 따라 고르시면 됩니다 — 아래는 현장에서 자주 쓰는 세 가지입니다.

• 항목이 5개 이하면 점 투표를 건너뛰어도 됩니다. 점 투표는 항목이 많을 때 «무엇부터 볼지» 를 추리는 도구입니다. 다섯 개 이하라면 추릴 것이 없어, 바로 쌍대비교로 가는 편이 빠릅니다.
• AHP 는 그 자리에서 하지 않고 링크로 돌리셔도 됩니다. 현장에서는 항목을 확정하는 데까지만 하고, 쌍대비교는 나중에 개인 링크로 받는 방식입니다. 시간이 모자라거나 참가자가 차분히 답해야 할 때 이렇게 합니다. 확정한 항목은 그대로 남아 있으니 며칠 뒤에 보내셔도 됩니다.
• 현장에서 쌍대비교까지 하실 거라면 항목을 4~5개로 두세요. 비교 문항은 항목 수의 제곱에 가깝게 늘어납니다.

현장 어림은 한 문항에 30초로 잡은 값입니다 — 각자 폰으로 답하는 시간에 설명과 기다림이 붙기 때문입니다. 개인 링크로 각자 시간에 답하실 때는 이보다 빠릅니다. 7개까지 넣을 수는 있지만, 현장에서는 문항이 20개를 넘어가면 뒤로 갈수록 답이 성의를 잃습니다 — 그때는 링크 방식으로 돌리는 편이 낫습니다.

넘어가는 것은 언제나 진행자입니다 — 두 번 누르십니다

단계는 저절로 넘어가지 않습니다. 그리고 한 단계를 지날 때 버튼을 두 번 누르십니다.

1. «카드 마감»·«묶기 마감»·«1차 평가 마감»·«재평가 마감»·«투표 마감·공개» — 더 받지 않습니다. 참가자 폰은 그 순간 «이 단계는 마감되었습니다» 로 바뀝니다.
2. 그 자리에 «다음 단계 시작» 버튼이 섭니다. 다음을 여시면 참가자 폰이 또 한 번 바뀝니다.

마감하기 전에는 다음 버튼이 뜨지 않습니다. 닫는 일과 다음을 여는 일은 다른 일이라서입니다 — 한 버튼으로 두 가지를 하면, 다음으로 넘어가면서도 «닫았다» 고 생각하지 못하게 됩니다.

잘못 누르셨으면 같은 자리의 «마감을 되돌려 다시 받기» 로 그 단계를 다시 여실 수 있습니다. 묶기 단계에서는 «카드 다시 받기» 로 카드 단계까지 돌아갈 수 있습니다(새 카드는 미분류로 들어옵니다). 평가가 시작된 뒤로는 돌아가지 않습니다 — 그때부터는 조사 편집의 재개방을 쓰십니다. 되돌리신 사실은 회의록에 남습니다.

워크샵을 끝낼 때 — 마감까지가 한 걸음입니다

위의 단계 마감은 그 단계를 닫는 것입니다. 워크샵 자체를 닫는 것은 마지막 화면의 «워크샵 마감» 한 번입니다 — 그것까지 누르셔야 목록에서 «마감» 으로 바뀝니다.

마감하면 새 참가자가 코드·QR 로 들어오지 못하고, 카드·평가·투표도 더 받지 않습니다. 이미 낸 것과 회의록은 그대로 남습니다. 되돌리시려면 조사 편집에서 상태를 바꾸세요 — 그때 «지난 묶음에 더 받기 / 새 묶음 시작» 을 여쭙습니다.

AHP 전환 버튼은 워크샵을 마감하셔야 나타납니다. 열린 채로 전환하면 이 워크샵이 «진행중» 인 채 새 조사와 함께 돌아가, 나중에 어느 쪽이 끝난 자리인지 알 수 없게 됩니다. 점 투표를 건너뛰고 전환하실 때도 마찬가지입니다 — 먼저 «워크샵 마감» 을 누르십시오.

2×2(두 기준 채점)가 필요하시면 — 조사를 새로 여세요

현장 워크샵은 AHP 까지입니다. 카드 → 묶기 → 평가 → 투표 → AHP 전환 → 쌍대비교. 여기서 한 자리가 끝납니다.

같은 자리에 2×2 를 이어 붙이지 않는 데는 까닭이 둘 있습니다. 하나는 여정이 이미 길다는 것입니다 — 마지막 라운드에 이르면 집중이 남아 있지 않습니다. 또 하나는 AHP 결과를 보고 나서야 2×2 가 필요한지, 무엇을 어떤 축으로 잴지 정할 수 있다는 것입니다.

새 조사를 만드실 때 「이어받은 조사」에서 그 AHP 를 고르시면 양쪽 결과 화면이 서로를 가리킵니다. 항목은 새로 적으셔야 합니다 — 대개 같지 않습니다.

여러 자리에 나누어 진행할 때

같은 안건을 여러 날·여러 지역으로 나누어 돌리실 때가 있습니다. 그때 수칙은 하나입니다 — 한 자리가 끝나면 «워크샵 마감» 을 누르세요. 그 마감이 묶음의 경계가 됩니다 (단계 마감이나 단계 되돌림은 경계를 만들지 않습니다 — 같은 자리 안의 일이라서입니다). 경계 없이 계속 이어 받으면 전부 한 묶음으로 합쳐집니다.

마감한 조사를 다시 열 때 가늠이 한 가지를 묻습니다 — «지난 묶음에 더 받습니다»(늦은 응답자·실수 복구: 번호 그대로)인지, «새 묶음을 시작합니다»(다음 회차·다른 집단: 번호가 하나 올라가고 이름을 붙일 수 있습니다)인지. 지각한 한 분을 받으려고 연 것까지 새 회차로 세면 없던 회차가 생기기 때문입니다.

구분하는 도구가 둘입니다. 순서대로 이어지는 자리는 진행 기록(마감이 경계, 진행자가 정합니다), 같은 시간에 섞여 있는 집단은 응답자 속성(성별·지역 등, 응답자가 답합니다)입니다. 둘은 성격이 다르므로 결과 화면에서 서로 겹쳐 볼 수 있습니다 — «B지역 설명회만» 을 고른 뒤 그 안에서 다시 속성으로 나눠 보는 식입니다.

회차마다 묻는 항목이 달라진다면 이 방법이 아니라 조사를 회차별로 따로 만들고 마지막에 통합 조사를 한 번 더 도는 편이 낫습니다 — 같은 항목이어야 한 표에서 견줄 수 있습니다.

세 가지는 일부러 그렇게 해 두었습니다

• 응답 중에는 집계를 기본으로 감춥니다. 먼저 나온 답이 뒤의 답을 끌고 가지 않게 하기 위해서입니다. 워크샵의 평가·투표 단계는 늘 그렇고(방법론), 조사(AHP·2×2 매트릭스)는 진행자가 결과 화면의 «중간 집계 열어보기» 로 마감 전에 열 수 있습니다 — 그 사실은 «마감 전 중간 열람 있음» 으로 기록에 남습니다. 결과는 마감 뒤 결과 링크로 열립니다 — 링크를 받은 사람은 열 수 있습니다.
• 누가 무엇을 냈는지는 진행자 화면에 나오지 않습니다. 카드도 평가도 익명이며, 응답 내용은 각자의 폰에만 있습니다. 조사에서 «이름과 함께 기록» 을 고르면(명부) 응답자가 답하기 전에 그 사실을 봅니다.
• 계산은 검증 기록을 공개합니다. 고유벡터법(Saaty)을 따르며, 독립 구현과 대조한 22건을 계산 검증에서 로그인 없이 보실 수 있습니다.

링크를 어떻게 전할까 — 세 가지 수단

개인 링크는 셋 중 어느 길로도 전할 수 있습니다. 어느 것이 «맞다» 가 아니라 그 자리의 사람들이 무엇을 여는가로 고르시면 됩니다.

문자(SMS)는 없습니다. 전화번호를 받아 두어야 하는 수단이라 지금은 두지 않았습니다 — 이름과 이메일 외의 개인정보를 늘리지 않는다는 같은 이유로 카카오톡 자동 발송(알림톡)도 하지 않습니다. 메신저로 보내실 때는 위의 「복사」 를 쓰시면 됩니다.

참가자에게 미리 알려줄 것

조사를 안내하실 때 메일보다 먼저, 구두나 공지로 이 한 줄을 말씀해 주세요.

「가늠에서 안내 메일이 갑니다. 발신 주소는 noreply@ganum.kr 이고, 응답 링크는 https://ganum.kr/ 로 시작합니다. 다른 주소에서 오면 저에게 먼저 확인해 주세요.」

메일 안에 같은 말을 적어 두는 것으로는 부족합니다. 사칭 메일도 그 문장을 그대로 베껴 쓸 수 있기 때문입니다 — 메일 안의 «저희는 이 주소입니다» 는 아무것도 증명하지 못합니다. 메일 밖에서 전달된 기준만이 사칭을 걸러 냅니다.

메일 대신 카카오톡 같은 메신저로 직접 나눠 주실 때는 대상자 목록의 「복사」를 쓰시면 «○○님 → 링크» 한 줄이 복사됩니다. 반드시 그 분과의 개인 대화에 붙이세요 — 링크는 그 분 이름으로 응답되므로, 단체방에 올리면 누가 눌러도 그 이름으로 남습니다.

사칭을 막는 설정(DMARC)도 해 두었습니다. 다만 그것은 이 도메인을 사칭하는 경우를 막을 뿐, 비슷한 주소를 새로 만들어 보내는 것까지는 막지 못합니다. 그래서 위의 «미리 한 줄» 이 마지막 한 겹입니다.

사전 설문과 잇기 — 설문은 구글폼이, 우선순위는 가늠이

워크샵 전에 설문을 돌리는 조직이 많습니다. 배경·만족도·자유 의견을 묻는 설문은 구글폼이 잘합니다 — 가늠은 그 설문을 대신하지 않습니다. 가늠이 맡는 것은 그 다음입니다. 설문에서 나온 것이 워크샵 자리에서 참가자의 판단을 거쳐 우선순위가 되는 단계입니다.

두 도구를 잇는 것은 기능이 아니라 문항 설계입니다. 사전 설문의 핵심 문항을 순위형으로 두시면, 그 결과의 상위 항목이 그대로 워크샵의 비교 대상이 됩니다. 다섯 걸음입니다.

1. 설문에 순위형 문항을 하나 두십시오

«해당하는 것을 모두 고르세요»(복수선택)는 고른 항목이 전부 같은 값으로 집계됩니다. 진짜 고민과 조금 신경 쓰이는 것이 구분되지 않아, 상위 항목을 뽑을 근거가 없습니다.

대신 1순위·2순위·3순위를 지정하게 하십시오. 구글폼에서는 «객관식 그리드» 로 만듭니다 — 행에 항목, 열에 1순위·2순위·3순위를 두고 «열당 응답 1개로 제한» 을 켭니다. 응답 부담은 복수선택보다 조금 크지만, 집계에 순서가 남습니다.

순위형 문항은 한두 개면 충분합니다. 보통 «가장 중요한 것» 과 «가장 걱정되는 것» 둘입니다. 나머지 문항은 지금까지 하시던 대로 두셔도 됩니다.

2. 마감 뒤, 상위 항목을 뽑으십시오

응답 시트에서 1순위 3점, 2순위 2점, 3순위 1점으로 더합니다. 시트 한 줄이면 됩니다 — =SUMPRODUCT((B2:B200="1순위")*3 + (B2:B200="2순위")*2 + (B2:B200="3순위")*1)

항목마다 이 값을 내고 큰 순서로 늘어놓으면 참가자의 순위가 나옵니다. 여기서 상위 5~6개만 워크샵으로 가져가십시오. 항목이 많으면 비교 횟수가 늘어 현장에서 감당이 안 됩니다 — 쌍대비교는 항목 6개면 15번, 8개면 28번입니다.

이 순위는 4단계에서 다시 쓰이니 시트에 남겨 두십시오.

3. 가늠에 조사를 만드십시오

새 조사를 열고 상위 항목을 그대로 입력합니다. 손으로 옮기는 데 10분이 걸리고, 그 10분은 항목 이름을 한 번 더 읽는 시간이기도 합니다 — 설문 문항의 보기 문구를 그대로 쓰지 마시고, 비교하기 좋은 짧은 이름으로 다듬으십시오.

누가 매길지도 정하십시오. 참가자 전원이 매길 수도 있고(현장 접속·QR), 패널이나 운영진만 매길 수도 있습니다. 설문에 답한 사람과 워크샵에서 매기는 사람이 다르면 — 구성원이 설문에 답하고 운영진이 매기면 — 두 순위의 차이가 그날의 이야깃거리가 됩니다.

4. 워크샵에서 두 순위를 나란히 놓으십시오

조사를 마감하시면 가늠이 결과를 띄웁니다. 그 옆에 2단계에서 남겨 두신 설문의 순위를 같이 보여 주십시오. 슬라이드 한 장이면 됩니다.

차이가 큰 항목부터 이야기합니다. 차이가 없어도 결과입니다 — «구성원과 운영진이 같은 것을 먼저 보고 있다» 는 확인은 그 자체로 워크샵의 산출물입니다.

5. 회의록에 붙이십시오

가늠의 회의록에는 현장 조사의 항목·응답 수·집계 기준·가중치가 자동으로 적힙니다. 설문의 순위표(2단계)와 비교 슬라이드(4단계)를 그 앞에 붙이시면 «설문 → 현장 판단 → 결과» 가 한 문서가 됩니다. 다음 워크샵은 이 문서에서 시작합니다.

하지 않는 것 셋

• 설문을 두 번 받지 않습니다. 참가자 입력 창구는 구글폼 하나입니다 — 가늠은 워크샵 자리에서만 씁니다.
• 설문의 배경 문항(소속·연차 등)을 가늠 속성으로 옮기지 않습니다. 가늠의 속성은 현장에서 따로 받으며, 재식별을 막기 위해 3문항 · 선택지 6개까지입니다.
• 설문 응답 파일을 가늠에 올리지 않습니다. 가늠에 들어가는 것은 항목 이름뿐입니다. 개인 응답은 시트에 남습니다.

사전 설문(구글폼) → 시트에서 합산 · 상위 5~6개 → 워크샵(가늠) → 두 순위 비교 · 회의록

준비 시간은 설문 설계 반나절, 상위 항목 뽑고 조사 만들기 30분, 워크샵 당일 참가자 평가 10분입니다. 처음이시면 행사 일주일 전에 매길 분 몇 명과 한 번 돌려 보십시오 — 폰에서 항목 이름이 어떻게 보이는지가 그때 잡힙니다.

사전 설문 문항 10개를 아래에 펴 두었습니다. 그대로 옮겨 쓰시면 되고, 순위형 두 문항(Q3·Q6)이 가늠으로 가는 자리입니다. 손으로 옮기기 번거로우시면 구글폼을 한 번에 만들어 주는 스크립트도 아래에 두었습니다.

결과를 집단별로 나눠 볼 때

결과 화면의 «집단별로 보기» 에서 한 번에 한 축만 폅니다 — 역할별이면 역할별, 지역별이면 지역별. «비교표» 를 고르면 행이 항목, 열이 그 축의 집단인 한 표가 되어 집단 사이에 순위가 뒤집힌 곳이 한눈에 보입니다. 축은 알약으로 갈아 끼웁니다.

두 속성을 겹쳐서(성별 × 지역) 보는 화면은 두지 않았습니다. 소규모 집단에서 교차 칸은 사실상 개별 응답이 되기 때문입니다 — 12명에 2×3 칸이면 한 칸이 한두 명입니다. 그 숫자에 «집계» 라는 이름을 붙이지 않으려는 것입니다. 교차 분석이 필요하시면 원자료 CSV를 쓰세요 — 응답자마다 속성이 다 붙어 있어 쓰시던 도구에서 돌리실 수 있습니다.

막히면

화면마다 그 자리에서 필요한 설명을 답니다. 그래도 막히시면 coop1004@gmail.com로 알려 주세요 — 불편한 곳을 근거로 고칩니다.