평가를 시작하기 전에
DLEI v2.2 설문지의 평가척도·응답 원칙·산출 방법을 확인하세요.Understand the scale, response principles and scoring rules of DLEI v2.2.
평가는 이렇게 진행됩니다.How an assessment runs
관리자가 조사를 만들어 열면 참여자가 응답하고, 관리자가 검토한 뒤 조사를 닫고 결과를 계산합니다. 단계마다 누가 무엇을 하는지와 그때의 조사 상태를 보여 줍니다.An administrator creates and opens a study, participants respond, and the administrator reviews the responses, closes the study and computes the results. Each step shows who acts and the study status at that point.
세 조사 유형 모두 같은 6단계로 진행하며 3·5·6단계만 다릅니다. 아래에서 유형을 고르면 그 유형의 절차를 볼 수 있습니다.All three study types follow the same six steps; only steps 3, 5 and 6 differ. Choose a type below to see its procedure.
국가역량평가Country assessment
성숙도 5단계 평가Five-stage maturity rating
단계별 할 일Tasks at each step
-
조사 만들기Create the study
준비자세히 보기접기
관리자조사 유형(국가역량평가·델파이·AHP)을 골라 준비 상태로 만들고, 참여자와 국가를 배정합니다.Choose the study type (country assessment, Delphi or AHP), create it as a draft, and assign participants and countries.
새 조사 만들기참여자 배정
참여자배정된 조사는 로그인하면 보입니다. 조사가 열리기 전에는 문항 미리보기만 할 수 있습니다.Assigned studies appear after you sign in. Until a study opens, you can only preview its questions.
내 평가
-
조사 열기Open the study
응답 접수 중자세히 보기접기
관리자마감일을 정하고 상태를 개방으로 저장하면 응답 접수가 시작됩니다.Set the deadline and save the status as Open to start collecting responses.
조사 운영 설정개방운영 설정 저장
참여자Google 계정으로 로그인해 배정된 조사를 엽니다.Sign in with your Google account and open your assigned study.
로그인내 평가
-
성숙도 응답·제출Rate maturity and submit
자세히 보기접기
관리자응답을 기다리며 제출 현황을 확인합니다.Track submissions while participants respond.
응답·증빙 검토
참여자30개 지표마다 성숙도 1–5단계를 고르고 판단 근거를 적습니다. N/A는 C-2·E-4·E-5·E-6에만 쓸 수 있고 사유와 법령·직제 PDF가 필요하며, 관리자가 이 증빙을 확인한 뒤 확정합니다.Choose a maturity stage from 1 to 5 for each of the 30 indicators and note your rationale. N/A is allowed only for C-2, E-4, E-5 and E-6 and needs a reason and a statutory PDF, which the administrator checks before approval.
답은 자동 저장됩니다. 모든 문항을 마치고 동의한 뒤 제출하면 응답이 잠깁니다.Answers save automatically. Complete every item, give consent and submit; your response then locks.
최종 제출
-
제출본 검토Review submissions
자세히 보기접기
관리자제출된 응답과 증빙을 확인해 확정하거나, 사유를 적어 보완을 요청합니다.Check the submitted response and evidence, then approve it or return it with a reason.
N/A 항목은 사유와 증빙 PDF를 확인한 뒤 확정합니다.For N/A items, check the reason and the evidence PDF before approving.
검토 완료 · 확정보완 요청 · 수정 허용
참여자보완 요청을 받으면 검토 의견을 확인하고 고친 뒤 다시 제출합니다.If your response is returned, read the reviewer’s note, revise it and submit again.
최종 제출
검토는 조사가 열려 있을 때도, 종료된 뒤에도 할 수 있습니다. 마감이나 종료 뒤 보완을 요청할 때는 그 응답의 보완 마감일을 함께 정합니다.Review is possible while the study is open and after it closes. When returning a response after the deadline or close, also set its correction deadline.
-
종료·지수 계산Close and compute indices
종료자세히 보기접기
관리자조사를 종료하고 결과 분석에서 점수·통계·가중치를 확인한 뒤 분석 기준본으로 저장합니다.Close the study, check the scores, statistics or weights in Results, and save them as an analysis snapshot.
지표 지수(점수÷5×100), 영역 지수, 종합 DLEI 지수를 계산합니다. 관리자가 확정한 응답이 공식 점수가 됩니다.Indicator indices (score ÷ 5 × 100), pillar indices and the overall DLEI index are computed; approved responses become the official score.
조사 운영 설정종료결과 분석분석 기준본 저장
참여자마감이나 종료 뒤에는 저장한 응답을 볼 수만 있습니다. 확정된 결과는 보고 인쇄할 수 있습니다.After the deadline or close, saved responses are view-only. You can view and print approved results.
내 평가
마감일이 지나면 상태가 개방이어도 응답이 자동으로 잠깁니다(응답 마감).Once the deadline passes, responses lock automatically even if the study is still open (response deadline passed).
-
보고서로 마무리Finish with reports
자세히 보기접기
관리자국가별 결과 보고서와 결과 분석의 CSV·PDF로 마무리합니다.The study ends with country reports and the CSV and PDF outputs in Results.
결과 분석
참여자참여는 여기서 끝납니다. 확정된 결과 보고서는 계속 보고 인쇄할 수 있습니다.Your participation ends here. You can still view and print your approved report.
내 평가
델파이 조사Delphi study
지표 타당성 검증Indicator validation
단계별 할 일Tasks at each step
-
조사 만들기Create the study
준비자세히 보기접기
관리자조사 유형(국가역량평가·델파이·AHP)을 골라 준비 상태로 만들고, 참여자와 국가를 배정합니다.Choose the study type (country assessment, Delphi or AHP), create it as a draft, and assign participants and countries.
새 조사 만들기참여자 배정
참여자배정된 조사는 로그인하면 보입니다. 조사가 열리기 전에는 문항 미리보기만 할 수 있습니다.Assigned studies appear after you sign in. Until a study opens, you can only preview its questions.
내 평가
-
조사 열기Open the study
응답 접수 중자세히 보기접기
관리자마감일을 정하고 상태를 개방으로 저장하면 응답 접수가 시작됩니다.Set the deadline and save the status as Open to start collecting responses.
조사 운영 설정개방운영 설정 저장
참여자Google 계정으로 로그인해 배정된 조사를 엽니다.Sign in with your Google account and open your assigned study.
로그인내 평가
-
기준 평가·제출Rate the criteria and submit
자세히 보기접기
관리자응답을 기다리며 제출 현황을 확인합니다.Track submissions while participants respond.
응답·증빙 검토
참여자30개 지표를 적합성·명확성·중복성·포괄성(1–5점)과 필수성(예/아니오)으로 평가하고, 체계 문항 8개(F-1–F-8)의 적절성도 평가합니다.Rate the 30 indicators for suitability, clarity, redundancy and coverage (1–5) and essentiality (yes/no), and rate the appropriateness of the eight framework items (F-1–F-8).
답은 자동 저장됩니다. 모든 문항을 마치고 동의한 뒤 제출하면 응답이 잠깁니다.Answers save automatically. Complete every item, give consent and submit; your response then locks.
최종 제출
-
제출본 검토Review submissions
자세히 보기접기
관리자제출된 응답과 증빙을 확인해 확정하거나, 사유를 적어 보완을 요청합니다.Check the submitted response and evidence, then approve it or return it with a reason.
검토 완료 · 확정보완 요청 · 수정 허용
참여자보완 요청을 받으면 검토 의견을 확인하고 고친 뒤 다시 제출합니다.If your response is returned, read the reviewer’s note, revise it and submit again.
최종 제출
검토는 조사가 열려 있을 때도, 종료된 뒤에도 할 수 있습니다. 마감이나 종료 뒤 보완을 요청할 때는 그 응답의 보완 마감일을 함께 정합니다.Review is possible while the study is open and after it closes. When returning a response after the deadline or close, also set its correction deadline.
-
종료·통계 계산Close and compute statistics
종료자세히 보기접기
관리자조사를 종료하고 결과 분석에서 점수·통계·가중치를 확인한 뒤 분석 기준본으로 저장합니다.Close the study, check the scores, statistics or weights in Results, and save them as an analysis snapshot.
기준별 평균·중앙값·합의도, 4–5점 비율, 필수성의 CVR을 계산합니다.Per-criterion mean, median and consensus, the share rating 4–5 and the essentiality CVR are computed.
조사 운영 설정종료결과 분석분석 기준본 저장
참여자마감이나 종료 뒤에는 저장한 응답을 볼 수만 있습니다. 확정된 결과는 보고 인쇄할 수 있습니다.After the deadline or close, saved responses are view-only. You can view and print approved results.
내 평가
마감일이 지나면 상태가 개방이어도 응답이 자동으로 잠깁니다(응답 마감).Once the deadline passes, responses lock automatically even if the study is still open (response deadline passed).
-
다음 라운드Next round
자세히 보기접기
관리자참여자를 유지하여 다음 라운드를 준비 상태로 만들고, 라운드 참여자를 확인한 뒤 2단계부터 다시 진행합니다.Prepare the next round as a draft with the same participants, review its participants and continue from step 2.
참여자를 유지하여 다음 라운드 준비라운드 참여자 확인
참여자다음 라운드가 열리면 이전 라운드의 평균과 본인 점수를 보고 다시 평가합니다.When the next round opens, rate again using the previous round’s mean and your own score.
내 평가
다음 라운드는 자동으로 열리지 않습니다. 처음 열 때 이전 라운드의 제출·확정 응답이 비교 기준으로 고정됩니다.The next round does not open automatically. When it first opens, the previous round’s submitted and approved responses become its fixed comparison baseline.
AHP 중요도AHP weighting
지표 중요도 가중치Indicator importance weights
단계별 할 일Tasks at each step
-
조사 만들기Create the study
준비자세히 보기접기
관리자조사 유형(국가역량평가·델파이·AHP)을 골라 준비 상태로 만들고, 참여자와 국가를 배정합니다.Choose the study type (country assessment, Delphi or AHP), create it as a draft, and assign participants and countries.
새 조사 만들기참여자 배정
참여자배정된 조사는 로그인하면 보입니다. 조사가 열리기 전에는 문항 미리보기만 할 수 있습니다.Assigned studies appear after you sign in. Until a study opens, you can only preview its questions.
내 평가
-
조사 열기Open the study
응답 접수 중자세히 보기접기
관리자마감일을 정하고 상태를 개방으로 저장하면 응답 접수가 시작됩니다.Set the deadline and save the status as Open to start collecting responses.
조사 운영 설정개방운영 설정 저장
참여자Google 계정으로 로그인해 배정된 조사를 엽니다.Sign in with your Google account and open your assigned study.
로그인내 평가
-
쌍대비교·제출Compare pairs and submit
자세히 보기접기
관리자응답을 기다리며 제출 현황을 확인합니다.Track submissions while participants respond.
응답·증빙 검토
참여자대분류(10쌍)·중분류(16쌍)·지표(20쌍)를 두 개씩 비교해 더 중요한 쪽과 강도(2–9)를 고릅니다. 비교 묶음마다 일관성비율(CR)이 0.10 이하여야 제출할 수 있습니다.Compare pillars (10 pairs), subareas (16) and indicators (20) two at a time, choosing the more important item and its strength (2–9). Every comparison group needs a consistency ratio (CR) of 0.10 or below before you can submit.
답은 자동 저장됩니다. 모든 문항을 마치고 동의한 뒤 제출하면 응답이 잠깁니다.Answers save automatically. Complete every item, give consent and submit; your response then locks.
최종 제출
-
제출본 검토Review submissions
자세히 보기접기
관리자제출된 응답과 증빙을 확인해 확정하거나, 사유를 적어 보완을 요청합니다.Check the submitted response and evidence, then approve it or return it with a reason.
검토 완료 · 확정보완 요청 · 수정 허용
참여자보완 요청을 받으면 검토 의견을 확인하고 고친 뒤 다시 제출합니다.If your response is returned, read the reviewer’s note, revise it and submit again.
최종 제출
검토는 조사가 열려 있을 때도, 종료된 뒤에도 할 수 있습니다. 마감이나 종료 뒤 보완을 요청할 때는 그 응답의 보완 마감일을 함께 정합니다.Review is possible while the study is open and after it closes. When returning a response after the deadline or close, also set its correction deadline.
-
종료·가중치 계산Close and compute weights
종료자세히 보기접기
관리자조사를 종료하고 결과 분석에서 점수·통계·가중치를 확인한 뒤 분석 기준본으로 저장합니다.Close the study, check the scores, statistics or weights in Results, and save them as an analysis snapshot.
CR이 0.10 이하인 응답의 비교값을 기하평균으로 모아 30개 지표의 가중치를 계산합니다. 연구용 가중치이며 공식 DLEI 점수에는 쓰지 않습니다.Comparisons from responses with a CR of 0.10 or below are combined by geometric mean into weights for the 30 indicators. These are research weights and are not used in the official DLEI score.
조사 운영 설정종료결과 분석분석 기준본 저장
참여자마감이나 종료 뒤에는 저장한 응답을 볼 수만 있습니다. 확정된 결과는 보고 인쇄할 수 있습니다.After the deadline or close, saved responses are view-only. You can view and print approved results.
내 평가
마감일이 지나면 상태가 개방이어도 응답이 자동으로 잠깁니다(응답 마감).Once the deadline passes, responses lock automatically even if the study is still open (response deadline passed).
-
가중치로 마무리Finish with weights
자세히 보기접기
관리자가중치 결과와 결과 분석의 CSV·PDF로 마무리합니다.The study ends with the weights and the CSV and PDF outputs in Results.
결과 분석
참여자참여는 여기서 끝납니다. 제출한 비교와 일관성비율(CR)은 계속 볼 수 있습니다.Your participation ends here. You can still view your submitted comparisons and consistency ratios (CR).
내 평가
성숙도는 5단계로 평가합니다.Assess maturity in five stages.
보유 → 제도화 → 실제 활용 → 정기적 평가·개선의 누적 논리입니다. 복수 요소(①②③)는 전체 충족 수준을 종합하여 하나의 점수로 답합니다.Maturity accumulates from existence through institutionalization, operational use and periodic evaluation. Give one combined score for questions containing multiple components.
다수 요소가 같은 단계라면 그 단계를 선택하세요. 차이가 크면 가장 낮은 요소가 전체 역량의 병목인지 판단해, 병목이면 낮은 단계로, 보완 가능하면 중간 단계로 평가합니다.Use the stage shared by most components. Where they differ, consider whether the weakest component is a bottleneck; score down if it is, or use an intermediate stage if compensable.
다섯 영역을 동일한 비중으로
영역 지수 (Pillar index) = 소속 지표 지수의 평균 (Mean of its indicator indices)
DLEI = (A + B + C + D + E) ÷ 5
1점은 20점, 5점은 100점으로 환산합니다. 중분류 지수는 진단용이며 종합점수에 직접 사용하지 않습니다. 30문항 전체의 단순평균과도 구분됩니다.A rating of 1 maps to 20; 5 maps to 100. Capability area scores are diagnostic only. The overall index is not the simple average of all 30 indicators.
전체 응답을 완료해야 종합지수를 표시합니다. 제출 후 관리자 검토가 완료되면 확정 결과가 됩니다. AHP 연구 가중치는 공식 DLEI 점수에 적용하지 않습니다.The overall index appears only when all responses are complete. Administrator review confirms the result. AHP research weights do not alter the official DLEI score.
N/A는 제한적으로 허용됩니다.N/A requires a specific legal basis.
위 4개 지표에서만, 법령상 기능이 다른 국가기관에 전속되고 응답기관에 잔여 역할이 전혀 없는 경우 허용합니다. 사유와 이를 입증하는 공개 가능한 법령·직제 PDF를 첨부하세요.Only these four indicators permit N/A, when law assigns the function exclusively to another national body and your agency retains no role. Provide a reason and a disclosable PDF documenting the statutory mandate.
관리자가 증빙을 확인한 N/A는 영역 평균의 분모에서 제외합니다. 역량 부족·예산 부족·낮은 우선순위는 N/A 사유가 아니며 1점 또는 2점으로 평가합니다.Substantiated N/A responses are excluded from the pillar denominator. Lack of capability, budget or priority are not valid N/A grounds; rate 1 or 2 instead.
제도의 성숙도를 중심으로 답해 주세요.Focus on institutional maturity.
구체적 수사기법, 제품명, 취약점, 근무인원, 위장계정 운영, 진행 중 사건 정보는 입력하지 마세요. 증빙은 공개 가능한 제도 문서와 총량 통계로 제한합니다.Do not disclose investigative techniques, product names, vulnerabilities, staffing numbers, undercover accounts or ongoing case information. Evidence is limited to disclosable institutional documents and aggregate statistics.
보안상 상세 응답이 곤란하면 제도 존재 여부로 1–5를 평가하고 의견에 “세부 비공개”라고 표시할 수 있습니다.If detail cannot be disclosed, rate institutional existence from 1–5 and note “details withheld”.
수집 정보: Google 계정의 이름·이메일·인증 식별자, 소속, 배정 국가, 평가 응답 및 첨부 증빙. 이용 목적: 연구 참여자 확인, 평가 진행, 통계 분석 및 연구 관리. 응답·첨부는 본인과 서비스 관리자만 조회할 수 있으며 공개 홈페이지에 게시하지 않습니다.Collected data: Google name, email and identity, institution, assigned country, responses and evidence. Purpose: participant verification, assessment, statistical analysis and research administration. Responses and evidence are accessible to the participant and service administrators and are not published on the public website.
운영 이력: 로그인·로그아웃, 페이지 열람, 응답 변경·제출, 다운로드 및 관리자 작업의 시각, IP 주소와 브라우저 정보가 기록됩니다. 응답 수정 이력에는 변경 전후 값이 포함됩니다. 관리자는 연구 운영과 문제 확인을 위해 이 이력을 조회할 수 있으며, 비밀번호와 인증 토큰은 활동 이력에 저장하지 않습니다.Operational history records the time, IP address and browser information for sign-in, sign-out, page views, response changes, submissions, downloads and administrative actions. Response history includes values before and after changes. Administrators can inspect this history for study operations and troubleshooting. Passwords and authentication tokens are not stored in activity history.
연구 제출에 동의하지 않으면 최종 제출을 진행하지 않아도 됩니다. 이미 저장한 데이터의 열람·정정·삭제 및 연구 철회는 참여를 안내한 연구 담당자에게 요청하세요. 구체적인 연구 보존기간은 조사 담당자가 별도 안내해야 합니다.You may choose not to submit. Contact the researcher who invited you to request access, correction, deletion or withdrawal. The study team must provide its study-specific retention period separately.
워크북 전체 검토 기록
설문·척도·산출 외에 GCI 비교, v1.0→v2.2 변경사항, 구버전 21문항 매핑까지 원본을 보존합니다. 과거 문항의 분해·병합은 점수의 자동 변환 근거가 아니므로 구버전 응답을 새 응답으로 자동 채우지 않습니다.The source preserves the GCI comparison, v1.0→v2.2 changes and mapping of 21 former questions. Splits and merges do not justify automatically converting historical scores into new responses.
GCI의 5축을 참고하되 기술수사 영역으로 특화한 연구 도구이며, ITU의 공식 GCI 점수나 인증을 의미하지 않습니다.This research instrument adapts the five-pillar structure to technical investigation; it is not an official ITU GCI score or certification.
↓ 6개 시트 원본 다운로드