This page is a translated version of the page Learning and Evaluation/Glossary and the translation is 100% complete.
Learning and Evaluation
Shortcut:
PEDG

학습 및 평가 용어집에 오신 것을 환영합니다. 이것은 위키미디어 커뮤니티가 프로그램 평가와 관련된 공유 언어를 개발하도록 돕기 위한 것입니다.

진행중인 작업이며 가능한 한 쉽게 이해할 수 있도록 노력하고 있습니다. 우리는 당신이 그것을 개발하고 다국어 도구로 만드는 데 동참하기를 바랍니다.[1]



활동들

활동은 조직의 사명목표를 달성하기 위해 우리가 하는 일입니다. 활동프로그램의 일부로 발생하는 작업입니다. 프로그램을 계획 할 때 입력은 활동에 들어가고 결과적으로 산출됩니다.

"예시:"

  • 새 편집자에게 에디터톤에서 사용자 계정을 만드는 방법 교육;
  • 참가자가 주최자에게 피드백을 제공 할 수 있도록 워크숍 후 설문 조사를 설계하고 배포합니다;
  • "위키 러브 모뉴먼트" 기간 동안 사진 촬영;
  • "위키 테이크스 유어 시티" 투어를 제공하기 위해 투어 가이드 준비;
  • 학생들에게 교실에서 위키백과를 편집하는 방법을 보여주고 이를 가능하게합니다;
  • GLAM 콘텐츠 기부 중 그림 이미지 업로드;
  • 참가자가 해커톤 중 해킹에 대한 아이디어를 브레인스토밍 할 수 있는 포럼을 제공합니다.


감사 탐구

감사 탐구는 어떤 프로그램에서 효과가 없었거나 잘못 된 것에 초점을 맞추는 대신 프로그램에서 효과가 있었고 잘 된 것에 초점을 맞추는 평가 방법입니다. 긍정적인 질문을 함으로써 조직과 프로그램 리더는 잘 작동하는 것을 선택하고 프로그램을 더 성공적으로 만들기 위해 "좋은" 일을 더 많이 할 수 있습니다. 당신이 감사 탐구를 사용할 때, 당신은 감사 탐구 관점을 취하고 있는 것입니다.

"예시:"

  • 에디터톤 참가자 20명 중 10명만이 프로그램 종료 6개월 후 편집을 하고 있었습니다. 왜 10명의 참가자가 편집하지 "않았는지" 궁금해하기보다 10명의 참가자가 편집을 "계속"하게 된 이유를 묻습니다.
  • 위키 러브 모뉴먼트는 사람들이 역사적인 장소의 사진을 찍도록 장려하는 데 성공합니다. 당신은 당신의 언어 위키백과에 여러분 나라의 국립공원에 대한 사진이 부족하다는 것을 알아차렸습니다. WLM의 성공에서 무엇을 얻고 이를 성공시키기 위해 개발한 "위키 러브 파크" 아이디어에 사용할 수 있습니까?

"더 배우기:"


가정

"가정"(무언가 "가정하다")을 할 때, 여러분은 어떤 것이 사실이거나 어떤 일이 일어날 것이라는 증거 없이 믿고 있는 것입니다.

"예시:"

  • 여러분의 에디터톤에 참석하는 모든 사람은 자신의 노트북을 가지고 있을 것입니다.
  • 모두가 위키백과의 작동 방식을 잘 이해하고 워크샵을 떠났습니다.

"더 배우기:"

같이 보기: 근거


벤치마킹

벤치마킹은 조직이 유사한 조직 또는 프로그램에서 생성된 최상의 측정 및 결과를 기반으로 시간이 지남에 따라 프로그램의 성공을 측정하는 것입니다. 여러분의 프로그램과 유사하고 성공 여부를 성공적으로 측정한 프로그램을 보고 이러한 벤치마크가 여러분 프로그램에 어떻게 사용되거나 수정될지 생각함으로써 이를 수행합니다. 항상 가능한 것은 아니지만 벤치마킹은 수치로 표현되는 경우 더 신뢰할 수 있습니다.

"예:"

  • 여러분의 지부는 GLAM과 파트너 관계를 맺고 아르메니아 문화 역사 박물관을 위한 콘텐츠 기부를 하려고 합니다. 월터스 아트 뮤지엄에 대한 사례 연구를 읽고 "공용에 업로드된 박물관 콘텐츠 사진 55장"을 포함하여 중요한 "성공"을 기록했습니다. 이것을 수정하면 "프로젝트 기간 동안 박물관 콘텐츠의 최소 80장의 사진이 아르메니아어와 영어로 설명과 함께 공용에 업로드되고 이 중 최소 10개가 업로드 후 3개월 이내에 가치있는 사진 상태로 승격될 것으로 예상합니다".

"더 배우기:"


코호트

공통점을 가지고 있기 때문에 함께하는 사람들의 그룹.

"예시:"

  • "위키백과 교육 프로그램"의 일부인 수업에 참여하는 학생;
  • 특정 에디터톤의 모든 참가자;
  • "위키 러브 모뉴먼트"에 참여한 사진작가;
  • 특정 위키마니아에서 스페인어를 사용하는 참석자.

"더 배우기:"


비교 그룹

비교 그룹프로그램의 참가자와 유사한 특성을 공유하지만 프로그램에 참여하지 않는 사람들의 그룹입니다.

체계적인 데이터는 일반적으로 비교 그룹과 참가자 그룹 모두에서 수집되며 프로그램 및 목표와 관련하여 이들 간의 차이점을 식별하기 위해 비교됩니다. 비교 그룹은 귀하의 프로그램에 참여하지 않았기 때문에 데이터를 비교하면 프로그램이 대상 측정치결과치 측면에서 차이를 만들고 있는지 확인하는 데 도움이 됩니다.

대조군은 잠재성을 무작위로 선택하여 참여하는 그룹과 참여하지 않은 그룹으로 나누는 특정 유형의 비교 그룹입니다.

"예:"

  • 비교 그룹은 위키미디어의 일반 사용자 집단이나 특정 프로젝트와 언어 또는 프로그램의 대상 집단과 관련된 지리적 하위 집합에서 무작위로 또는 전략적으로 선택될 수 있습니다. 예를 들어 "위키 러브 모뉴먼트"를 통해 모집된 공용에 대한 신규 사용자에 대한 비교 그룹으로서 위키미디어 공용에 대한 무작위 샘플이 있습니다. 전자는 프로그램 개입을 받지 않고 후자는 "위키 러브 모뉴먼트" 프로그램을 통해 들어갑니다.


완료 단계

완료 단계 또는 후속 단계프로그램 평가 절차 (식별, 설계, 구현 및 완료/후속)의 4가지 단계 중 하나입니다.

완료 단계는 평가 결과를 분석, 보고 및 사용하는 데 중점을 둡니다. 이러한 결과는 일반적으로 요약결과 평가 보고를 통해 공유되어 어떤 교훈을 얻었는지, 어떤 목표 결과에 도달했는지 그리고 프로그램의 다음 단계는 무엇이어야 하는지 설명합니다.


기분

조건은 개인 또는 개인 그룹이 속한 환경적, 정치적, 사회적 또는 시민적 상태입니다.

영향 평가에서는 프로그램이 참가자의 상태에 영향을 미쳤는지 여부를 측정하려고 합니다.


컨텍스트 평가

프로그램 평가의 일종. 사회적, 정치적, 경제적, 지리적, 문화적 요인과 같은 변수를 살펴보고 이러한 변수가 활동의 최적 실행에 어떤 영향을 미치며 활동이 얼마나 성공적이었는지 살펴봅니다.

즉, 어떤 외부 요인이 프로그램에 영향을 미쳤습니까?


자료

질적 또는 양적 정보.

"예시:"

  • 조사 결과;
  • 기여자 편집 기록;
  • 여러 조직의 예산;
  • 면접 종료;
  • 개인의 편집이 되돌려진 횟수;
  • 위키백과 프로젝트에 대한 평가를 위해 제출된 문서;
  • 파일 이름.


자료 보관소

데이터를 수집, 기록 또는 수집하는 행위.

"예시:"

  • 설문 응답 작성, 배포 및 수집;
  • 주제에 대한 사람들의 의견을 인터뷰합니다;
  • 편집 기록 로그 수집;
  • 위키미디어 행사의 모든 참가자 목록 작성;
  • 위키미디어 모임에 참석하는 남성 대 여성의 수를 계산합니다;
  • 총 투표 수와 관리자 선거에서 투표한 사람을 계산합니다.


설계 단계

설계 단계프로그램 평가 절차 (식별, 설계, 구현완료/후속 조치)의 4가지 단계 중의 하나입니다. 설계 단계는 수행 기준을 이해하고 목표목적, 대상 지표, 벤치마크평가 전략이 될 것입니다.


불일치 관점

평가를 (i) 그 과정이 실제로 무엇인지(또는 당신이 가지고 있는 것), (ii) 당신이 원하거나 기대한 것 사이의 차이와 불일치를 식별하고 측정하는 과정으로 보는 관점. 프로그램 목표목적 달성에 있어 도전 과제를 찾고 문제를 수정하여 성과를 개선합니다.


문서 검토

프로그램 전달(프로그램 문서 입력 및 출석 시트, 프레젠테이션 자료, 프로그래밍 노트와 같은 피드백)과 관련된 기존 프로그램 문서 및 자료를 의도적으로 수집, 검토 및 분석하는 데이터 수집 방법입니다.

"예:"

  • 편집 후 홍보 자료, 블로그 게시물, 위키 행사 공간 및 참가자의 기여에 대한 일반적인 관찰을 검토합니다. 이렇게 하면 입력과 출력, 프로그래밍 절차 측면에서 프로그램 전달의 증거를 캡처할 수 있습니다.


평가;
평가자

어떤 것의 장점, 가치 또는 중요성에 대한 "체계적인" 결정. 평가는 일련의 표준 또는 기준을 사용하여 모든 노력과 프로그램 또는 이니셔티브를 평가하여 영향을 이해하고 진행 방법에 대한 결정을 내립니다.

과거 또는 현재의 노력, 프로그램 및 이니셔티브에 대한 통찰력을 얻는 것 외에도 평가의 주요 목적은 반영을 가능하게 하고 미래 변화에 대한 요구와 전략의 식별을 지원하는 것입니다.


평가 계획

평가 방법에 대한 자세한 설명입니다. 평가 계획프로그램과 그 성공 사례를 설명하는 데 필요한 정보를 체계적으로 수집하기 위한 전략을 제시합니다.

여기에는 프로그램 평가(위키미디어 사용자 그룹의 지정된 구성원이 이 평가의 리더일 수도 있고, 편집을 제작한 자원봉사자가 함께 협력하여 평가할 수도 있습니다)에 참여하는 사람과 평가 전략(모니터링, 측량, 성능 추적), 평가의 개별 역할(줄리아(Julia)는 참가자로부터 모든 설문 조사 데이터 수집을 담당합니다), 평가를 실행하는 데 사용되는 일정 및 계획(수집할 데이터와 데이터 수집에 사용할 연구 방법, 후원자와 평가자의 역할과 책임에 대한 설명, 작업 수행 일정)을 구현하는 데 사용할 수 있는 리소스가 포함될 수 있습니다.


평가 질문

프로그램결과, 출력, 지표 또는 기타 성공 정의와 관련된 질문입니다.

평가 노력의 목표는 하나 이상의 평가 질문에 답하는 것입니다.


타당성 평가

프로그램을 시작하기 전에 수행되는 프로그램 평가 또는 평가 전략의 유형입니다. 타당성 평가는 제안된 프로그램과 프로그램 내 활동이 가능한지 여부에 초점을 맞추고 제안된 계획과 일정 내에서 목적을 달성할 수 있는지 살펴봅니다.

즉, 합리적으로 무엇을 달성 "할 수" 있나요?

"예:"

  • 올해 여러분 나라에서 "위키 러브 모뉴먼트"를 하고 싶습니다. 여러분 나라에는 단 5명의 활동적인 자원봉사자가 있으며 프로그램을 효율적으로 생산할 수 있을지 확신이 서지 않습니다. 비용이 얼마인지, 그리고 단 5명의 자원 봉사자로 웹 사이트를 시작하고 홍보를 시작할 수 있는지 여부를 결정하기 위해 타당성 조사를 수행합니다.


형성 평가

학습 과정이 어떻게 작동하는지에 초점을 맞춘 일종의 프로그램 평가 또는 평가 전략입니다; 계획대로 작동하는 것, 작동하지 않는 것, 프로그램 전달의 학습 구성요소의 의도된 출력결과를 달성하는 데 있어 도전 과제를 해결하기 위한 모든 전략.

즉, 어떻게 된 것인가요? 구현 및 변경의 경로는 무엇이었나요?

같이 보기: 절차 평가.


목표들

목표프로그램 또는 조직의 전반적인 목적에 대한 명확한 진술입니다. 프로그램 평가와 관련된 두 가지 유형의 목표가 있습니다:

  • 프로그램의 의도된 목표 또는 영향에 대한 "프로그램 목표".
    "예시:"
    • 여러분의 "위키백과 교육 프로그램"은 학생과 교수의 전문 지식을 사용하여 힌디어 위키백과의 콘텐츠를 개선하고 교실에서 위키백과를 사용하는 방법에 대해 해당 지역의 교육 커뮤니티에 더 많은 인식을 제공하는 것과 관련된 목표를 가질 수 있습니다.
  • "조직 목표"는 조직 전체에 대한 명확한 방향을 설정하고 조직의 사명 및 전략 계획을 향해 직원에게 지침과 방향을 제공합니다.
    "예시:"
    • 모든 위키미디어 프로젝트 전반에 걸쳐 콘텐츠와 참여, 품질, 도달 범위 및 다양성을 증가시키기 위한 위키미디어 재단의 5가지 우선 순위 전략적 목표.



식별 단계

식별 단계프로그램 평가 절차(즉, 식별, 설계, 구현, 완료/후속)의 4단계 중 하나입니다.

식별 단계는 과거의 성공과 실패에서 알려진 것을 발견하고, 학습한 교훈을 제공하고, 가정을 식별하는 데 중점을 둡니다.


영향

일반적으로 영향프로그램의 전반적인 효과를 의미합니다. 빈곤을 완화하거나 아이들이 대학에 다닐 수 있도록 돕는 것과 같은 프로그램의 궁극적인 목표를 설명하면서 종종 광범위하게 사용됩니다. 프로그램은 영향을 미친다고 생각되지만 궁극적인 목표는 종종 매우 크고, 장기적이며, 광범위하기 때문에 이를 측정하거나 하나의 프로그램이 영향을 미치는 방식을 정확히 이해하는 것이 어렵거나 불가능합니다.

영향은 프로그램의 목표가 자금 지원 기관의 사명과 가장 자주 일치하는 영역입니다: 한 "재단"은 "어린이의 삶을 개선"하기를 원할 수 있고 해당 재단에서 운영하는 "프로그램"은 특정 결과를 통해 이 목표를 작은 방식으로 해결할 수 있습니다.

위키미디어 프로그램과 관련하여 영향은 개별 프로그램의 결과가 위키미디어 비전과 전략적 목표에 대한 장기적이고 지속적인 변화로 이어지는 정도를 나타냅니다.

"예시:"

  • "위키 러브 모뉴먼트"와 같은 프로그램 활동을 통해 모집된 새로운 기여자의 수는 전체 참여를 늘리는 데 도움이 될 수 있습니다;
  • 여성 역사 분야의 콘텐츠 기여는 특정 위키에서 더 많은 여성 위키백과 편집자를 끌어들일 수 있습니다(참여 및 다양성);
  • 위키백과 언어 버전의 콘텐츠 품질(품질);
  • 매우 활동적인 위키백과 기여자의 유지율 향상(참여 및 콘텐츠).


영향 평가

프로그램목표objectives목적이 얼마나 잘 충족되었는지 측정하는 데 중점을 둔 프로그램 평가 또는 평가 전략의 유형.

대부분의 경우 영향 평가는 프로그램을 수행하는 사람들의 결정을 알리기 위해 프로그램 간에 비교 가능한 데이터를 제공하기 위해 비교 또는 통제 그룹을 검사합니다.

이러한 유형의 평가를 통해 프로그램 리더는 프로그램이 어떤 유형의 영향을 만들고 있는지, 비용은 얼마인지, 프로그램을 계속해야 하는지, 수정해야 하는지 여부를 확인할 수 있고, 영향을 받는 비용을 기준으로 프로그램을 축소 또는 확장하기 위해 노력합니다.

즉, 얼마나 차이가 났습니까?

함께 보기: 결과 평가


구현

계획 및 배포 중인 프로그램의 각 인스턴스는 해당 프로그램의 다른 구현을 나타냅니다.

"예:"

  • "위키 러브 모뉴먼트"는 프로그램인 반면에 "에스토니아의 위키 러브 모뉴먼트 2013"은 구현입니다.


구현 단계

구현 단계프로그램 평가 절차 내의 4단계(즉, 식별, 설계, 구현, 완료/후속 단계) 중 하나입니다.

구현 단계는 프로그램 전달을 모니터링하고, 예상 결과를 얻기 위해 진행하며, 프로그램 및 그 결과에 대한 이야기를 전달하는 데 필요한 정확한 데이터를 성공적으로 수집하는 데 중점을 둡니다.


지시자

지표는 특정 조건이나 상황이 존재하거나 특정 결과가 달성되었음을 나타내는 측정 가능한 지표입니다. 특정 목표산출물 또는 결과를 향해 얼마나 많은 진전이 있었는지 알려줍니다.


투입

절차의 산출물을 형성하거나 영향을 줄 의도로 절차에 투입된 어떤 것.

프로그램 평가에서 입력은 이를 실현하기 위해 프로그램에 투입하는 자원(인간과 유형 모두)입니다. 시간과 돈은 가장 기본적인 자원입니다.

"예:"

  • 워크숍에 대한 입력에는 자원 봉사자들이 워크숍을 계획하고 제작하기 위해 얼마나 많은 시간을 일했는지, 워크숍을 제작하기 위해 FDC 기금에서 사용한 돈, 후원자로부터 기부금이 제공되었는지, 워크숍에서 나눠줄 소책자를 만드는 데 돈을 썼는지 여부가 포함됩니다.


중간 결과

모든 결과 측정 프레임워크의 중요한 중간 계층(즉, 단기와 중기 및 장기 결과).

중간 결과는 일반적으로 행동 및 의사 결정, 프로그램에 참여한 사람들이 취한 조치의 변화를 나타냅니다. 특히, 중간 결과는 목표한 영향과 관련된 조건의 변화로 이어질 취해진 조치입니다.

"예:"

  • "위키 러브 모뉴먼트" 행사를 주최하여 역사적 기념물 조직과 협력하여 유적지 사진을 찍도록 참가자를 초대합니다. 20명이 여러분의 행사에 옵니다. 중간 결과는 각 참가자가 행사 후 최소 2주 후인 9월 말 이전에 공용에 최소 5개의 이미지를 업로드하는 것입니다.



학습 공동체

이것이 우리가 위키미디어, 지부 및 가맹단체가 되기를 바라는 것입니다! 개인이라도! ("학습하는 개인!") 이러한 조직은 경험을 바탕으로 성능프로그램을 유지하고 개선할 수 있는 능력이 있습니다. 그들은 스스로를 평가하고 의도적으로 피드백 루프를 만들어 항상 자신의 행동과 성취에 대해 반성하고 있는지 확인합니다.


논리 모형

프로그램 작동 방식을 시각적으로 표현한 것, 즉 프로그램의 "그림"입니다. 논리 모델에는 프로그램에 입력한 것(자원 입력), 수행하는 것(프로그램 활동 및 참여), 달성하려는 것(프로그램 출력 및 결과로서의 성과)이 포함됩니다.

중요한 것은 논리 모델은 다음과 같습니다:

  1. 프로그램과 측정 가능한 성과에 대한 체계적이고 기본적인 설명;
  2. 원하는 프로그램 결과로 이어질 것으로 예상되는 일련의 "if-theory" 관계("변화 이론"라고도 함);
  3. 프로그래밍 입력, 출력 및 결과 간의 관계를 설명하기 위한 프레임워크.


장기적인 결과

일반적으로 조건의 변화 측면에서 결과와 관련된 결과. 이것은 여러분의 변화 이론이 목표로 하는 사회적, 경제적 또는 환경적 조건의 종점 변화입니다.

"예:"

  • 에디터톤이 의도한 결과에는 과학 분야의 여성에 대해 작성된 10개의 문서가 포함되지만 장기적 결과/영향 목표는 위키백과의 여성 주제에 따라 더 높은 품질의 문서를 포함하는 것일 수 있습니다.

같이 보기: 영향.


미터법

측정치는 계산 및 추적할 수 있는 잘 정의된 값 또는 값 집합이며 일반적으로 다른 참가자 그룹 또는 프로젝트를 비교하기 위해 집계에 사용됩니다(즉, 한 프로그램 코호트 비교).

UserMetricsAPI에서 계산한 측정치는 품질, 수량 및 사용자 기여 유형에서 편집자가 얼마나 잘 유지되는지에 이르기까지 사용자 활동 및 행동을 이해하는 데 도움이 됩니다.


사명 선언문

조직의 목적이 비전과 어떻게 일치하는지 설명하는 진술. 사명 선언문은 간단합니다. "티셔츠에 들어갈 만큼 짧음"은 경험의 한 가지 규칙입니다. 그리고 조직이 존재하는 이유와 조직이 하는 일, 조직이 누구를 위해 존재하는지, 조직의 가치를 설명합니다. 임무를 달성하기 위해 고용된 특정 활동을 나열하지 않고 생성합니다.

"더 배우기:"


관찰

프로그램 평가 유형 또는 프로그래밍 입력프로그램 활동 전달 및 출력을 추적하고 설명하는 데 중점을 둔 평가 전략입니다. 말 그대로 하겠다고 말한 일을 했는지 알아보기 위한 활동과 행사의 "회계"입니다.

즉, 우리는 우리가 하기로 한 일을 했습니까?


평가 필요

수요(예를 들어, 위키백과에서 개선이 필요한 문서 주제) 또는 격차(예를 들어, 멕시코에 수천 장의 기념물 사진이 있지만 멕시코에서 누락된 사진은 무엇입니까?)에 초점을 맞춘 프로그램 평가 또는 평가 전략의 유형.

일반적으로 프로그램 이전, 설계 단계에서 수행됩니다. 수집된 데이터는 프로그램에 필요한 기준선(출발점)과 목표, 목적 및 자원을 공식화하는 데 사용됩니다.

즉, 어떤 변화가 필요합니까?


목적

목적목표의 작은 구성 요소입니다. 목표를 달성하기 위해 취할 목표에 중점을 둡니다.

"예:"

  • 여러분의 목표가 더 많은 여성이 위키백과를 편집하게 하는 것이라면, 여러분의 목표는 그 목표를 달성하는 데 도움이 되도록 6개월 동안 10개의 에디터톤을 개최하는 것입니다.


결과

결과프로그램이 달성하고자 하는 결과입니다. 결과는 영향의 세부적인 부분입니다. 편집자가 결과를 충족하면 이론적으로 영향을 미칠 것입니다. 결과는 프로그램이 달성하는 것을 목표로 하는 결과이며 프로그램이 목표로 하는 지식, 기술, 행동 또는 기타 속성 및 조건의 변경 측면에서 참가자에게 발생하는 변경으로 나타납니다.

결과를 정의할 때 다음을 고려하세요: 프로그램이 단기중기장기적으로 개인, 그룹, 가족, 가정, 조직 또는 커뮤니티의 삶에 어떤 영향을 미치는가? 이상적으로는 프로그램의 결과가 위키미디어 프로젝트에 지속적인 영향을 미치도록 해야 합니다. 결과의 예로는 위키백과 문서를 편집하는 데 필요한 기술과 새 편집자 확보, 편집자 유지, 편집자 참여 증가 등이 있습니다.

"예:"

  • 내년에 더 많은 여성이 위키백과를 편집하도록 하는 것이 가장 중요한 목적이라면 향후 6개월 동안 10개의 편집자를 만드는 것이 목표입니다. 에디터톤 후에 결과를 확인하기 위해 에디터톤을 평가하게 됩니다. 각 개별 편집에는 결과가 따르며 전체 프로그램도 마찬가지입니다. 결과에는 10개의 에디터톤에 참가한 150명의 여성 중 20%가 일련의 행사가 종료되고 2개월 후에 위키백과를 편집했다는 것이 포함될 수 있습니다.


결과 사슬

"결과의 사슬" 또는 "결과의 경로"라고도 하는 이 용어는 결과가 달성되는 순서를 나타냅니다. 모든 결과를 동시에 달성할 수는 없으며 일부 결과는 출력 및 기타 초기 결과의 달성에 의존합니다.

단기, 중기장기 결과는 장기 결과가 단기 결과에 의해 지원되고 종속되는 논리적 결과 체인(또는 결과 경로)을 반영해야 합니다.


결과 평가

프로그램 평가 또는 평가 전략의 유형으로 가장 일반적으로 알려져 있으며 프로그램결과 변화에 대해 의도한 목적목표를 달성한 정도에 중점을 둡니다.

같이 보기: 총괄 평가.


출력

프로그램 활동 및 참여의 직접적이고 측정 가능한 제품. 출력은 프로그래밍 행사 동안 프로그램 활동에서 나온 것입니다.

여기에는 일반적으로 수행된 워크숍 세션 수, 제공한 교육 자료 및 제공한 참가자에 대한 관찰이 포함됩니다. 이러한 결과는 프로그램 참가자가 원하는 결과를 향한 첫 번째 단계가 되어야 합니다.

"예시:"

  • 참가인원(총 20명, 자원봉사자 2명);
  • 어떤 유형의 사람들(의대생 15명, 교수 5명, 여성 10명);
  • 프로그래밍 행사 동안 업로드된 문서 또는 이미지의 수;
  • 기여의 주제.


성능 측정

결과가 달성되었는지 여부와 정도를 평가하는 데 사용되는 일관된 양적 지표입니다.


문제 설명

또한 단순히 "문제"와 "문제 설명" 또는 "도전", 문제 설명프로그램이 해결하려는 문제 또는 도전에 대한 간결한 설명입니다.

"예:"

  • 위키미디어 프로젝트는 성별 격차(여성보다 남성이 더 많이 기여함)로 어려움을 겪고 있으므로 여러분의 프로그램은 더 많은 여성이 참여하기를 원합니다.


절차 평가

계획, 프로그램 또는 프로젝트가 계획대로 구현된 정도에 초점을 맞춘 프로그램 평가 또는 평가 전략의 유형.

즉, 어떻게 작동/발생했습니까?

같이 보기: 형성 평가.


프로그램

동일한 목표를 공유하고 정기적으로 반복되는 관련 프로젝트활동 그룹은 유사한 변화 이론을 기반으로 하며 유사한 프로세스와 개입을 사용하여 해당 변화를 실현합니다.

프로그램의 주요 특성:

  • 공유 목표: 동일한 목표를 공유하는 관련 프로젝트 그룹
  • 지속: 정기적으로 진행 중이거나 반복되는 관련 프로젝트 그룹
  • 모델: 유사한 변화 이론을 공유하고 그 변화가 일어나도록 유사한 절차와 개입을 사용하는 관련 프로젝트 그룹.

"예:"

  • 2012년에 위키미디어 스웨덴, 아르헨티나, 폴란드 및 기타 국가에서는 전역 "위키 러브 모뉴먼트" 프로그램의 일부인 "위키 러브 모뉴먼트" 프로젝트를 운영하고 있었습니다. 전역 "위키 러브 모뉴먼트" 프로그램은 몇 년 동안 조직되었지만 그 목적(공용에 더 많은 기념물 사진을 업로드하는 것)과 변화 이론은 동일하게 유지되었습니다. 매년 절차가 개선되는 반면(예를 들어 새로운 업로드 도구가 개발되었습니다), "사진 업로드"는 위키백과에 영향을 미치기 위해 일어나는 일의 핵심에 머물렀습니다(기념물에 적절한 이미지가 장착되었다는 문서의 비율을 높이는 것을 목표로 함).


프로그램 평가

어떤 것의 이점, 가치 또는 중요성에 대한 "체계적인" 결정. 평가는 일련의 표준 또는 기준을 사용하여 그 영향을 이해하고 진행 방법에 대한 결정을 내리기 위한 노력, 프로그램 또는 이니셔티브를 평가합니다.

과거 또는 현재의 노력, 프로그램 또는 이니셔티브에 대한 통찰력을 얻는 것 외에도 평가의 주요 목적은 반영을 가능하게 하고 미래 변화에 대한 요구와 전략의 식별을 지원하는 것입니다.


프로그램 평가 계획

프로그램에 대한 매우 중요한 질문에 답하는 데 사용할 정보를 체계적으로 수집하기 위한 전략을 자세히 설명하는 문서입니다.

프로그램 평가 계획은 프로그램 결과에 대한 지표를 개발하고 평가 정보를 수집하는 방법을 결정하기 위한 프레임워크를 제공합니다.

같이 보기: 평가 계획.


프로그램 리더

프로그램 리더는 프로그램을 계획하고 실행하며 대부분의 경우 평가하는 사람입니다. 때때로 프로그램에는 여러 프로그램 리더가 있습니다.

위키미디어 프로그램과 관련하여 프로그램 리더는 지부 소속이 없는 개인일 수 있습니다. 그들은 지부의 자원 봉사 회장이거나 해당 지부를 위해 특별히 프로그램을 설계하고 실행하는 지부의 유급 직원일 수 있습니다. 그들은 위키미디어 커뮤니티에서 인정하는 가맹단체 그룹의 구성원일 수 있습니다. 사람들에게 위키백과 편집 방법을 가르치기 위해 도서관에서 워크숍을 주최하는 사서가 될 수 있습니다.

여러분은 프로그램 리더가 될 수 있습니다!


계획

특정 목표를 달성하기 위해 계획되고 설계된 연구 또는 설계를 자주 포함하는 개인 또는 공동 기업. 일반적으로 시작 날짜와 종료 날짜가 있으며 반복될 수 있지만 반복을 위해 설계되지 않았습니다.

위키백과, 위키낱말사전, 위키인용집, 위키뉴스, 위키여행, 위키문헌, 위키책, 위키배움터, 위키미디어 공용, 위키데이터, 메타위키, 미디어위키 등과 같은 "위키미디어 프로젝트"와 혼동하지 마세요.


정성적 데이터

"양"이 아닌 "품질"로 설명된 데이터.

정성적 데이터는 종종 선택 사항이나 척도로 제한되지 않는 개방형 질문을 통해 얻습니다. 정성적 데이터 수집은 사람들이 직접 사용하는 정보를 원할 때 또는 질문하는 질문에 가능한 답변이 너무 많아 나열할 수 없을 때 가장 유용합니다. 정성적 데이터는 관찰 측정을 통한 캡처에서도 얻을 수 있습니다.

정성적 데이터는 정량적 데이터보다 분석하는 데 시간이 더 걸리지만 데이터 수집 노력의 가치 있고 중요한 부분이 될 수 있습니다.

"예:"

  • "위키백과 교육 프로그램"에서 학기말에 학생들에게 "교실에서 위키백과를 편집하면서 가장 즐거웠던 점을 공유해 주세요"라고 물으면 다음 섹션의 문단에 자신의 의견과 생각을 공유합니다. 설문 조사 또는 구두로 교실 설문 조사에서 답변을 공유하고 자원 봉사자의 즐거움 포인트 또는 기타 자연스러운 관찰을 코딩합니다.

"더 배우기:"

  • 위키낱말사전에서 "정성적"의 정의.


정량적 데이터

"품질"이 아닌 "양" 또는 숫자로 설명된 데이터입니다.

정량적 데이터는 폐쇄형 질문을 통해 수집됩니다. 이 질문에서는 사용자에게 제한된 수의 답변 선택이 제공되거나 규모에 따라 답변해야 합니다. 양적 데이터 수집은 나이, 소득, 직원 수, 자녀 수 등과 같은 숫자 데이터를 수집하는 데 적합하지만 저울에 올려놓으면 많은 유형의 정보를 정량적으로 수집할 수 있습니다.

"예:"

  • "위키백과 교육 프로그램" 학기 말에 학생들을 대상으로 설문조사를 할 때 연령, 성별, 졸업 희망 연도를 선택하도록 요청할 수 있습니다. 그들에게 열린 질문을 던집니다.

"더 배우기:"

  • 위키낱말사전에서 "정량적"의 정의.


이론적 해석

여러분의 프로그램 활동이 특정 결과로 이어지는 이유는 무엇입니까? "이론적 가정"이라고도 하는 "근거"는 여러분의 활동이 결과로 이어질 것이라고 믿는 이유 또는 단기 결과가 장기 결과로 이어지는 이유를 표현하는 진술입니다. 그들은 종종 연구를 기반으로 하지만 과거 경험, 상식 또는 특정 상황에 대한 지식에서 나올 수도 있습니다.

"예:"

  • 여러분은 과거 "위키 러브 모뉴먼트"의 프로그램 평가에 기초하여 기념물 유지 관리를 담당하는 국가 정부 기관과 협력하면 결과적으로 더 많은 참가자를 가져올 것이라고 믿습니다. WLM 커뮤니티의 다른 프로그램 리더의 보고 덕분에 이러한 파트너십 덕분에 회의 참여 관련 결과가 더 성공적임을 확인할 수 있었습니다.


단기 결과

일반적으로 학습과 관련된 결과변화 이론에 따른 프로그램으로 인한 인식, 기술, 태도, 지식 및 동기의 즉각적인 변화입니다.

"예:"

  • 위키백과 편집 방법에 대한 워크샵을 주최합니다. 참가자는 기본 기술을 편집하고 배우는 방법을 직접 경험하게 됩니다. 워크숍이 끝나면 참가자들이 경험에 대한 설문조사를 작성하게 합니다. 참가자 30명 중 20명은 편집에 대한 이해도가 높아져 자신감이 생겼다고 한다. 그들의 향상된 이해와 자신감은 워크샵의 단기 결과입니다.


총괄 평가

프로그램 평가 또는 평가 전략의 유형으로, 프로그램이 의도한 목적과 변화 목표를 충족했는지 평가하는 데 중점을 둡니다.

즉, 우리는 우리가 하기로 한 일을 했습니까? 무엇이 효과가 있었나요? 무엇이 작동하지 않았습니까?

같이 보기: 결과 평가.


목표

목표프로그램목적에 숫자를 붙이고 결과의 성공적인 수행에 대한 기대치를 나타냅니다. 목표를 식별하는 것은 일반적인 목적(우리가 무엇을 성취할 것인가?)를 구체적인 목표(언제까지 얼마나 달성할 것인가?)로 변환하는 데 도움이 됩니다.

같이 보기: 벤치마킹.


테스트

성능 측정; 특정 지표에 대한 데이터 수집 노력의 일부로 사용될 수 있습니다.

"예:"

  • 워크숍이 끝나면 참가자들에게 위키백과 정책에 대해 배운 내용에 대해 퀴즈를 풀 수 있습니다. 그러면 그들이 얼마나 배웠는지 알려줄 것입니다.


변화 이론

변화 이론은 사회 변화 이니셔티브를 설계하고 평가하는 방법입니다. 변화 이론은 다음과 같은 조치 단계를 설명하는 이론적 경로를 제시합니다.

  1. 논리적 인과 관계를 통해 변화를 향한 사명과 프로그래밍 활동을 연결합니다;
  2. 영향을 미치려고 하는 프로그램 출력 및 참가자 결과의 사양을 허용합니다;
  3. 구체적이고 측정 가능하며 달성 가능하고 현실적이며 시간 제한이 있는 주요 결과에 중점을 둡니다.

변화 이론은 프로그램의 성공에 필요한 전제 조건, 경로, 활동, 결과 및 결과를 식별하여 결과를 달성하기 위한 명확한 로드맵을 제공합니다.


도구

도구는 목적을 달성하는 데 사용할 수 있는 모든 물리적 항목입니다. 비공식적으로 이 단어는 특정 목적을 가진 절차나 과정을 설명하는 데 사용됩니다.

프로그램 평가에서 도구는 종종 피드백을 캡처(설문조사, 인터뷰, 포커스 그룹 등)하거나 결과 정보를 추출(보고 도구)할 뿐만 아니라 추적 및 모니터링(로그)에 사용됩니다.



각주

  1. 메타의 다른 곳에서 이 페이지의 용어 정의에 링크하려면 {{Glossary|term}} (단순한 번역되지 않은 용어의 경우) 또는 {{<tvar|target-id>Glossary|target-id</>|displayed term}} (번역되지 않은 ID를 실제 번역 가능한 용어 또는 페이지에 사용 된 용어의 사소한 파생 용어(예를 들어, 복수형)과 구별해야하는 경우) 틀을 사용하세요. 예를 들어, {{<tvar|assumptions>Glossary|assumptions</>|assumption}}.