측정 및 카지노

직접적인 증거는 학생들이 배운 내용을 보여줍니다. 간접적 인 증거는 교수진이 직접 정보를 해석하고 개선을 안내하는 데 도움이 될 수 있습니다. 예를 들어, 학생들이 세계 지리에 대한 지식이 우수하지만 나중에 객관식 세계 지리 테스트 (직접 증거)에 실패한다는 설문 조사 (학습의 간접적 증거)에 대해 자체보고하는 경우 유용한 정보입니다.프로그램은 학생들의 학생들을 더 나은 그림을 얻기 위해 학생 학습의 직간접적인 증거를 수집 할 수 있습니다.

직접 및 간접 측정.

• 카지노 조치는 두 개의 광범위한 클래스로 나뉩니다. 직접 및 간접 조치.
  • 직접 조치학생이 학습을 시연하고 채점 장치로 측정하는 사람들입니다.
  • 간접 조치학생들이 일반적으로 설문 조사의 형태로 자신의 태도, 인식 또는 학습에 대한 감정을보고하는 사람들을 포함합니다.간접 조치학생과 관련이 있지만 결과와 직접 연결할 수없는 데이터도 포함합니다 (예 : 직업/대학원 배치 요금, 출판 수, GPA, 코스 등급).
  • 직접 측정은 기본 카지노의 기본 형태로 선호되지만 일부 목표는보다 간접적 인 방법으로 만 측정 할 수 있습니다.

방법 선택

• 학생들이 특정 학생 학습 결과를 보여줄 수 있도록합니다.
• 결과의 교수진 및 의도 된 사용자에게 신뢰할 수 있습니다.
• 의사 결정의 기초로 사용할 수있는 유용하고 의미 있고 실행 가능한 정보를 제공합니다.수량은not목표. 교수진은 결과에 따라 필요에 따라 프로그램을 기꺼이 논의하고 변경해야합니다.

“바퀴를 재창조하지 마십시오.”

• 가능할 때마다 기존 증거를 사용하거나 수정하십시오. 카지노는 일반적으로 과정에서 이미 일어나고 있습니다.학생 토토 카지노 평가(ASL) 계획 개발인벤토리를 수행 할 때 유용한 도구입니다.
• 코스-배치 카지노는 종종 학습을 카지노하는 가장 효율적이고 진정한 방법입니다.
  • 징계, 다른 부서 또는 기타 기관의 교수진이 이미 사용중인 카지노 과제 및/또는 채점 기기를 고려하십시오.
  • 카지노 작업을 가능한 한 예상 학습에 대한 진정으로 유지하기 위해 노력하십시오.
• 여러 직접 조치이든 직접 및 간접 측정의 조합이든, 가능할 때마다 학습의 지표를 여러 개 이상 사용하십시오..

의미 론적 문제에주의하십시오.

• 포용적이고 문화적으로 민감한 언어 사용.
• 카지노 질문을 간단하고 요점까지 유지하십시오.
• 관련 문제에 초점을 맞추지 않는 참가자 응답을 초래하는 선도 또는 "이중 배럴"질문을 피하십시오.

가능하면 파일럿 테스트.

• 질문 해석과 관련된 혼란이 발견되도록 시험, 카지노 과제, 설문 조사 및 인터뷰 질문을 시범 시험을 시도하는 것이 가장 좋습니다. 인지 인터뷰 기술은 파일럿 테스트 중에 피드백을 얻는 데 유용 할 수 있습니다.

카지노 측정 기간을 가능한 한 짧게 유지.

• 너무 오래 지속되는 카지노 작업, 설문 조사 또는 포커스 그룹/인터뷰는 효과를 잃고 성취도 또는 비 응답 또는 불완전한 응답 속도의 부정확 한 측정을 초래할 수 있습니다..
• 프로그램의 자원과 교수진이 카지노 활동에 기꺼이 투자 할 시간을 고려할 때 카지노를 수행 할 수 있는지 확인하십시오.

학생 학습의 직접적인 측정의 예

• 코스 가축 테스트, 과제 또는 프로젝트
• 절정 경험 : 캡 스톤 프로젝트, 선임 논문, 선임 전시 또는 공연
• 포트폴리오 카지노
• 라이센스, 인증 또는 전문 시험
• 부서, 부서, 학교 또는 대학의 교수진이 맹목적인 에세이 질문
• 포괄적 인 시니어 프로젝트, 전시 및 공연에 대한 내부 및 외부 심사 리뷰
• 고용주 또는 인턴쉽 감독자의 학생 공연에 대한 직접 카지노
• 학생 간행물 또는 회의 프레젠테이션의 교수 카지노

NCA 고등 교육 기관에 관한 NCA Cecilia Lopez의 적응 : 개선 기회 : 학생 학습을 카지노하기위한 프로그램 컨설턴트-카지노자의 조언, 1996 년 3 월

학생 학습의 간접 측정

• 동문, 고용주 및 학생 설문 조사
• 졸업생 및 포커스 그룹의 인터뷰 출구
• 강사, 프로그램 코디네이터, 기숙사 지도자 및 학생과 직접 접촉하는 다른 사람들의 인터뷰
• 대학원 후속 연구
• 보유 및 양도 연구
• 학위까지의 기간
• SAT / ACT 점수
• 졸업률 및 양도율
• 작업 배치 데이터
• 학생의 행동 관찰 및 녹음

소스 :

(1)하와이 대학교 - 데이터/증거를 수집 할 방법을 선택하십시오
(2) 효과적인 협력 및 실습의 간접 조치 목록

교수진이 징계에서 수용 할 수 있고 모범적 인 학생 일에 대한 합의에 도달하기 위해 협력 할 때, 학생들은 프로그램 교수로부터보다 일관된 채점과 피드백을받습니다.

	혜택	단점
임베디드 테스트 또는 퀴즈	학생들은 테스트/퀴즈가 코스 등급의 일부이기 때문에 잘 수행하도록 동기를 부여했습니다. 학습의 증거는 정상적인 작업량의 일부로 생성됩니다. 교수진은 지역 시험이 커리큘럼에 맞고 의도 된 결과를 얻기 때문에 일반적으로 커리큘럼을 기꺼이 변경하려고합니다..	캠퍼스 또는 프로그램은 시험 신뢰성, 유효성 및 카지노를 담당합니다. 교수진은 학생들이 아닌 경우에도 학생이 득점에 의해 카지노되고 있다고 생각할 수 있습니다..
임베디드 할당	학생들은 과제가 코스 등급의 일부이기 때문에 잘 수행하도록 동기를 부여했습니다. 교수진은 카지노 과정에서 활발한 참여자이기 때문에 결과를 사용할 가능성이 높습니다. 가능한 자료의 온라인 제출 및 검토. 데이터 수집은 학생들에게 눈에 띄지 않습니다.	교수진은 학생 점수가 아닌 경우에도 학생 점수에 의해 카지노되고 있다고 생각할 수 있습니다. 교수 시간을 개발하고 조정하고, 과제를 카지노하기위한 루 브릭을 만들고, 과제를 실제로 점수를 매기는 데 필요한 교수 시간..

포트폴리오를 유지하는 것은 학생들이 더 반사적이되고 배우기위한 동기를 높일 수 있습니다.

혜택	단점
시간이 지남에 따라 학생 성취 및/또는 개발에 대한 포괄적이고 전체적인 견해를 제공합니다. 학생들은 포트폴리오의 유물을 수집하고 반영함에 따라 성장을 볼 수 있습니다. 학생들은 대학원 또는 고용을 신청할 때 포트폴리오에서 끌어들일 수 있습니다. 가능한 자료의 온라인 제출 및 검토.	필요한 자원의 양 : 학생과 교직원 모두에게 비용이 많이 들고 시간이 많이 걸립니다. 학생들은 과정을 심각하게 받아들이지 않을 수 있습니다 (수집, 반사 등) 양도 학생을 위해 숙박시켜야합니다 (종단 또는 개발 포트폴리오가 사용될 때).

혜택	단점
국가 비교가 이루어질 수 있습니다. 신뢰성과 타당성은 테스트 개발자가 모니터링합니다. 외부 조직은 시험 관리 및 카지노를 처리합니다.	학생들이 낮은 점수를받는 경우 교수진이 커리큘럼을 변경하지 않을 수 있습니다 ( "테스트에 가르치는 것을 꺼려합니다").. 테스트는 프로그램의 의도 된 커리큘럼 및 결과와 일치하지 않을 수 있습니다. 테스트 결과의 정보는 너무 광범위하여 의사 결정에 사용하기에는

.

혜택	단점
"부가 가치"또는 성장 정보를 제공합니다.	학습이 예상되므로, 증가 된 학습이 실제로 프로그래밍 방식의 예상의 엄격함을 충족시키는 지 식별하는 과제가 남아 있습니다. 학생들을 두 번 이상 카지노하기위한 작업량 증가. 다른 시간에 진정으로 비교할 수있는 사전 테스트 설계가 어렵습니다. 결과를 올바르게 분석하려면 통계 학자가 필요할 수 있습니다.

혜택	단점
경력 전문가의 카지노는 종종 학생들의 가치가 높습니다. 교수진은 업계에서 기대하는 것에 대한 업데이트 된 정보를받습니다.	카지노 전반에 걸쳐 표준화 부족이 결과 요약을 어렵게 만들 수 있습니다.

설문 조사는 가장 일반적으로 사용되는 간접 카지노 방법입니다. 설문 조사는 태도, 신념, 경험, 가치, 요구, 인구 통계 학적 정보, 인식 등에 관한 정보를 수집하는 데 유용한 도구입니다.

설문 조사시기

카지노 도구로서 목표가 목표 인구의 인식에 관한 비교적 빠른 결론을 도출하는 것이 목표 일 때 설문 조사를 사용해야합니다. 설문 조사는 짧은 시간에 많은 사람들에게 도달 할 수 있으며 일반적으로 분석하기 쉬운 데이터를 생성 할 수 있습니다.assessment@ksu.edu.

• 수석 꽁 머니 카지노
• 동문 설문꽁 머니 카지노
• 메이저 카지노 사이트

혜택	단점
상대적으로 저렴한 비용으로 큰 그룹에 관리 할 수 ​​있습니다. 일반적으로 빠르고 간단한 응답 분석. 신뢰할 수있는 상업 설문 조사를 구매할 수 있습니다.	낮은 응답 속도는 일반적입니다. 자기 효능 보고서를 통해 학생들의 인식은 실제 능력과 다를 수 있습니다. 신뢰할 수 있고 유효한 질문을 설계하기 어려울 수 있습니다. 설문 조사 결과와 학습 결과 달성을 연결하려고 할 때주의가 필요합니다.

포커스 그룹은 소수의 개인 그룹이 함께 조립되어 특정 제품, 프로그램, 서비스, 개념 등에 대한 피드백과 통찰력을 얻기 위해 간접적 인 카지노 방법입니다. 포커스 그룹에서는 참가자가 다른 그룹 구성원과 자유롭게 대화 할 수있는 대화식 환경에서 질문이 있습니다..

포커스 그룹을 사용할 때

포커스 그룹은 사람들 간의 그룹 토론이나 상호 작용이 개별 인터뷰 나 설문 조사 항목을 통해 확인되지 않을 통찰력을 가져올 때 가장 잘 사용됩니다. 또한, 포커스 그룹은 리치 데이터가 필요할 때 유용하고 개별 인터뷰를 수행 할 수있는 자원이 충분하지 않습니다.

혜택	단점
풍부하고 심층적 인 정보를 제공하고 맞춤형 후속 질문을 허용합니다. 그룹 동적이 더 많은 정보를 촉발시킬 수 있습니다. 그룹은 부품의 합보다 더 많은 것이 될 수 있습니다. "이야기"및 목소리는 의도 된 사용자 그룹에 대한 강력한 증거가 될 수 있습니다.	훈련 된 촉진자 필요. 전사, 분석 및보고는 시간이 많이 걸립니다.

인터뷰는 연구 주제에 대한 직접적인 의문을 제기 할 수있는 일대일 데이터 수집 이벤트입니다. 인터뷰는 직접 또는 전화를 통해 수행 될 수 있습니다.

인터뷰를 사용할 때

인터뷰는 개인의 인식에 대한 심층적 인 통찰력을 얻고, 참가자와의 개인적인 접촉을 설정하고, 사전 조사 결과에 대한 후속 조치를 취하는 것이 목적이 가장 잘 사용됩니다..

혜택	단점
풍부하고 심층적 인 정보를 제공하고 맞춤형 후속 질문을 허용합니다. "이야기"및 목소리는 의도 된 사용자 그룹에 대한 강력한 증거가 될 수 있습니다.	훈련 된 면접관이 필요합니다. 전사, 분석 및보고는 시간이 많이 걸립니다.

Rubrics는 학생의 성과를 득점하는 데 도움이되는 가이드입니다. 루 브릭은 코스 작업 및 과제에 대한 피드백을 작성, 점수, 채점 또는 피드백을 제공 할 때 강사가 사용하고 학생들이 품질 작업 개발을 안내합니다.

루 브릭을 사용하는 이유는 무엇입니까?

• 루 브릭은 카지노를위한 공통 프레임 워크와 언어를 만듭니다.
• 복잡한 제품 또는 행동을 효율적으로 검사 할 수 있습니다.
• 잘 훈련 된 검토자가 동일한 기준과 표준을 적용합니다.
• Rubrics는 규범 참조보다는 기준 참조됩니다. 카지노자는 "학생이 루 브릭의 레벨 5에 대한 기준을 충족 했습니까?"
• 루 브릭을 사용하면 교수진 간의 실질적인 대화로 이어질 수 있습니다.
• 교수진이 루 브릭을 개발하기 위해 협력 할 때 공유 된 기대치와 채점 관행을 촉진합니다.

루 브릭은 네 가지 기본 부분으로 구성됩니다. 가장 간단한 형태로 루 브릭에는 다음이 포함됩니다.

1. 작업 설명. 학생들이 과제를 위해받는 지침으로 카지노되는 결과.
2. 카지노할 특성(행) . 시연 할 기술, 지식 및/또는 행동.
3. 숙달 수준/스케일(열) . 숙달 수준을 설명하는 데 사용되는 레이블은 재치 있고 명확해야합니다.
   • 회의, 접근, 회의, 초과
   • 모범적이고, 능숙하고, 한계, 허용 할 수없는
   • 고급, 중간 하이, 중간, 초보자
   • 1, 2, 3, 4
4. 각 수준의 숙달/스케일에서 각 특성에 대한 설명(셀) .

루 브릭 개발

1 단계 : 카지노하려는 것을 식별

2 단계 : 정격 특성 정의 (행).원하는 기술, 지식 및/또는 행동을 지정합니다.

• • 과제에 대한 숙달/숙련도를 보여주는 데 필요한 특성과 학생 학습 결과에 가장 중요한 특성을 포함합니다.

3 단계 : 숙달 레벨 (열)을 식별합니다.

• 성취의 특성을 차별화하기가 어렵 기 때문에 더 이상 약 4를 목표로합니다.
• 항상이 수준을 달성 할 수는 없지만 항상 과제에 대한 예상 엄격한 범주를 허용합니다.
• 숙달 수준은 과제의 등급을 직접 반영하지 않습니다.

4 단계 : 각 특성에 대한 각 수준의 숙달 수준 (세포).

• • 회의를위한 예상되는 엄격함을 설명하십시오. 이것은 두 번째에서 가장 높은 범주에서 식별됩니다.
  • 일반적인 기대를 넘어서 이러한 특성을 사용할 수있는 최상의 작업을 설명하십시오. 이것은 최상위 범주를 설명합니다.
  • 허용 할 수없는 제품을 설명하십시오. 이것은 가장 낮은 범주를 설명합니다.
  • 중간 범주에 대한 중간 수준 제품에 대한 설명 개발.

중요 : 각 설명과 각 특성은 상호 배타적이어야하고 다른 교수진이 학생의 업무를 안정적으로 카지노할 수 있도록 충분히 잘 정의되어야합니다.

5 단계 : 명확성, 엄격함, 점수 신뢰성을 위해 루 브릭을 테스트합니다.

• • 동료 및 학생들과 토론하십시오.피드백 검토 및 수정.
  • 스코어링의 일관성과 사용 효율성을 식별하기 위해 학생 작업 샘플을 득점합니다.

팁 : 교수진은 종종 학생 작업이 통과 할 수있는 것으로 간주되는 데 필요한 최소 점수를 설정하는 것이 유용하다고 생각합니다. 예를 들어, 교수진은 4 점 척도 (4 = 예시, 3 = 능숙, 2 = 한계, 1 = 허용 할 수없는)의 "1"또는 "2"가 최소 품질 기대치를 충족시키지 않기로 결정할 수 있습니다.

중요 : 프로그램 카지노를위한 루 브릭을 개발할 때 동료의 도움을 받으십시오. Rubrics는 프로그램의 교직원과 학생들에게 혜택을주는 공동 기대치와 일관된 채점 관행을 촉진합니다.

6 단계 : 학생들이 자신의 작업을 안내하기 위해이를 사용하여 카지노 작업을 할당 할 때 루 브릭 제공.

Manoa의 하와이 대학교에서 적응

프로그램 카지노 목적으로 루 브릭을 사용할 때 교직원은 학생 작업에 루 브릭을 적용합니다 (예 : 보고서, 구두 프리젠 테이션, 설계 프로젝트). 신뢰할 수있는 점수를 얻으려면 각 교직원은 루 브릭을 같은 방식으로 해석해야합니다.

교정 세션을위한 제안 된 자료 :

• 루 브릭의 사본
• 각 수준의 숙달을 보여주는 학생 작업 사본. 제안 : 6 개의 예제 조각이 있습니다 (2 낮음, 2 개의 중간, 2 높음)
• 스코어 시트

득점자가 학생 작품을 카지노할 때 득점자가 퍼지도록하는 객실에서 득점 세션을 유지합니다

프로세스 :

1. 활동의 목적을 설명하고, 개별 학생이나 교수진이 아닌 스코어링 장치 (Rubric)를 카지노하는 것이 목적을 강조하고 기밀성 및 개인 정보 보호에 대한 존중을 포함하여 윤리적 지침을 설명하는 것입니다..
2. 스코어링 루 브릭과 그 범주를 설명하십시오. 그것이 어떻게 개발되었는지 설명하십시오.
3. Analytic : 독자는 분석 루 브릭의 각 차원을 별도로 카지노해야하며 각 점수 (수준)가 얼마나 자주 사용되는지에 대한 걱정없이 기준을 적용해야한다고 설명합니다. 전체론 : 독자들은 전체 작품을 가장 잘 설명하는 점수 또는 숙달 수준을 지정해야한다고 설명합니다.
4. 각 득점자에게 다양한 수준의 성능의 모범 인 여러 학생 제품의 사본을 제공하십시오. 각 득점자에게 각 제품 각 제품에 독립적으로 루 브릭을 적용하여 개별 스코어링 시트에 등급을 작성하도록 요청하십시오.
5. 모든 사람이 완료되면 모든 사람의 등급을 수집하여 모든 사람이 계약 정도를 볼 수 있도록 표시하십시오. 또는 촉진자는 카지노 범주가 발표 될 때 카지노자에게 손을 올리도록 요청하여 모든 사람에게 합의 범위를 매우 명확하게하고 일상적으로 비정상적으로 높거나 낮은 등급을 제공하는 카지노자를 식별했습니다..
6. 등급에 대한 토론에서 그룹을 안내합니다. 판단을 설명하기 위해 다른 등급을 부여한 사람들을 초대함으로써 검사되는 각 제품에 대해 가장 적절한 등급에 대한 합의에 도달하려고 시도합니다.
7. 그룹이 루 브릭의 적용 방식에 익숙해지면 등급이 시작됩니다. 스코어 시트를 사용하여 등급을 기록하는 방법을 설명하고 절차를 설명하십시오.
8. 점수를 신속하게 요약 할 수 있다면 독서가 끝날 때 그룹에 요약을 제시하십시오. 5 가지 질문에 대한 토론으로 회의를 끝낼 수 있습니다.
   • 결과가 충분히 신뢰할 수 있습니까?
   • 결과는 무엇을 의미합니까? 우리는 학생들의 학습 정도에 만족합니까?
   • 누가 결과를 알아야합니까?
   • 커리큘럼, 교육학 또는 학생 지원 서비스 결과의 의미는 무엇입니까?
   • 카지노 루 브릭은 어떻게 개선 될 수 있습니까?

Manoa의 하와이 대학교에서 적응

코스에서 루 브릭 사용에 대한 아이디어

• 학생들이 당신의 기대와 그들이 어떻게 등급이 매출 될 것인지 알 수 있도록 과제와 함께 루 브릭을 나눠줍니다.
• 학생 작업을 채점하기 위해 루 브릭을 사용하고 등급이 매겨지면서 루 브릭을 반환하십시오. 각 섹션 또는 끝에 추가 의견을 포함시킵니다.
• 과제 또는 그룹 프로젝트를 위해 학생들과 루 브릭을 개발하십시오. 학생들은 모니터 자신과 동료가 개발에 도움이되는 합의 된 기준을 사용하여 모니터링 할 수 있습니다.
• 학생들이 자신의 제품을 만들기 전에 제품을 샘플링하기 위해 루 브릭을 적용하도록합니다. 교수진은 학생들 이이 작업을 수행 할 때 매우 정확하다고보고하며,이 과정은 개발중인 자체 프로젝트를 카지노하는 데 도움이 될 것입니다.
• 학생들이 종이 초안을 교환하고 루 브릭을 사용하여 동료 피드백을 제공하도록하십시오. 그런 다음 학생들에게 최종 드래프트를 제출하기 전에 며칠을 수정하십시오.
• 학생들이 제품과의 자기 카지노로 루 브릭과 손을 사용하여 제품을 스스로 카지노하도록하십시오. 그런 다음 교직원과 학생들은 자기 및 교직원과 생성 된 카지노를 비교할 수 있습니다.

루 브릭 개발을위한 팁

• 기존 루 브릭을 찾고 조정하십시오! 상황에 맞는 루 브릭을 찾는 것은 드문 일이지만, 다른 사람들에게 잘 작동 한 이미 존재하는 루 브릭을 조정하고 많은 시간을 절약 할 수 있습니다.
• 루 브릭 카지노. a) 루 브릭은 카지노중인 결과와 관련이 있습니까?
• 척도 또는 레벨에서 각 지점을 보여주는 학생 작업 샘플을 수집하십시오. 루 브릭은 앵커/벤치 마크/예시가 가능할 때까지 학생이나 동료에게 의미가 없습니다.
• 개정 할 것으로 예상됩니다.
• 좋은 루 브릭이 있으면 카지노 루 브릭 컬렉션을 통해 공유하십시오!assessment@ksu.edu

Manoa의 하와이 대학교에서 적응