학습자 분석 대시보드

전세계 대부분의 고등 교육은 역진행 학습이라는 최신 트렌드를 향해 가고 있습니다. 역진행 학습은 강의 중심적 교육 모델에서 학습자 중심적 교육 모델로 옮겨 갈 수 있도록 해 줍니다. 그룹 기반의 교육을 개인 하나 하나에 초점을 맞춘 학습 방법으로 발전시킬 수 있습니다. 교육자는 교육 과정을 교실, 오프라인 컨텐트, 리뷰 및 온라인 토론 등으로 다양하게 전개하여 학생의 전도를 더 잘 이해할 수 있습니다. 강좌가 교실의 한계를 벗어나면 교육자는 더 넓은 공간을 확보할 수 있으며 개별 학생들의 요구에 맞도록 1대1로 학생들을 검토, 평가 및 교육하는 데 더 많은 시간을 투자할 수 있습니다.

학생들도 오프라인 연습을 수행하다 어려운 부분이 있으면 다시 이전의 오프라인 강좌 내용으로 돌아갈 수 있으므로 학습 개념을 더 잘 이해할 수 있습니다. 또한 기술을 연마하고 진도에 대한 피드백을 받으며 강좌에 더욱 적극적으로 참여할 수 있습니다.

Adobe Presenter를 사용하여 교육 컨텐트를 모듈/코스 단위로 작성하고 분석 기능이 태깅된 온라인 비디오 형식으로 게시합니다. 분석 기능을 사용하면 교육자는 학생들의 비교 성과와 토론 시간의 참여도에 대한 보고서를 볼 수 있습니다. 이 대시보드를 사용하면 학생들은 토론을 통해 급우들과 공동 작업을 수행할 수도 있습니다.

모듈은 Microsoft PowerPoint에서 만든 후 Adobe Presenter로 추적 기능을 활성화하여 게시한 단일 프로젝트입니다. [분석 및 공동 작업] 화면을 방문하여 분석이나 공동 작업 또는 둘 모두를 활성화한 후 Adobe ID 자격 증명을 사용하여 로그인하면 추적 기능을 사용할 수 있습니다.

모듈은 일반 슬라이드, 비디오 포함/미포함 슬라이드 또는 퀴즈 포함/미포함 슬라이드를 포함할 수 있습니다. 이러한 모듈을 슬라이드 기반 모듈이라고 합니다. 비디오 모듈은 일반 비디오 또는 퀴즈 포함 비디오를 포함합니다.

교사는 코스의 모든 개념이 포함된 질문들로 이루어진 모듈을 추가할 수 있습니다. 이러한 유형의 모듈을 퀴즈 모듈이라고 합니다. 퀴즈 모듈은 하나 이상의 퀴즈가 포함된 독특한 모듈입니다. 이 모듈에는 지침과 결과 슬라이드를 포함할 수 있지만 퀴즈가 아닌 슬라이드는 사용할 수 없습니다.

Adobe Presenter 9 이상에서는 퀴즈 유무에 상관없이 단일 비디오를 포함하는 비디오 모듈에 한해서만 비디오 분석(세그먼트별 사용 통계 구분)을 사용할 수 있습니다. 모듈에 여러 비디오가 포함된 경우 Adobe Presenter는 해당 모듈을 슬라이드 기반 모듈로 간주하고 관련 분석을 제공합니다. 

코스에는 하나 이상의 개념이 포함됩니다.

개념은 하나 이상의 모듈을 포함하는 코스 주제입니다.

또한 슬라이드 기반 모듈과 비디오 모듈이 혼합되어 포함될 수 있습니다.

모듈의 분석을 보려면, 학습 대시보드에서 해당 모듈을 코스에 추가해야 합니다.

작성자는 학습자 대시보드를 통해 게시된 코스를 모두 볼 수 있으며, 모듈을 하나의 코스로 그룹화하고, 학습자의 진도를 추적할 수 있습니다. Adobe Presenter 10에서는 대시보드에 개념, 토론 및 퀴즈와 같은 새로운 기능이 추가되었습니다.

Adobe Presenter 10 이상의 버전에서는 개념 기능이 도입되어 작성자가 각 개념 즉 코스 주제에 대해 여러 개의 작은 모듈을 제작할 수 있습니다. 각 모듈은 특정 개념에 대해 태그를 지정할 수 있습니다. 다음의 스냅샷 C1 및 C2는 서로 다른 모듈이 할당된 두 개의 개념입니다.

작성자는 퀴즈 및 토론에서의 학습자 성과를 분석할 수 있습니다. 학습자의 토론 참여 수준을 기반으로 작성자는 학습자의 능력에 맞는 유형의 활동을 디자인할 수 있습니다. 교사는 Common Core Standards에 따른 표준 기반의 채점을 수행할 수 있습니다.

학습자 분석 대시보드

분석은 수강생이 코스를 어떻게 사용하고 있는지에 대한 정보를 제공합니다. 예를 들어 코스를 완료한 수강생의 수, 완료 수준, 비교 점수 및 각 모듈/개념/토론 퍼럼에 대한 사용자 참여도를 볼 수 있습니다.

교사는 학습자 분석을 사용하여 다음과 같은 방법으로 학생 성과를 평가할 수 있습니다.

• 모듈 수준 데이터 분석
  • 합격/불합격 학생 비율
  • 전체 참여 점수를 상중하 그룹으로 구분한 데이터
  • 각 슬라이드/모듈 방문 횟수
  • 각 슬라이드/모듈에서 소요한 시간
  • 퀴즈 질문 액세스
• 개념 수준 데이터 분석
  • 개념 내의 전체 모듈에 대한 전체 참여 점수를 상중하 그룹으로 구분한 데이터
    
  • 각 개념 별로 범주화된 퀴즈 데이터
• 학생 토론 중재
  • 토론 보드의 모든 질문/응답에 액세스
  • 날짜 또는 인기(질문을 팔로우하는 학생 수)를 기준으로 질문 정렬
  • 학생에게 질문을 게시하거나 질문에 대한 답변 제공
  • 관련 없는 질문 삭제
  • 최고의 답변에 추가 점수 제공

Presenter에서 학습 대시보드 액세스

[공동 작업] > [학습 대시보드]를 선택합니다. http://als.adobe.com/Pn10/collaboration/dashboard로 이동합니다. Presenter 10 버전으로 만든 코스의 URL이 Pn10의 추가로 변경된 것을 볼 수 있습니다. Adobe ID 자격 증명을 사용하여 대시보드에 로그인을 합니다.

시작하기 화면이 나타납니다. [시작]을 클릭하고 Adobe ID로 로그인합니다. Presenter를 사용하여 코스를 등록하는 중 공동 작업과 분석 기능을 활성화하는 데 사용했던 것과 동일한 ID를 사용합니다.

로그인 후에 다음과 같은 학습자 분석 대시보드가 나타납니다.

코스 만들기

모듈을 결합하여 코스 목록을 만들 수 있습니다. 

[새 코스] 탭을 클릭하여 새 코스를 추가할 수 있습니다.

1. 이름, 시작 날짜, 종료 날짜 및 코스에 참여할 학생 수를 입력합니다.
2. 매개 변수의 기본값을 편집하여 학습자 동작에 대한 점수 요소를 제공합니다.
3. [다음]을 클릭합니다.

    4.  분석 기반 등록 모듈의 목록에서 코스에 포함할 모듈을 선택합니다.

    5.  각 모듈을 원하는 개념에 포함하여 해당 개념을 할당합니다. 개념 필드에 개념 이름을 입력하기 시작하면 나타나는 드롭 다운 목록에서 원하는 개념을 선택합니다.

    6. [만들기]를 클릭합니다.

         코스가 만들어집니다. 학습자 분석 대시보드 홈 페이지의 왼쪽 창에 있는 드롭 다운 목록에서 코스를 볼 수 있습니다.

코스에 퀴즈 추가

기본적으로, 대시보드에는 퀴즈 질문에 대한 어떤 정보도 없습니다. 각 모듈에 퀴즈 질문을 포함하려면 코스 생성 중에 [XML 업로드]를 클릭하고 질문 XML 파일(viewer.xml)을 업로드합니다. Viewer.xml 파일은 게시된 모듈 출력에서 찾을 수 있습니다.

로컬 컴퓨터를 탐색하여 [퀴즈 모듈 출력] > [데이터] 폴더에서 viewer.xml 파일을 선택합니다.

Viewer.xml 파일이 퀴즈 전용 모듈에 해당하는지 확인합니다. 파일을 업로드하면 코스 모듈에 질문이 나타납니다. 퀴즈 모듈의 각 질문을 개념에 매핑하면 사용자가 결과를 더 잘 평가할 수 있습니다. 다음 단계를 따라 질문을 각 개념에 매핑할 수 있습니다.

설정 변경

개인 설정을 보고 관리하려면 설정 아이콘을 클릭합니다.

[코스 설정] 드롭 다운 옵션을 사용하여 코스를 추가, 수정 또는 삭제할 수 있습니다.

상태 표시줄 보기

상태 표시줄은 대시보드 선택 항목을 기반으로 상태를 동적으로 표시합니다. 개요, 학생 및 모듈 상태를 볼 수 있으며 그래프 보기 선택에 따라 다양한 세부 수준 대시보드 보기의 상태를 표시할 수 있습니다.

[모듈] 대시보드 보기에 있는 경우 왼쪽 창에서 모듈 이름을 클릭하여 다른 모듈을 선택합니다.

코스 분석

학생 탭

[학생] 탭을 클릭합니다. 모든 학생의 퀴즈, 참여 점수 및 코스에서 소요한 시간을 통해 학생들의 진도를 볼 수 있습니다. 이제 코스 모듈을 위한 개념 태그가 도입되어 이 새로운 개념 차원을 기반으로 한 분석을 제공할 수 있게 되었습니다. 이 요소는 앞에 있었던 모듈 외에 추가로 제공됩니다. 이 개념 차원을 통해 분석을 사용하기 위해 이제 각 학생의 참여 점수 및 퀴즈 결과를 기반으로 성과를 평가하겠습니다. 성과가 어떻게 평가되는지를 보려면 여기를 클릭하십시오.

클래스 요약 그래프

왼쪽 창의 코스 보기에서 임의의 모듈을 선택합니다.

X 축에 학생들의 참여 점수, Y 축에 학생들의 퀴즈 점수가 그려진 3x3 매트릭스 그래프가 표시됩니다. 그래프에 선택한 모듈에 대한 전체 클래스 성과가 나타납니다. 각 원은 퀴즈 점수 및 참여 점수를 기반으로 한 학생들의 상태를 나타냅니다.

학생의 퀴즈 점수는 낮음(<30%), 중간(30% ~ 70%)
또는 높음(>70%)이 될 수 있습니다.

유사하게, 참여 점수는 낮음(<30%), 중간(30% ~ 70%) 또는
높음(>70%)이 될 수 있습니다.

X 축에서 원점에 가까운 값은 낮음 참여 점수와 낮은 퀴즈 점수의 상태에 해당합니다. 그래프에서 원의 크기는 표시된 값에 해당합니다. 예를 들어, 아래 그래프에서 가장 큰 원은 가장 높은 값인 4에 해당합니다. 여기에서 4라는 값은 이 상태의 학생 수가 4명임을 나타냅니다.

그래프 내의 각 값의 의미.

• 낮은 퀴즈 점수 및 낮은 참여 점수 상태인 학생이 4명입니다.
• 1의 값은 중간 참여 점수 및 중간 퀴즈 점수를 받은 학생의 수에 해당합니다.
• 2의 값은 높은 퀴즈 점수를 받았지만 낮은 참여 점수를 가진 학생의 수에 해당합니다.

그래프에서 각 원을 클릭하면 원의 값에 해당하는 학생의 목록을 볼 수 있습니다. 위의 그래프에서 선택된 원은 빨간 색으로 강조되어 있으며 해당 학생의 이름이 아래에 표시되었습니다.

학생 진도

아래의 스냅샷과 같이 각 학생의 이름을 클릭하면 개념 수준 또는 모듈 수준의 진도를 볼 수 있습니다.

학생의 개념 또는 모듈 진도는 다음과 같은 요소를 기준으로 하여 그래프로 표시됩니다.

• 개념/모듈에서 소요된 일수
• 개념/모듈 전체에 대한 일반적인 진도
• 개념/모듈의 퀴즈 또는 기타 지식 활동의 완료 여부
• 학급 평균과 비교한 학생의 개별 점수로 측정되는 참여 점수

활동 차트는 학습자가 시작 날짜 이후 모듈에서 또는 매일 소요한 시간을 나타냅니다. 시각 요소에 마우스 커서를 올리면 특정 데이터를 볼 수 있습니다.

지식 확인 그래프

각 모듈의 점수를 바탕으로 학생의 모듈 진도가 표시됩니다. 학생 점수의 값과 평균 점수도 해당 그래프 요소에 마우스 커서를 올리면 표시됩니다.

상태는 그래프 아래에 범례로도 표시되어 있습니다.

그래프 위의 아무 곳이나 클릭하면 특정 학생에 대한 자세한 퀴즈 결과를 볼 수 있습니다. 아래의 그래프는 퀴즈 모듈 M5의 8개 질문을 나타냅니다.

• 각 막대의 길이는 올바르게 답변한 학생의 수를 가리킵니다.
• 첫 번째, 세 번째, 다섯 번째 질문은 한 학생만 답변했습니다. 두 번째 질문은 7명의 학생이 답변했습니다.
• 막대 그래프의 색상은 선택한 학생의 응답을 가리킵니다. 녹색은 정답, 빨간 색은 오답을 가리킵니다.
• 다른 학생의 결과를 보려면 아래 스냅샷과 같이 학생 이름 alpi 옆의 드롭 다운을 클릭하고 다른 학생 이름을 선택합니다.

참여 점수 그래프

참여 점수는 토론 보드에서 학생이 게시한 질문과 응답을 기반으로 결정됩니다. 응답의 유용성, 토론 보드에서의 전체적인 참여도에 대한 교사의 피드백을 기반으로 학생에게 가산점이 부여될 수도 있습니다.

학생의 점수와 학급 평균을 그래프 형식으로 볼 수 있습니다. 그래프 위에 마우스 커서를 올리면 모듈 수준의 평균, 합격 점수 및 활성 학생 데이터를 볼 수 있습니다.

참여도 그래프 구성 요소는 참여 점수가 30% 이상일 때에만 표시됩니다.

모듈 탭

[모듈] 탭을 클릭합니다. 모듈별 학생 진도를 그래프 형식으로 볼 수 있습니다.

각 모듈 번호 아래에 표시된 모듈 탭을 클릭하면 모듈 수준의 정보를 볼 수 있습니다. [전체 모듈]을 클릭하면 모든 모듈에 대한 학생 진도 정보가 표시됩니다.

다음과 같은 요소를 기준으로 정보가 표시됩니다.

• 학생이 각 슬라이드에서 소요한 시간. 드롭 다운 값을 선택하면 학생들이 가장 많은 시간을 소요한 상위 5개 또는 하위 5개 슬라이드를 볼 수 있습니다.
  
• 가장 많은 학생이 시도한 상위 5개 또는 하위 5개 슬라이드. 드롭 다운 목록에서 적절한 값을 선택합니다.
• 비디오의 각 세그먼트에서 소요한 시간*. 비디오에서 30초가 한 세그먼트로 정의됩니다.
• 비디오의 각 세그먼트를 방문한 수의 합계*.
• 합격/불합격/시도 안 함 매개 변수를 기반으로 한 모든 학생의 지식 수준 확인.
  
• 참여도 백분율(고, 중, 저)을 기반으로 한 참여 점수 구분.

토론 탭

토론 탭을 사용하면 교사(작성자)가 코스의 공동 작업 활동을 모니터링, 평가 및 중재할 수 있습니다. 모든 코스에 토론이 있는 것은 아닙니다. 공동 작업이 활성화된 모듈로 코스를 만들면 학생들의 모든 토론을 볼 수 있습니다.

아래 스크린샷은 토론 탭에서 사용할 수 있는 다양한 기능을 보여줍니다.

아래의 스크린샷은 단일 토론 스레드가 어떻게 나타나는지 보여줍니다.

PS, PI 및 퀴즈 정규화된 점수의 계산

정규화된 성과 점수

작성자는 사용자가 모듈을 통과하기 위해 얻어야 하는 참여 점수의 최소 대상 값을 설정합니다. 이 설정은 Presenter의 [분석 및 공동 작업] 창에서 구성할 수 있습니다. 점수는 0에서 100 사이입니다.

작성자가 최소 합격 값으로 x 점수를 설정했다고 가정해 보겠습니다. 합격 점수가 30%라고 가정하고 학생이 y 점수를 획득합니다. 이 경우, 30%를 얻으려면 x 점수가 필요합니다.

따라서, 정규화된 성과 점수는 (y/x)*30이 됩니다.

최대 참여 점수는 100을 초과하지 않아야 합니다. 100을 넘는 점수는 모두 100으로 내려집니다.

정규화된 PI 및 퀴즈 점수

다음의 전형적인 코스 예시를 고려해 보겠습니다.다음 표와 같이 2개의 개념을 다루는 모듈 5개로 구성된 코스 X를 가정해 보겠습니다.

이제 이 코스에 다음과 같은 퀴즈 및 공동 작업 점수를 가진 학습자가 있다고 가정해 보겠습니다.

각 모듈은 서로 다른 최대 퀴즈 점수와 성과 지표(PI) 점수를 가지므로 0-100 척도로 정규화합니다. 각 학생의 정규화된 모듈 점수는 다음과 같이 계산됩니다.

정규화된 퀴즈 점수 = (학생의 퀴즈 점수 / 모듈의 최대 퀴즈 점수) * 100

정규화된 PI 점수 = 학생의 PI 점수 * 30 / 모듈의 PI 점수 (최대 값 100)

이제 개념의 정규화된 점수를 해당 개념에 대한 평균 정규화 점수로 계산합니다.

또한 PI 및 퀴즈 점수를 기반으로 학생의 성과를 높음, 중간 또는 낮음으로 분류합니다.

Jack과 Jill 두 학생에게 이러한 계산을 적용하면 다음 표와 같은 결과를 얻을 수 있습니다.