本文へスキップ
lurno
アセスメントと採点

7 種類のアセスメント。一つの採点キュー

種類を選べば、配信・不正防止・採点・フィードバック・再受験のルールが設定済みで届きます。人が採点しなければならないものは — アセスメントも、レッスンも、プログラムの課題も — すべて一か所に集まります。

要点

評点が疑問に耐えなければならないとき、Lurno がすること

Lurno はアセスメントを端から端まで扱います。作成、安全な配信、採点、そして結果まで。7 種類のアセスメントから一つを選びます — クイズ、試験、練習、診断、アンケート、ポートフォリオ課題、サイコメトリクス検査 — 種類が配信・不正防止・採点・フィードバック・再受験をあらかじめ設定するので、試験はロックダウンと制限時間付きで届き、練習は時間無制限かつ減点なしの無制限受験で届きます。設問は 19 種類から選びます。人が採点しなければならないものは、アセスメント・レッスン・プログラムを横断する一つのキューに集まり、分析的・全体的・シングルポイントのルーブリックで採点されます。

シングルポイントルーブリック
格子ではなく一列だけのルーブリックです。各評価基準について「十分な達成」がどう見えるかだけを記述し、そこに届かなかった点と超えた点を書き添えます。採点者はクリックが減り、学習者は読むものが増えます。Lurno は三種類すべてに対応します — 分析的(評価基準×水準、重み付き)、全体的(成果物全体を一つの尺度で)、そしてシングルポイントです。

これらの既定値はどれも固定ではありません。一つのアセスメント上で任意の設定を変えることも、種類ごとに組織独自の既定値を定めることもできます。採点ポリシーは順序付きのパスから組み立てます — 自動、手動、ピア、AI 支援のいずれかで、それぞれ必須またはブラインドに設定できます — そして採用ルールが評点を決めます。最初、最後、最高、平均、全員一致、またはモデレーターの判断です。

七つの種類

種類とはラベルではなく、決定の束です

それぞれ教育上の形が異なるので、届く既定値もそれぞれ異なります。

Capability種類制限時間受験回数セキュアモード前に戻る正解の表示
クイズ自動採点。3 回のうち最高点が採用されます。なし3NoYes提出時
試験クリップボードは遮断され、タブの切り替えは不正防止イベントとして記録されます。60 分1YesNo公開後
練習減点なし。解答キーは公開するまで表示されません。なし無制限NoYes提出時
診断すでに何を知っているかを把握します。解答キーは表示されません。なし1NoNo公開後
アンケート評点も解答キーもありません — フィードバック、受け入れ調査、定点調査に。なし1NoYes表示しない
ポートフォリオ課題成果物とマイルストーンのゲート。評価者のレビューに提出されます。なし無制限NoYes公開後
サイコメトリクス検査10 点満点の点数ではなく、尺度と規準集団に照らして採点されます。なし1NoNo表示しない

これは既定値であって、制限ではありません。すべての設定は個々のアセスメントで編集でき、組織は種類ごとにこの表全体を上書きできます。

採点

採点待ちの山を、教える人の働き方に合わせて並べる

アセスメント、レッスン、プログラムの課題を一つのリストに

採点待ちの山は、製品のどの部分が生んだかで分かれてはいません。だからこのキューもそうしません。課題の帰属先、パス、採点者、ライフサイクルの状態で絞り込み、上から順に次の一件を取ります。

  • 設問ごとに採点し、設問ごとにも全体にも、文章のフィードバックと音声メモを付けられます。
  • 二人の採点者が同じ提出物を開いた場合、二人目には明確な競合が示されます。黙って上書きされることはありません。
  • パスをレビュアープールに割り当てると、レビュアーが引き受け、採点し、提出します。ブラインドのパスでは、自分の評点を入れるまで他の評点は見えません。
AI が採点をどう支援するか
サイコメトリクス

適応型サイコメトリクス検査と、それが公正だった証拠

Lurno はサイコメトリクス検査を、クイズではなく測定としての検査として実行します。設問群の上に尺度・下位尺度・合成尺度を定義し、逆転項目と重みを設定し、規準集団と得点換算表を取り込み、受検者が読む解釈文とともに解釈バンドを引きます。採点は決定論的でバージョン管理されるため、過去のセッションを再実行しても同じ結果が返ります。適応モードの検査は、項目反応理論に基づいて次の設問を一つずつ選び、測定が十分な精度に達したところで終了します。これは適応型のサイコメトリクス検査であって、コースの道筋を適応的に変えるものではありません。

項目反応理論(IRT)
各設問がそれぞれの数値を持ち — 難易度、できる人とできない人をどれだけ鋭く分けるか、当てずっぽうの起こりやすさ — 受検者の側は一つの能力推定値を持つ、という検査のモデル化の方法です。両者が同じ尺度に載るため、検査は次に最も情報の得られる設問を選び、推定値が十分な精度に達した時点で終了できます。

公正性に関する作業は、書き出して失われるレポートではなく、記録として残ります。特異項目機能(Mantel-Haenszel 法、効果量とフラグ水準付き)、妥当性の根拠、五分の四ルールに照らした不利益影響の検査、Angoff 法または Bookmark 法による合格基準設定 — それぞれがハッシュチェーン監査ログに項目を書き込みます。

率直な制限が一つあります。IRT のパラメータは取り込むもので、ここで推定するものではありません。Lurno は実行エンジンであって、キャリブレーションのためのスタジオではありません。

不正防止

重みに見合った検査を

必要なところでは有効に、不要なところでは無効に。練習にロックダウンは要りません。

安全な配信

全画面表示、クリップボードの遮断、タブ切り替えの記録、受験ごとのシャッフル。解答キーはサーバー側で取り除かれるため、ブラウザには届きません。

不正防止イベント

タブの切り替え、コピーの試み、二つ目の同時セッション、不自然な時間配分 — それぞれが受験に紐づけて記録され、設問ごとの所要時間も残ります。

要注意アラート

早すぎる提出、複数の同時セッション、取り組みの薄さにフラグを立てます。各アラートには確認の記録が残ります。

AI 文章のチェック

記述式の提出物にスキャンを実行し、成果物の隣で結果を読みます。人の判断の材料であって、判断そのものではありません。

合理的配慮

割合で指定する延長時間、受験回数の追加、免除、ハイコントラスト、文字の拡大、スクリーンリーダー、動きの抑制 — 学習者ごとに設定し、自動で適用されます。

AI による採点の下書き

AI が匿名化された文脈の上で、ルーブリックの評点、フィードバック、評点案を下書きします。人が確認するまで、何も適用されません。

買い手からよくある質問

試験を載せる前に

作成フローには 7 種類 — クイズ、試験、練習、診断、アンケート、ポートフォリオ課題、サイコメトリクス検査 — があり、それぞれが配信・不正防止・採点・フィードバック・再受験をあらかじめ設定します。設問タイプは 19 種類あり、クローズ、ホットスポット、マトリクス、ドラッグ&ドロップ、ファイル提出、音声回答などを含みます。

すでに実施している試験をお持ちください。

すでにお使いのルーブリック、ポートフォリオの課題文、サイコメトリクス検査 — サンプルコースをお見せするのではなく、通話の中でそれを設定します。