AI+ コンピテンシーベース評価ワークブック
ご自身の実際の担当案件でJUDGE Protocolを活用する
JUDGE Protocolはもうご存じです。次は、ご自身の実際の担当案件で実際に使ってみましょう。
『AI+ Competency-Based Assessment』を読み終えた皆さん、次はご自身の実際の担当案件——実際の資格単元、実際の学習者の証拠、実際のIQAサイクル——でJUDGE Protocolを実践しましょう。この5週間のワークブックでは、JUDGE、PRISM、VACSを実際の評価ツール、実際の判断、実際の品質保証に適用します。さらに4つのキャリブレーション演習で、基準の解釈、評価ツールの設計、証拠の真正性、フィードバックにおいてAIが犯す誤りを見抜く力を鍛えます。AIによる支援と専門的判断との境界を守る評価者のために、AIエンジニアリング企業がつくった一冊です。学習者の能力を判定するのは、決して機械ではないのですから。
- 5週間で合計50の体系的演習 — すべてご自身の資格単位、学習者の証拠、品質保証業務から構成
- 4回のキャリブレーション演習 — AIによる資格基準の解釈、評価ツール設計、真正性の判断、フィードバックの誤りを、実際の学習者に影響が出る前に検出
- JUDGE ProtocolとPRISM — ご自身の資格基準解釈、評価ツール設計、証拠収集作業に直接適用
- VACSで記録された評価判定 — 特定の証拠を明記した評価記録で、数か月後のIQA審査にも耐えうる信頼性を確保
- 実際のIQA抽出計画とEQA対応パック — ご自身のセンター向けに作成され、品質マネージャーへの提出も即対応可能
『AI+ Competency-Based Assessment』（T3-104-JA）を読んだ、または読み進めている、TVETの評価者、内部品質保証担当者（IQA）、外部品質保証担当者（EQA）の皆様です。職種を問わず、コンピテンシーベース／職業資格に携わる評価者・検証者で、段階的で体系的な実践を通じてJUDGE Protocolを日々の習慣にしたいと考えている方を対象とします。架空のシナリオではなく、実際の資格単元、実際の学習者の証拠、実際のIQAサンプリング計画といったご自身の担当案件にワークブックの時間を使いたい方です。
その他の対象：T3-104-JAの共同読書プログラムの副教材として本ワークブックを使う評価者チーム、共通の継続的専門能力開発（CPD）プログラムを運営する訓練提供機関や認定機関に登録された教育機関、ファシリテーター付きワークショップの教材として活用する品質管理者や評価者チームのリーダーの方々です。
- JUDGE ProtocolとPRISMを、基準の解釈、評価ツールの設計、証拠の記録、判断の文書化、発達的フィードバックという5つの実際の評価業務に適用し、専門的な効力を持たせる前に各アウトプットをAssessment Integrity Boundaryに照らして検証できる。
- 親書籍の解説例に基づくキャリブレーション演習で、意図的に仕込まれた4種類のAIの誤り（過大・過小な解釈、汎用的すぎるツールの文言、証拠の真正性の不一致、汎用的なフィードバック）を見抜き、同じ確認を実際の担当案件の証拠にも適用できる。
- 観察チェックリスト、包括的ルーブリック、質問集、課題指示書という実際の評価ツール一式を作成し、特定の資格標準との整合性を検証できる。
- 実際の評価判断をVACSの基準に照らして記録し、具体性の監査に耐える実際の発達的フィードバックを作成できる。
- 実際のIQAのサンプリングと報告のサイクルを実施し、EQAに対応できる実際のコンプライアンス証拠を準備できる。
- 第1週
- 実践におけるJUDGE Protocol
- 第2週
- 評価ツールの設計
- 第3週
- 証拠と判定
- 第4週
- 発達支援的フィードバック
- 第5週
- 品質保証
- 巻末資料
- スキルサマリー・推奨書籍・用語集・ツールリファレンス
AIエンジニアリング企業が、AI支援と専門的判断の境界線を守る評価者たちのために開発した一冊です。なぜなら、学習者のコンピテンシーを判定するのは、決して機械の権限ではないからです。