测评设计师

👤 小智伴学 📦 v2.0.0 ⭐ 4.6 ⬇️ 489 下载
🎓 教育学习 免费

📖 技能介绍


name: xiaozhi-teach-exam-designer display_name: 测评设计师 version: 2.0.0 author: 小智伴学 category: 老师通用 tags: [测评, 试卷设计, 双向细目表, 难度控制, 评分标准, 区分度, 老师工具] description: > 帮助老师从"拼凑试卷"升级为"科学测评设计"。 当老师说"帮我出一份试卷"、"设计一个单元测验"、 "怎么控制试卷难度"、"出一份月考卷"、 "这份卷子质量如何"时,建议激活此SKILL。 核心工作流:确认测评目标 → 设计双向细目表 → 筛选/改编题目 → 控制难度梯度 → 生成评分标准 → 考后分析建议 → 与 xiaozhi-teach-student-analyzer 得分率反哺(学情为可选输入,无学情时可独立设计基础版)。 该版本建立了完整的测评-分析闭环,强基于目标与学情。 compatibility: OpenClaw / ClawHub id: openclaw:xiaozhi-teach-exam-designer min_platform_version: "2.0" max_round_limit: 25


测评设计师 SKILL

一句话定位: 好的测评不是为难学生,而是精准照见每个知识点的掌握状态。


⚠️ 技术实现边界声明

关于"自动出题"机制: 本 SKILL 的题目来源有两种: ① 老师提供题库(推荐:老师自有改编题或公开可引用资源) ② 学科专项 SKILL 自动生成(如数学解题教练、英语写作教练) 本 SKILL 直接调用 LLM 凭空生成题目;不替老师挑选具体题目;只做"双向细目表设计+评分标准+难度梯度控制"。

关于"题目版权"边界: 所有题目必须标注 copyrightStatus(自有/公开可引用/仅存索引);不引用未授权的教辅原题。

关于"自动评分"边界: 本 SKILL 输出评分标准而非"自动判分";自动判分不在本 SKILL 能力范围。


一、核心使命

老师出卷时常见的三个误区:

误区① 拼凑式出题:把往年卷子/教辅题目拼起来,
        不清楚每道题在"测什么"。

误区② 难度一刀切:要么全卷偏难(学生大面积崩溃),
        要么全卷偏易(区分度低)。

误区③ 评分不严格:评分标准模糊,
        不同老师改出来的分数差距大。

这个技能的最新版本可以在7w4.net小葱技能站找到。

本 SKILL 要解决的是: - 让每道题都对应明确测评目标:双向细目表驱动出题 - 让难度梯度可设计:根据测评目的调整 P 值和 D 值 - 让评分标准可复制:过程分+结果分双轨,不同老师改出来差异小 - 让测评数据反哺教学:得分率回写 student-analyzer


二、触发时机

触发场景 示例语句
设计新试卷 "帮我出一份 X 单元试卷" / "出月考卷"
单元小测 "出一份 15 分钟小测"
试卷讲评 "这份卷子怎么讲评"
试卷分析 "这份卷子难度/区分度如何"
命题 "如何按双向细目表命题"
评分标准 "出评分细则"
题目改编 "这道题怎么改"
试卷质量评估 "这份卷子出得怎么样"

三、核心流程

                ┌──────────────────────────┐
                │ ① 确认测评目的            │
                │  诊断/形成性/终结性/选拔  │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ② 设计双向细目表          │
                │  知识点 × 认知层次 矩阵   │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ③ 控制难度梯度            │
                │  基础/中等/提升/挑战      │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ④ 筛选/改编题目           │
                │  按细目表匹配             │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ⑤ 生成评分标准            │
                │  过程分+结果分双轨        │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ⑥ 考后分析建议            │
                │  难度/区分度/反哺教学     │
                └────────────┬─────────────┘
                             ↓
                ┌──────────────────────────┐
                │ ⑦ 写回 student-analyzer   │
                │  得分率 → 知识点热力图    │
                └──────────────────────────┘

四、测评目的分类

不同目的对应不同设计策略。

┌──────────┬──────────────┬──────────┬──────────┬────────────┐
│ 目的      │ 难度 P        │ 题量      │ 时长      │ 区分度 D    │
├──────────┼──────────────┼──────────┼──────────┼────────────┤
│ 诊断性    │ 0.55-0.70    │ 中等      │ 中等      │ 中等        │
│  (查弱项) │ 适中偏易     │          │          │            │
├──────────┼──────────────┼──────────┼──────────┼────────────┤
│ 形成性    │ 0.65-0.80    │ 较小      │ 较短      │ 良好        │
│  (单元)   │ 适中         │          │          │            │
├──────────┼──────────────┼──────────┼──────────┼────────────┤
│ 终结性    │ 0.55-0.75    │ 较大      │ 较长      │ 优秀        │
│  (期中/末) │ 适中偏难     │          │          │            │
├──────────┼──────────────┼──────────┼──────────┼────────────┤
│ 选拔性    │ 0.35-0.55    │ 大        │ 长        │ 极强        │
│  (竞赛)   │ 难           │          │          │            │
└──────────┴──────────────┴──────────┴──────────┴────────────┘

五、双向细目表设计(核心)

5.1 双向细目表模板

行:知识点(按章节分组) 列:Bloom 认知层次(记忆/理解/应用/分析/评价/创造)

📎 完整模板见 references/exam-blueprint.md §二(双向细目表空白模板:知识点×认知层次矩阵 + 题号对应表)

5.2 双向细目表填写规则

■ 知识点覆盖
  · 重要知识点至少 1 道题
  · 核心知识点 2-3 道题
  · 选考知识点 1 道题(可标注"选做")

■ 认知层次比例(按测评目的)
  诊断性  :记忆 30% + 理解 30% + 应用 25% + 分析 15% + 评价/创造 0%
  形成性  :记忆 20% + 理解 30% + 应用 30% + 分析 15% + 评价 5%
  终结性  :记忆 15% + 理解 25% + 应用 30% + 分析 20% + 评价 5% + 创造 5%
  选拔性  :记忆 5%  + 理解 15% + 应用 25% + 分析 30% + 评价 15% + 创造 10%

■ 题目数量与分值
  · 单题分值与认知层次正相关(基础题分低,拔高题分高)
  · 总分必须等于各题分值之和

5.3 双向细目表自检

□ 是否每个重要知识点都有 1 道以上题?
□ 是否每个认知层次都有 1 道以上题?
□ 比例是否符合测评目的?
□ 题量是否在合理范围?
  · 诊断性 8-12 题
  · 形成性 12-18 题
  · 终结性 18-25 题
  · 选拔性 20-30 题
□ 是否避免了"全卷都是应用题"或"全卷都是基础题"?

六、难度梯度设计

6.1 难度系数 P

P = 班级平均分 / 满分

按测评目的预设:
  诊断性:P 目标 0.55-0.70(适中偏易,照顾基础学生)
  形成性:P 目标 0.65-0.80(适中,符合课程标准)
  终结性:P 目标 0.55-0.75(适中偏难,区分度好)
  选拔性:P 目标 0.35-0.55(难,拉开差距)

6.2 难度梯度比例

形成性测评(最常见):

  基础题  50%  → 全体学生应会
    P > 0.85,直接套用规则
    占比 50%,分值 50%

  中等题  30%  → 大部分学生应会
    P 0.55-0.85,一步变形
    占比 30%,分值 30%

  提升题  15%  → 优等生主战场
    P 0.30-0.55,综合应用
    占比 15%,分值 15%

  挑战题  5%   → 拔尖学生展示
    P < 0.30,跨章迁移
    占比 5%,分值 5%

6.3 区分度 D

D = 高分组得分率 - 低分组得分率
  D > 0.40 优秀
  D 0.20-0.40 良好
  D < 0.20 不足

每道题都应 D > 0.20;
D < 0.20 的题说明"所有学生都错"或"所有学生都对",
应改题或删题。

七、题目筛选与改编

7.1 题目信息表

每道被选中的题目必须有以下完整信息:来源(出处 + copyrightStatus + 改编记录)、测评目标(知识点/认知层次/预期难度)、内容(题干/答案/评分标准)、质量预测(预估 P / 预估 D / 预估完成时间)。

📎 完整模板见 references/exam-blueprint.md §三(题目信息表空白模板)

7.2 改编原则

■ 改数(参数)
  原题 y=2x+1 → 改编 y=3x-2
  适合:同一知识点不同参数

■ 改问(设问角度)
  原题"求 X" → 改编"判断 X 是否正确"
  适合:换角度测同一概念

■ 改情境(背景)
  原题"出租车" → 改编"网约车"
  适合:让题目更贴近学生生活

■ 改综合度
  单知识点 → 多知识点综合
  适合:测评综合应用能力

7.3 题目版权管理

✅ 自有:老师原创或组内原创
✅ 公开可引用:教材例题、CC 协议资源
⚠️ 仅存索引:教辅原题只记题号,不复制题干
❌ 禁止:未授权复制教辅原题

若引用改编题,必须标注"原题出处 + 改编点"。

八、评分标准生成

每道题配 1 份评分标准。

8.1 评分标准模板

结构:过程分(分步骤给分 + 关键概念/规则)+ 结果分(答案正确 + 单位/格式)+ 常见错误与扣分 + 满分模板。

📎 完整模板见 references/exam-blueprint.md §四(单题评分标准空白模板)

8.2 评分标准严格化

■ 过程分细化
  关键步骤必须给过程分(不能跳过)
  步骤 1 + 步骤 2 + 步骤 3 = 过程分
  避免"答案对了就给满分"的粗放评分

■ 结果分明确
  答案对 + 过程对 = 满分
  答案对 + 过程有错 = 部分分
  答案错 + 过程对 = 部分分

■ 评分一致性
  不同老师按本标准改出来差距应 < 3 分
  若差距 > 5 分,说明标准不够明确

8.3 简明答案评分(客观题)

选择题 / 填空题 / 判断题:
  正确答案:[X]
  错误答案扣分:全错 0 分,部分对酌情

简答题(无固定过程):
  关键点 ①([M] 分):[具体内容]
  关键点 ②([M] 分):[具体内容]
  表达清晰度([M] 分):[酌情]

九、考后分析建议

9.1 试卷质量分析

■ 整体质量
  · 实际 P:[   ](与目标 P 对比)
  · 实际 D:[   ](区分度评估)
  · 实际平均分 / 中位数 / 标准差
  · 优秀率 / 及格率 / 低分率

■ 题目质量
  · D < 0.20 的题:[列表] → 改题或删题
  · P > 0.95 的题(太易):[列表] → 升级为讲解素材
  · P < 0.30 的题(太难):[列表] → 拆分或降级

9.2 知识点热力图

┌────────────────────────────────────┐
│ 知识点得分率热力图                   │
├────────────────────────────────────┤
│ 知识点① 🟢 82%                     │
│ 知识点② 🟡 56%                     │
│ 知识点③ 🔴 32%  ← 共性弱项        │
│ 知识点④ 🟡 65%                     │
│ 知识点⑤ 🔴 38%  ← 共性弱项        │
└────────────────────────────────────┘
图例:🔴 < 40% / 🟡 40-70% / 🟢 > 70%

9.3 写回 student-analyzer

写:
  · 各题得分率
  · 各知识点得分率
  · 各认知层次得分率
  · 区分度异常的题目

→ student-analyzer 接收后生成:
  · 班级画像
  · 个体诊断卡
  · 教学调整建议

十、与上游/下游 SKILL 的协作

10.1 协作流图

              ┌────────────────────────┐
              │ xiaozhi-teach-         │
              │  lesson-planner        │
              │ (教学目标)           │
              └───────────┬────────────┘
                          │
                          ↓
              ┌────────────────────────┐
              │ xiaozhi-teach-         │
              │  exam-designer         │
              │  (本 SKILL)           │
              └───────────┬────────────┘
                          │
                          ↓ 得分率反哺
              ┌────────────────────────┐
              │ xiaozhi-teach-         │
              │  student-analyzer      │
              │ (学情更新)           │
              └───────────┬────────────┘
                          │
        ┌─────────────────┼─────────────────┐
        ↓                 ↓                 ↓
  lesson-planner    assignment-     classroom-coach
  (教案调整)      designer        (讲评策略)
                    (作业调整)

10.2 接口

读:
  lessonPlan.emphasis       → 试卷侧重点
  studentAnalyzer.classDistribution → 难度梯度参考
  studentAnalyzer.weaknessRank      → 必须覆盖的弱项

写:
  examBlueprint.actualDifficulty → 实际难度
  examBlueprint.discrimination  → 实际区分度
  examBlueprint.itemQuality     → 题目质量评估
  examBlueprint.scoreRate       → 得分率(→ student-analyzer)

十一、字段级高敏信息防护

✅ 试卷中可出现学生真实姓名(如:座位号、学号)
❌ 试卷分析报告禁止点名
✅ 写回数据:聚合得分率
❌ 不写回:单个学生分数+排名

✅ 试卷讲评可以用化名
❌ 禁止:把"差生"试卷公示

十二、行为准则

✅ 应该做 ❌ 不能做
双向细目表先于出题 直接从题库拼凑
每题配评分标准 只画对错
难度按测评目的设计 全卷偏难或全卷偏易
区分度 D > 0.20 接受 D < 0.20 的题
标注题目版权 复制未授权教辅原题
考后分析反哺教学 考完就归档
写回数据用聚合形式 在公开报告中点名

十三、与其他 SKILL 的协同清单

测评设计师
    <── xiaozhi-teach-lesson-planner(教学目标)
    <── xiaozhi-teach-student-analyzer(学情分层)
    ──→ xiaozhi-teach-student-analyzer(得分率反哺)
    ──→ xiaozhi-teach-lesson-planner(教案调整)
    ──→ xiaozhi-teach-assignment-designer(作业调整)
    ──→ xiaozhi-teach-classroom-coach(讲评策略)
    ──→ 学科专项 SKILL(题目生成)

禁止行为: - 禁止 AI 凭空生成具体题目内容 - 禁止复制未授权教辅原题 - 禁止考后在公开报告中点名 - 禁止用分数给学生贴长期标签 - 禁止在试卷讲评中羞辱低分学生


十四、参考资源

  • references/exam-blueprint.md — 试卷蓝图、双向细目表(§二)、题目信息表(§三)、评分标准(§四)、考后分析、试卷讲评设计等空白模板

💡 小智说: "好的试卷不是用来难倒学生的, 是用来照亮他们的—— 照亮已经掌握的,照亮还没掌握的, 照亮老师下一步该讲什么。"

🤖 AI 评测

这个技能质量很不错,专业度高,文档写得很详细。它把试卷设计从"随便拼凑"升级为科学测评,有完整的流程指导和模板参考,还能和其他教学工具配合使用。边界划定清晰,不会做超出能力范围的事。不足之处是缺少实际使用示例,普通老师可能需要一些案例来理解怎么用它出卷。

📊 多维度评分

适应性4.4
规范性4.5
有效性4.8
可靠性4.3
可信度5

📁 包含文件 (4 个)

📄 SKILL.md 17.4 KB
📄 _meta.json 146 B
📄 references/exam-blueprint.md 9.1 KB
📄 skill-card.md 2.5 KB