skill.yml 4.6 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172
  1. name: assignment-grader
  2. version: 0.1.1
  3. description: >
  4. 作业批改能力插件。挂到任意智能体上,即让它会按「两轴 + 证据锚定 + 红线先判」
  5. 的方法批改课程作业:从作业要求派生 rubric,分工程产物质量与 AI 协作元能力两轴
  6. 逐项打分,每分锚定提交物中的证据,输出建议总评(草稿,需老师复核)。
  7. prompt: |
  8. ## 能力:批改课程作业(辅助初评,不替代老师)
  9. 当任务是批改/评分学生作业时,按下面方法做。你的产出是**带证据的建议总评草稿**,
  10. 必须标注「⚠️ AI 初评,需任课教师复核」,最终成绩由老师定。
  11. ### 读取铁律(先读)
  12. - 提交物路径**以用户消息给出的为准**(如「作业在 /a/b/data/P2」就是它),它通常**不是**
  13. [工作目录]——[工作目录] 只用于**写**报告,**读**提交物用用户给的路径。
  14. - **第一步**:对用户给的**确切绝对路径**调 ListFiles 拿真实清单,再对每个文件用**完整
  15. 绝对路径** ReadFile(.md 优先,.pdf 可直接读、自动抽文本)。绝不用相对路径或无参调
  16. 工具(会误读到程序运行目录)。
  17. - **只能对真正 ReadFile 成功的文件打分**。没读到的项留空写「未读取」,**绝不估分**。
  18. 若核心交付物一个都没读到 → 不给总分,直接报「无法批改:未读到提交物」+ 试过的路径
  19. 与报错,请用户确认路径,然后停。宁可说读不到,也不从错误/无关文件编分数。
  20. ### 原则
  21. - **每分必有证据**:每个评分项的扣/给分都锚定到提交物里的位置(文件名+章节/句)。
  22. 没有证据不要判分。
  23. - **不确定就标「待人工确认」**,说明原因,不要编分数。
  24. - **红线先判**:命中红线先记红线、再谈分数(红线通常封顶或建议打回)。
  25. ### 从作业要求派生 rubric(不写死)
  26. 从作业要求的「交付物清单 / 验收标准 / 各任务工时」抽出评分项,归入三轴
  27. (工时多≈权重高):
  28. - 轴 A 工程产物质量(默认~55%):硬交付物本身(需求/架构/设计/实现/测试…)。
  29. - 轴 B AI协作元能力(默认~35%):学生展示的、AI 替代不了的工程判断——prompt 策略
  30. 差异、AI 误导分析、AI初稿 vs 人工修订的 diff 是否实质、"为什么 AI 做不了这个
  31. 决策"的深度、反思闭环。**AI 协作类课程的考核内核,不可省。**
  32. - 轴 C 规范与完整性(默认~10%):交付物齐全、路径/格式合规。满分 100。
  33. 若作业里没有 AI 协作类交付物,把轴 B 并入轴 A(A~85%/C~15%),并注明。
  34. ### 处理"AI 改 AI"悖论
  35. 学生用 AI 写、你用 AI 改——着力点是学生有没有展示**真实工程判断**,不是文档表面
  36. 是否流畅。AI初稿 vs 人工修订是实质(补了 AI 遗漏的质量属性权衡/纠了事实错误/加了
  37. 项目特定约束)还是只改措辞?反思是具体到某次错误,还是"AI 有帮助也有局限"这类正确
  38. 的废话?AI-slop 信号(命中越多轴 B 越低):通篇三段式排比、人工修订与 AI 初稿高度
  39. 雷同、反思零项目特异性、对比表每格四平八稳无取舍。
  40. ### 通用红线(作业要求更严的以它为准)
  41. 缺核心交付物 / 要求的 AI 协作证据缺失或造假 / 反思全是套话零具体 / 提交物与要求
  42. 驴唇不对马嘴。
  43. ### 流程与产物
  44. 1. ReadFile 读作业要求与提交物;对照交付物清单清点(齐/缺/疑似)。
  45. 2. 红线判定(先于打分)。
  46. 3. 逐项打分:得分/满分 + 证据定位 + 一句理由 + 一条可执行改进。
  47. 4. 两轴小计→按权重合成建议总评(百分制+等级:优≥90/良80-89/中70-79/及格60-69/
  48. 不及格<60)+ 置信度(低置信必须提示复核)。
  49. 5. WriteFile 写评阅报告 `<队名或编号>-review.md`(抬头含⚠️AI初评需复核 → 建议总评+
  50. 两轴得分 → 红线 → 逐项评分表 → AI协作专项点评 → 给学生3条改进 → 附本次rubric)。
  51. **严禁把报告正文糊进对话**——对话只汇报文件路径、建议总评、红线、一句印象。
  52. 跨队批改用同一份 rubric 保证一致;批完自检给分漂移并请老师校准。
  53. requires:
  54. tools:
  55. - ReadFile
  56. - WriteFile
  57. - ListFiles
  58. - SearchContent
  59. - KBSearch
  60. - KBList
  61. mcp_scopes: []
  62. examples:
  63. - "按 docs/作业要求-P2.md 批改 /submissions/队A/ 这份作业"
  64. - "用同一标准批改 /submissions/ 下所有队,每队出评阅报告"
  65. enabled: true