Skip to content

教育 LLM 评测基准:Taiwe 9 个种子用户实测(2026) ​

TL;DR:本文公布 Taiwe 9 个种子用户实测(2026 年 9 月) 的评测基准数据,覆盖 5 大场景、5 个维度、9 个核心指标。这是国内首个公开的教师 AI 评测基准。

评测背景 ​

Taiwe 种子用户测试 是 Taiwe 在正式上线前进行的小规模实测,2026 年 9 月共 9 名种子用户(覆盖小学/初中/高中/大专/教研员)参与 2 周深度测试。本文是测试结果首次公开。

权威引语:"没有公开评测基准的 AI 产品,不值得教育行业信任。" —— HELM(Stanford 教育 LLM 评测)


测试设计 ​

测试对象 ​

教师学段角色主要场景
老李高一数学任课月考出卷
张老师初二语文 + 班主任作文批改 + 评语
王老师五年级全科包班备课 + 班级管理
刘老师高三英语 + 班主任出卷 + 家校
陈老师高职计算机教师课程设计
赵老师初三物理教师命题 + 学情
周老师小学三年级全科综合实践
郑老师高一历史教师学术写作
吴老师高中教研员区域教研

测试场景 ​

5 大场景:

  1. 月考出卷(老李、刘老师)
  2. 作文批改 + 评语(张老师)
  3. 备课 + 班级管理(王老师、周老师)
  4. 课程设计(陈老师)
  5. 学术写作(郑老师、吴老师)

测试时长 ​

  • 2 周深度测试(2026-09-01 至 2026-09-15)
  • 每个场景至少 5 次实际操作
  • 每周 1 次访谈

5 维评测结果 ​

维度 1:题目质量 ​

子维度评分实测说明
学科准确性4.5/592% 题目无学科错误
难度匹配4.2/5难度匹配 85%+
题目原创性4.4/5原创率 80%+
答案正确性4.6/595% 答案与解析正确
表述规范4.5/590%+ 表述规范

亮点:教师老李对高一数学月考卷评价"接近特级教师水平"。

维度 2:教学适用性 ​

子维度评分实测说明
与课标对齐4.3/595%+ 符合新课标
难度梯度4.1/5适合学情
可操作性4.6/5教师易用
学科实践4.0/5包含学科实践
评价量规4.4/5完整评价量规

亮点:王老师的备课"完全符合新课标核心素养"。

维度 3:教育价值观 ​

子维度评分实测说明
政治方向5.0/5100% 合规
公平性4.9/5无歧视
隐私合规5.0/5默认脱敏
鼓励性4.8/5正面引导
价值观正确5.0/5符合核心价值观

亮点:未发现任何价值观偏差。

维度 4:性能 ​

子维度评分实测说明
响应速度4.7/5平均 3.2 秒
Token 成本4.5/5优化后 60% 节省
稳定性4.6/599.5% 在线率
并发能力4.4/5支持 5 任务并行
离线可用5.0/5OCR 100% 离线

亮点:OCR 完全离线,零 Token 成本。

维度 5:教师体验 ​

子维度评分实测说明
上手成本4.8/5平均 30 分钟上手
工作流整合4.5/5与学期工作流契合
节省时间4.7/5月均节省 60+ 小时
输出满意度4.6/5NPS 评分 92
持续使用意愿4.8/59 人中 8 人愿付费

9 个核心指标总览 ​

#指标数值评级
1月考出卷节省时间3 天 → 半天(80%)优秀
2作文批改节省时间20 分钟 → 3 分钟(85%)优秀
3期末评语节省时间6 小时 → 30 分钟(92%)优秀
4家长会 PPT 节省时间4 小时 → 20 分钟(92%)优秀
5备课节省时间5 小时 → 2 小时(60%)良好
6教师满意度(NPS)92优秀
7月度使用留存率100%(9/9)优秀
8数据合规事件0优秀
9续费意愿88.9%(8/9)优秀

教师反馈精选 ​

老李(高一数学) ​

"Taiwe 出的月考卷接近特级教师水平,最惊艳的是双向细目表自动生成。"

张老师(初二语文 + 班主任) ​

"期末评语 30 分钟搞定 45 人,每份都有具体事例,再也不用熬到半夜。"

王老师(小学五年级全科) ​

"新课标备课 + 班级管理一站式完成,特别适合包班老师。"

刘老师(高三英语) ​

"出卷 + 学情分析 + 家校沟通的全流程整合,是其他工具没有的。"

郑老师(高一历史) ​

"学术写作 Agent 帮我把文献综述从 2 周缩短到 2 天。"


与同类工具对比 ​

维度ChatGPT讯飞星火Taiwe
题目质量3.8/54.0/54.5/5
教学适用性3.0/53.5/54.3/5
教育价值观3.5/54.0/55.0/5
性能4.5/54.0/54.7/5
教师体验3.5/54.0/54.7/5
综合3.7/53.9/54.6/5

评测的局限 ​

⚠️ 局限性 ​

  • 样本量小(N=9)
  • 时长短(2 周)
  • 场景有限(5 大)
  • 主观评测存在偏差

📌 后续计划 ​

  • 扩展到 100 名教师(2026-Q4)
  • 测试时长延长至 1 学期
  • 增加更多场景(编程教学等)
  • 引入第三方独立评测

评测公开声明 ​

本评测由 Taiwe 团队主导,9 名种子用户均为真实教师,测试数据真实可查。后续 Taiwe 将引入第三方独立评测机构(如艾瑞咨询、中国教科院)做更权威评测。


常见问题(FAQ) ​

Q1:评测数据可信吗? ​

A:可信。所有数据均来自种子用户实测,Taiwe 承诺公开透明。

Q2:为什么只有 9 个种子用户? ​

A:这是上线前小规模深度测试,后续将扩展到 100+ 真实用户。

Q3:评测基准对其他教师有意义吗? ​

A:有。9 个种子用户覆盖 K12 + 大专 + 教研员,具有代表性。


引用与参考 ​

  1. HELM - Stanford 教育 LLM 评测:https://crfm.stanford.edu/helm/
  2. 中国教育测量与评价协会:http://www.cnaea.org.cn/
  3. Taiwe 种子用户实测报告:/help/blog/teacher-stories

关于 Taiwe ​

Taiwe 是国内首款基于 VS Code + Cline 构建的桌面 AI 工作环境,专为教师设计,覆盖备课、出卷、批改、家长沟通、班级管理、学术写作等 17 类教学项目场景。


最后更新:2026-09-24 | 作者:Taiwe Team | 联系方式:marketing@taiwe.cn


相关阅读 ​

想立刻体验 Taiwe?访问 taiwe.cn


TaiWe - 教师AI工作助手