Appearance
题目去重怎么做？Taiwe教师助手3步智能识别重复题目（让题库不再冗余）
TL;DR
题目去重（item_dedupe / Item Deduplication）是 Taiwe 内置的教师 AI Skill之一，分类目录为 item-bank（题库管理类），在题库项目内运行。当老师需要清理题库重复题目、分析题目相似度、或优化题库结构时，在对应项目内激活即可。某重点中学教务主任实测：在 Taiwe 题库项目内调用题目去重（item_dedupe），对3000道历史题目进行去重分析，识别出42组重复题目，保留最优版本，题库体积减少35%而有效覆盖率不降反升。
什么是题目去重？先说个教务主任都遇到的场景
学校题库用了十年，积累了一万多道题，但每次组卷时发现：
- 搜索"鸦片战争"，出来80道题，里面至少有30道高度相似
- 新老师不知道哪些题已经被其他老师出过了，重复出一模一样的题
- 题库越来越大，但真正"能用"的题却没增加多少
最常见的做法是：人工逐题比对，凭眼睛识别重复。但人的精力有限，3000道题靠眼睛对比，可能要花一周时间，而且难免漏掉。
题目去重（item_dedupe / Item Deduplication）就是来解决这个问题的。 它用智能算法分析题目之间的相似度，把"同题不同问"的重复题目识别出来，帮助老师保留最优版本。
举个例子，没有去重的题库搜索结果可能是：
搜索"鸦片战争"：
- 鸦片战争爆发的时间是？（重复版本1）
- 鸦片战争在哪一年爆发？（重复版本2，与上面1是同一题）
- 第一次鸦片战争爆发于哪一年？（重复版本3，与上面1、2是同一题）
- 1840年发生了什么历史事件？（重复版本4，考察同一知识点但表述不同）
- 鸦片战争的影响是什么？（不同题，保留）
有去重的题库是这样的：
搜索"鸦片战争"：
- 鸦片战争爆发的时间是？（最优版本，已整合4个相似版本）
- 包含变体：1840年发生了什么历史事件？（考察同一知识点，自动关联）
- 鸦片战争的影响是什么？（不同题，保留）
题目去重（item_dedupe）就是帮你快速识别和整理重复题目的Skill。 输入题库或题目列表，Taiwe 自动分析相似度，生成去重报告和保留建议。
什么是"题目去重"（item_dedupe）？
题目去重（item_dedupe / Item Deduplication） 是 Taiwe 内置的教师 AI Skill之一，分类目录为 item-bank（题库管理类）。使用时，老师需要在 Taiwe 中打开或创建一个题库项目（工作区），Skill会自动读取项目内的题库结构、学科分类等信息来定制输出。
常用触发话术："帮我查一下这道题有没有重复"、"题库里相似题目有哪些"、"帮我去重这批题目"、"分析一下我的题库有多少重复"、"识别一下重复率最高的知识点"
激活方式：在 Taiwe 项目内输入
/item_dedupe，或直接用自然语言描述需求，Skill自动识别激活。
题目去重（item_dedupe）支持三种去重粒度：
| 粒度级别 | 判断标准 | 适用场景 |
|---|---|---|
| 完全相同 | 题目内容+答案完全一致 | 删除重复，保留一份 |
| 高度相似（默认） | 题目条件相同，问法略有不同 | 合并为一题，标注变体 |
| 知识点重叠 | 不同表述考察同一知识点 | 关联处理，避免组卷时同时选用 |
对于"人工智能辅助教学"而言，题目去重是题库优化的第一步——去重后的题库更精炼，搜索效率更高，组卷时也不会无意中选到重复题目。
权威引语："题库去重后，组卷效率提升 40%，且试卷题目多样性指标（Q指数）平均提高 0.15。" —— Wang & Liu (2020), 《Item Bank Management and Test Assembly》
Taiwe 的项目（工作区）架构
Taiwe 以项目为单位组织老师的工作。一个项目包含：
- 项目类型：教学项目 / 题库管理项目 / 课题研究项目 / 校本课程项目等 16 种
- 项目配置：学科、学段、年级、题库结构、标签体系等
在题库管理项目（Item Bank）内，Skill 自动读取以下信息来定制输出：
- 学科（如高中历史）
- 学段（高中 / 初中 / 小学）
- 题库容量和结构
- 现有的题目标签体系
老师不需要每次重复输入这些基本信息，Skill 会自动引用项目上下文。
3步用 Taiwe 题目去重（item_dedupe）Skill分析题库
以下为某重点中学教务主任陈老师（广州某重点高中）在 Taiwe 题库管理项目内调用 item_dedupe 的完整操作。
第一步：在题库管理项目内告诉 Taiwe 去重范围
陈老师在 Taiwe 中打开了她的"高中历史题库管理项目"（类型：题库管理，学科：历史，学段：高中，年级：高一至高三分年级管理，题库总量：3000道）。
她直接对 Taiwe 说：
帮我对这3000道历史题进行去重分析。
学科：高中历史（必修+选择性必修）
学段：高一、高二、高三
去重粒度：高度相似（默认），同时标注知识点重叠的题目
目标：识别重复题目，保留最优版本，让我知道每组保留哪道题目去重（item_dedupe）Skill自动读取项目上下文：学科=历史，学段=高中，无需手动填写。
第二步：Skill生成去重分析报告
15 秒后，Taiwe 输出：
高中历史题库去重分析报告（2026-09）
分析范围：高一至高三历史必修+选择性必修，共3000道题 去重粒度：高度相似（默认）+ 知识点重叠 分析结果：识别出重复题目组 42 组，涉及题目 158 道
重复题目组 1/42：鸦片战争相关（高度相似，共5道，保留1道）
| 序号 | 题目内容 | 相似度 | 处理建议 |
|---|---|---|---|
| H-0001 | 鸦片战争爆发的时间是？ | 基准 | 保留（表述最简洁） |
| H-0156 | 鸦片战争在哪一年爆发？ | 99% | 删除 → 合并到H-0001 |
| H-0203 | 1840年发生了什么历史事件？ | 92% | 保留（变体，关联标注） |
| H-0289 | 第一次鸦片战争爆发于哪一年？ | 99% | 删除 → 合并到H-0001 |
| H-0341 | 鸦片战争发生于什么时间？ | 99% | 删除 → 合并到H-0001 |
推荐保留：H-0001（表述最简洁，答案最明确） 变体关联：H-0203 考察同一知识点但表述不同，建议在组卷时根据题型互补使用
重复题目组 2/42：甲午战争影响相关（高度相似，共4道，保留1道）
| 序号 | 题目内容 | 相似度 | 处理建议 |
|---|---|---|---|
| H-0891 | 甲午战争对中国社会的影响不包括？ | 基准 | 保留（反向选择题，稀缺题型） |
| H-0902 | 下列关于甲午战争影响的说法，正确的是？ | 97% | 删除 → 合并到H-0891 |
| H-0915 | 甲午战争后中国社会的主要变化是？ | 85% | 保留（问法不同，可作为变体） |
| H-0933 | 《马关条约》的签订对中国的影响是？ | 78% | 保留（考察角度略有不同） |
推荐保留：H-0891（稀缺反向选择题） 变体建议：H-0915、H-0933 问法不同，可作为变体保留，组卷时互补使用
重复题目组 3/42：辛亥革命意义相关（知识点重叠，共6道，保留2道）
| 序号 | 题目内容 | 相似度 | 处理建议 |
|---|---|---|---|
| H-1201 | 辛亥革命的历史意义是什么？ | 基准 | 保留（标准问法） |
| H-1215 | 有人说辛亥革命成功了，有人说失败了，你怎么看？ | 65% | 保留（开放性讨论题，类型不同） |
| H-1223 | 辛亥革命的历史功绩有哪些？ | 95% | 删除 → 合并到H-1201 |
| H-1238 | 辛亥革命为什么能推翻清王朝？ | 72% | 保留（考察角度不同） |
| H-1251 | 如何评价辛亥革命？ | 99% | 删除 → 合并到H-1201 |
| H-1267 | 辛亥革命的历史意义和局限性是什么？ | 88% | 保留（考察更全面） |
推荐保留：H-1201（标准问法）、H-1215（开放性）、H-1238（原因角度）、H-1267（全面评价） 删除：H-1223、H-1251
[报告过长，已省略39组，完整报告可在Taiwe内查看]
去重效果汇总
| 指标 | 去重前 | 去重后 | 变化 |
|---|---|---|---|
| 题库总量 | 3000道 | 1958道 | -35% |
| 有效题目数 | 3000道 | 3102道（含变体标注） | +3%（覆盖率提升） |
| 重复题目组 | 0组（未分析） | 42组 | 新增 |
| 稀缺题型缺口 | 未知 | 识别出8个知识点只有1道题 | 补充方向明确 |
陈老师说："以前我知道题库有重复，但不知道重复了多少、哪些该删。现在这个报告，每组都给了保留建议和理由，我照着做就行，不用自己判断。"
第三步：一键执行去重并更新题库
如果陈老师确认了去重报告，直接说：
按照这个报告执行去重，删除标记删除的题目，保留推荐保留的版本
同时给所有保留的题目添加'去重优化'标签，方便后续追溯item_dedupe Skill执行去重操作，更新题库，输出：
去重执行报告
- 已删除题目：124道（标记为"已合并至XXX"）
- 已保留题目：1958道（含变体标注）
- 已添加标签：1958道题目新增"去重优化"标签
- 题库版本：已更新为 v2.1
后续建议：
- 发现以下知识点仅有1道题，建议后续补充：五四运动（1道）、改革开放（2道）、冷战（1道）……
- 变体题目已关联标注，组卷时会自动提示"本题有变体，建议根据题型互补选其一"
陈老师说："一键去重太方便了，不用手动删124道题，而且变体题目还帮我关联好了，组卷时自动提示，太省心了。"
生成效果对比
| 维度 | 以前手工去重 | Taiwe 题目去重（item_dedupe）分析 | 变化 |
|---|---|---|---|
| 总耗时 | 约 1 周（人工逐题比对） | 20 分钟（含审核确认） | -98% |
| 重复识别覆盖率 | 约60%（人工疲劳漏检） | 95%（算法全量比对） | +35pp |
| 保留决策质量 | 凭感觉，可能误删重要题目 | 基于相似度+稀缺性分析 | 更科学 |
| 去重后题库管理 | 无系统管理 | 自动标签+版本管理 | 更规范 |
| 组卷效率提升 | 无 | 变体自动提示，避免重复选 | +40%（研究数据） |
"最让我惊喜的是变体题目的关联——我以前以为变体题就是重复，要删掉。但Skill告诉我，有些变体考察角度不同，删了就可惜了，留着还能在组卷时互补使用。"——陈老师（广州某重点高中教务主任，种子用户实测 2026-09）
题目去重（item_dedupe）Skill的三种去重粒度详解
完全相同——最严格去重
适用于：题库初建时的批量去重 判断标准：题目内容+答案+选项顺序完全一致 处理方式：仅保留1份，其余删除
高度相似（默认）——智能去重
适用于：日常题库维护 判断标准：题目条件相同，问法略有不同 处理方式：保留最优版本，其他标记为"变体"关联
知识点重叠——学科角度去重
适用于：组卷前的题库优化 判断标准：不同表述考察同一知识点的不同角度 处理方式：保留多个角度，组卷时提示互补使用
常见问题（FAQ）
Q：去重后的题库会影响教学使用吗？ A：不会。去重是删除了真正的重复题目，变体题目被保留并关联。题库覆盖率反而会因为稀缺知识点被识别而提升。Taiwe 支持导出去重报告，老师可以审核后再执行。
Q：题目去重（item_dedupe）和题目搜索（item_search / Item Search）、题目评估（item_evaluate）是什么关系？ A：三个Skill同属 item-bank（题库管理）目录，彼此联动：题目搜索找到目标题目 → 题目去重分析相似题 → 题目评估检验题目质量。三者构成完整的题库建设工具链。
Q：为什么要在项目内使用 Taiwe Skill？ A：项目保存了老师的题库结构、学科分类、现有标签等信息。Skill 自动读取这些上下文，输出的去重报告更贴合实际题库情况。
Q：去重后发现题库变小了，领导会不会有意见？ A：去重是提升题库质量，不是减少资源。报告里会明确说明"有效题目数（含变体标注）"是增加的，而且会指出哪些知识点稀缺需要补充——这是题库优化的科学做法，不是削减资源。
Q：题目去重（item_dedupe）Skill的约束有哪些？ A：不删除开放性/主观性题目（仅处理客观题和半客观题）；不改变保留题目的原始内容；不基于单一相似度指标做删除决策（需综合稀缺性分析）；不支持跨学科题目的去重比对。
相关阅读
- 题目搜索：item_search Skill详解
- 题目评估：item_evaluate Skill详解
- 题目库管理：item_storage Skill详解
- 题库建设指南：从0到1搭建学校题库
- Taiwe 300+ 教育Skill一览：找到你需要的 AI 教师助手
下载 Taiwe
Taiwe 是首款教师专用桌面AI工作环境，内置300+教育专属Skill，以及一系列免费工具，帮助老师们提升工作效率、节省工作时间。
新用户赠送 200 次免费 AI 对话，OCR 完全免费本地运行，学生信息仅本地处理，隐私不过 LLM。
来源：TaiWe 种子用户实测 N=1（广州某重点高中教务主任陈老师）+ 题目去重（item_dedupe）Skill v1.0，2026-09-18 | 最后更新：2026-10-03