首页/AI/提示词工程速查/分块处理模式(Map-Reduce)
模式与框架50 条

分块处理模式(Map-Reduce)

长文档先分块分别处理(map:每块摘要或抽取),再对中间结果汇总(reduce:合并、去重、定稿);是长材料处理的通用套路。

提示词工程速查AI更新于 2026-10-12

两阶段结构

两阶段结构
Map:每块单独调用 → 输出「要点 + 数字 + 疑点」的结构化小结
Reduce:合并全部小结 → 去重、按主题归类 → 生成总结果
(块之间可并行;Reduce 输入超长时再分层归并)
要点块间重叠 10-15% 防切断语义;中间产物结构化便于合并
去重Reduce 明确“合并同义项,冲突时并列两种说法”
适用长报告总结、多文件抽取、批量点评

易错点

  • 块边界切断表格或论证会产生遗漏;重叠窗口与按结构切分都要考虑
  • Reduce 阶段直接拼接小结会超长,需要分层归并或压缩要点

数据来源与参考

  • The Prompt Report(Schulhoff et al., 2024):分块与并行处理相关章节
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌