首页/AI/RAG 与向量库速查/图片与图表信息的处理

图片与图表信息的处理

文档中的架构图、截图与曲线图承载关键信息:可用多模态模型生成图注与要点描述入块、或人工补写图注;描述要与图片锚点关联,回答时引导用户查看原图核对。

RAG 与向量库速查AI更新于 2026-10-12

图片入库条目示例

图片入库条目示例
{
  "type": "figure",
  "doc_id": "manual-v23",
  "anchor": "#fig-3",
  "caption": "图 3 数据流:采集 → 解析 → 切分 → 向量化 → 入库",
  "text": "该图展示离线索引五步流程,上游失败时……"
}
多模态描述可能有误(数字、连线关系):高风险图表保留人工审核环节。

易错点

  • 只索引图注不索引图像内容,问图里内容时无答案
  • 自动图注把曲线读数写错,生成答案引用错误数字

数据来源与参考

  • 多模态模型官方文档(图像理解能力说明)
  • Docling 官方文档(图文结构解析)
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌