论文提出 Reference Abstraction(RA)、Summary Abstraction(SA)和 Abstraction Ratio(AR)三项启发式指标,用于衡量摘要相对源文本的抽取与改写程度。基于100篇XSUM文档及四个模型的实验显示,SA可区分较抽取式与较抽象式摘要,AR还可用于筛查需要人工检查的潜在幻觉样本。
最近 24 小时暂无可用热度快照。