Beyond Representational Similarity: Source-Conditioned Description-Length Gain for Generative Plagiarism Detection and Candidate Source Reranking
作者: Peijia Guo, Wenxuan Xie, ZiGuang Li, Ming Li
分类: cs.CL, cs.AI
发布日期: 2026-08-04
💡 一句话要点
提出源条件描述长度增益以解决生成性抄袭检测问题
🎯 匹配领域: 支柱九:具身大模型 (Embodied Foundation Models)
关键词: 生成性抄袭检测 大型语言模型 描述长度增益 学术诚信 内容重用
📋 核心要点
- 现有生成性抄袭检测方法主要关注AI参与,而忽视源重用,且相似度方法在文本重写后效果不佳。
- 本文提出源条件描述长度增益(SCDG),通过对比可疑文档在有无候选源时的描述长度,量化源的增量预测证据。
- SCDG在多个基准测试中表现优异,尤其在PAN 2025和2026的任务中超越所有基线,显示出其强大的检测能力。
📝 摘要(中文)
大型语言模型(LLMs)对学术诚信和同行评审提出了挑战,而生成性抄袭检测仍然是一个未被充分探索和解决的问题。现有方法主要关注AI参与,而非源重用,且基于相似度的方法在经过大量重写和多源合成后效果不佳。本文提出源条件描述长度增益(SCDG),一种无训练的框架,通过对比可疑文档在有无候选源时的描述长度,计算增量预测证据。实验结果表明,SCDG在多个基准测试中表现优异,确立了其作为源特定内容重用信号的有效性。
🔬 方法详解
问题定义:本文旨在解决生成性抄袭检测中的源重用问题,现有方法在处理经过重写和多源合成的文本时效果不佳,难以有效识别抄袭行为。
核心思路:提出源条件描述长度增益(SCDG),通过对比可疑文档在有无候选源时的描述长度,量化候选源对文档的增量预测证据,从而提高检测的准确性。
技术框架:SCDG框架不需要训练,利用冻结的语言模型计算可疑文档的描述长度,主要包括文档描述长度计算和候选源对比两个模块。
关键创新:SCDG的创新在于其无训练的特性和基于描述长度的增益计算,与传统的相似度方法相比,能够更好地处理文本的重写和多源合成问题。
关键设计:在实现中,SCDG使用了基于token的对数似然增益计算,关注于每个token的预测证据,确保了对源重用的细粒度分析。
🖼️ 关键图片
📊 实验亮点
在PAN 2025的对比基准中,SCDG达到了0.92的精确率、0.97的召回率和0.94的F1值,超越了所有基线。在PAN 2026的多源检索任务中,SCDG的nDCG@10为0.83,召回率为0.96,显示出其在复杂场景下的优越性能。
🎯 应用场景
该研究的潜在应用领域包括学术不端检测、内容审核和版权保护等。通过提高生成性抄袭检测的准确性,SCDG能够帮助教育机构和出版商维护学术诚信,减少抄袭行为的发生,具有重要的实际价值和社会影响。
📄 摘要(原文)
Large language models (LLMs) pose challenges to academic integrity and peer review. Yet generative plagiarism detection remains an underexplored and largely unresolved challenge. Prior work on LLM-generated-text detection targets AI involvement, which may be permissible, rather than source reuse, while similarity-based methods struggle after extensive rewriting and multi-source synthesis. Motivated by the description-length view of probabilistic prediction, in which relevant side information can reduce a target sequence's code length, we introduce Source-Conditioned Description-Length Gain (SCDG), a directional, training-free framework that contrasts a frozen language model's description length of a suspicious document $P$ with and without a candidate source $S$. This contrast yields token-level log-likelihood gains that measure the incremental predictive evidence supplied by $S$. We evaluate SCDG on the PAN at CLEF benchmarks for generative plagiarism. On a PAN 2025-derived pairwise benchmark, SCDG achieves 0.92 Precision, 0.97 Recall, and 0.94 F1, outperforming all baselines; on PAN 2026's multi-source retrieval task, it reaches 0.83 nDCG@10 and 0.96 Recall@100, surpassing all baselines. On a same-topic, same-event Multi-News test, the calibrated gain-distribution SCDG classifier predicts source reuse for only $0.125\%$ of pairs, supporting robustness to topical overlap under this evaluation protocol. These results establish SCDG as a unified and token-decomposable signal for source-specific content reuse under extensive transformation.