锚定滑动窗口:面向稳健且不可感知的语言隐写术
计算与语言
2026-04-14 v2
摘要
基于语言模型的语言隐写术通常假设隐写文本在传输时不受修改,这使得它们对即使微小的修改极其脆弱。虽然前期工作通过限制上下文窗口来缓解这种脆弱性,但显著牺牲文本质量。本文提出锚定滑动窗口(ASW)框架以提高不可感知性和鲁棒性。除了最新的 token 外,prompt 和桥接上下文被锚定在上下文窗口内,鼓励模型对被排除的 token 进行补偿。我们将桥接上下文的优化形式化为一种变体的 prompt distillation,并进一步使用自-distillation 策略进行扩展。实验表明,我们的 ASW 在文本质量、不可感知性和鲁棒性方面在 diverse settings 下显著且持续地优于基线方法。代码已公开于 github.com/ryehr/ASW_steganography。
引用
@article{arxiv.2604.09066,
title = {Anchored Sliding Window: Toward Robust and Imperceptible Linguistic Steganography},
author = {Ruiyi Yan and Shiao Meng and Yugo Murawaki},
journal= {arXiv preprint arXiv:2604.09066},
year = {2026}
}
备注
ACL2026 Main