PLUE：面向英文隐私政策的语言理解评测基准

隐私政策向个人提供关于其权利以及个人信息如何处理的信息。自然语言理解（NLU）技术可帮助个人和从业者更好地理解冗长复杂文档中描述的隐私实践。然而，现有使用NLU技术的努力受限于以仅针对单一任务、聚焦特定隐私实践的方式处理语言。为此，我们引入隐私政策语言理解评测（PLUE）基准，一个用于跨多种任务评估隐私政策语言理解的多任务基准。我们还收集了大量隐私政策语料，以支持隐私政策领域特定的语言模型预训练。我们评估了若干通用预训练语言模型，并在所收集语料上继续预训练它们。我们证明领域特定的持续预训练在所有任务上均带来性能提升。