iobes：一个用于跨度级处理的库

自然语言处理中的许多任务，如命名实体识别与槽填充，涉及识别并标注文本的特定跨度。为利用通用模型，这些任务常被重构为序列标注任务：每个词元被赋予标签，并以 B- 或 I- 等特殊前缀标记；模型为每个词元分配标签后，利用这些前缀将词元分组为跨度。正确解析这些标注对生成公平且可比较的评测指标至关重要；然而尽管重要，目前仍缺乏易用、标准化、可程序化集成的库来辅助处理跨度标注。为此，我们推出开源库 iobes。iobes 用于解析、转换和处理以词元级决策表示的跨度。