pysentimiento:面向观点挖掘与社会NLP任务的Python工具包
计算与语言
2024-07-16 v3
摘要
近年来,从用户生成文本中提取观点与信息引起了大量关注,这主要归因于社交媒体中空前规模的内容量。然而,社会研究者在使用前沿工具处理这些任务时面临一些问题:这些工具通常置于商业API之后、不支持英语以外的语言,或对非专家而言极为复杂。为解决这些问题,我们提出pysentimiento,一个专为观点挖掘与其他社会NLP任务设计的综合性多语言Python工具包。该开源库以易用的Python库形式提供针对西班牙语、英语、意大利语和葡萄牙语的state-of-the-art模型,使研究者能够利用这些技术。我们针对多种预训练语言模型在各类任务、语言与数据集上的表现进行了综合评估,包括对结果公平性的评价。
引用
@article{arxiv.2106.09462,
title = {pysentimiento: A Python Toolkit for Opinion Mining and Social NLP tasks},
author = {Juan Manuel Pérez and Mariela Rajngewerc and Juan Carlos Giudici and Damián A. Furman and Franco Luque and Laura Alonso Alemany and María Vanina Martínez},
journal= {arXiv preprint arXiv:2106.09462},
year = {2024}
}