ChatGPT 是否真正理解现代中国诗歌？

ChatGPT在诗歌生成与翻译方面展现出惊人能力, 但其是否能够真正理解诗歌尚未得到探讨。以往诗歌相关研究仅分析实验结果, 而未针对理解的根本问题展开论述。本文引入全面的框架来评估ChatGPT对现代诗歌的理解能力。我们与专业诗人合作, 通过多个维度评估ChatGPT对不同诗人所作现代中文诗的解读。评估结果表明, ChatGPT的解读在超过73%的情况下与原诗人表达的意图相符。然而, 在某些维度尤其是抓住诗意性方面的理解表现不佳。这些发现凸显了我们所提出框架的有效性与必要性。这一研究不仅评估了ChatGPT理解现代诗歌的能力, 也为未来研究LLM及其应用到诗歌相关任务奠定了坚实基础。