自然语言处理评测中的问题与对策

Posted 专知

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了自然语言处理评测中的问题与对策相关的知识,希望对你有一定的参考价值。


摘要 自然语言处理中的评测任务引导和推动着技术、模型和方法上的研究。近年来,新的评测数据集和评测任务不断被提出,与此同时,现有评测暴露的一系列问题也限制了自然语言处理技术的进步。该文从自然语言处理评测的概念、构成、发展和意义出发,分类综述了主流自然语言处理评测的任务和特点,进而总结归纳了自然语言处理评测中的问题及其成因。最后,该文参照人类语言能力评测规范,提出类人机器语言能力评测的概念,并从信度、难度、效度三个方面提出了一系列类人机器语言能力评测的基本原则和实施设想,并对评测技术的未来发展进行了展望。


http://jcip.cipsc.org.cn/CN/abstract/abstract3142.shtml


自然语言处理评测中的问题与对策


专知便捷查看

  • 后台回复“NLPE” 就可以获取自然语言处理评测中的问题与对策》专知下载链接

自然语言处理评测中的问题与对策