国内刊号:11-2560/TP
国际刊号:1000-9825
发布日期:
作者:赵京胜,宋梦雪,高祥,朱巧明
单位:赵京胜,青岛理工大学 信息与控制工程学院, 山东 青岛 266520;苏州大学 计算机科学与技术学院, 江苏 苏州 21502111,宋梦雪,青岛理工大学 信息与控制工程学院, 山东 青岛 26652002,高祥,青岛理工大学 信息与控制工程学院, 山东 青岛 26652003,朱巧明,苏州大学 计算机科学与技术学院, 江苏 苏州 21502104
关键词:自然语言处理;文本表示;向量空间模型;主题模型;图模型;深度学习;表示学习
基金:国家自然科学基金(61773276, 61836007)
自然语言处理是人工智能的核心技术, 文本表示是自然语言处理的基础性和必要性工作, 影响甚至决定着自然语言处理系统的质量和性能. 探讨了文本表示的基本原理、自然语言的形式化、语言模型以及文本表示的内涵和外延. 宏观上分析了文本表示的技术分类, 对主流技术和方法, 包括基于向量空间、基于主题模型、基于图、基于神经网络、基于表示学习的文本表示, 进行了分析、归纳和总结, 对基于事件、基于语义和基于知识的文本表示也进行了介绍. 对文本表示技术的发展趋势和方向进行了预测和进一步讨论. 以神经网络为基础的深度学习以及表示学习在文本表示中将发挥重要作用, 预训练加调优的策略将逐渐成为主流, 文本表示需要具体问题具体分析, 技术和应用融合是推动力.
来源:2022年第1期
《软件学报》期刊编辑部