哈尔滨工业大学教授刘挺:自然言语处理的十个发展趋向

图灵汇官网

哈尔滨工业大学教授刘挺:自然语言处理的十大趋势

近日,由多家机构联合举办的第三届中国人工智能大会(CCAI 2017)在杭州隆重召开。此次大会的首个分论坛围绕语言智能领域的八大议题展开讨论。哈尔滨工业大学刘挺教授对自然语言处理的发展趋势进行了详细的阐述,将其归纳为十个关键方向。

趋势一:语义表示——从符号表示到分布式表示

长期以来,自然语言处理依赖于符号表示,这种方式虽然直观但存在诸多局限。例如,荷兰和苏格兰这两个国家名称尽管词性相近但词形不同,计算机可能会误判为两个不同的概念。而通过将词汇映射到连续、低维度、密集的向量空间中,我们可以计算出不同词汇之间的相似度。这种方法不仅可以通过神经网络直接应用,还能显著提高自然语言处理的效率。

随着研究的深入,人们逐渐认识到从词汇、短语到句子乃至篇章的处理方式发生了根本性的变化。借助深度学习,自然语言处理不再需要分层次处理,而是通过端到端的方式实现信息抽取,大大提高了处理的灵活性和准确性。

趋势二:学习模式——从浅层学习到深度学习

过去,自然语言处理采用的是浅层学习模式,通常需要分步骤逐步完成。然而,深度学习的出现改变了这一现状,它可以在单次训练中完成端到端的学习任务,从而避免了复杂的中间环节。尽管如此,深度学习依然需要大量数据支持,且其网络结构的调整仍是决定其性能的关键因素。

趋势三:NLP平台化——从封闭走向开放

在过去,研究人员往往不愿意公开自己的研究成果,但现在情况已经大为改善。无论是高校还是大型企业,都在积极提供开放的平台,使得自然语言处理领域的资源更加丰富,门槛也逐渐降低。这种开放的态度有助于推动整个行业的进步和发展。

趋势四:语言知识——从人工构建到自动构建

AlphaGo的成功表明,机器可以通过自我学习和迭代超越人类的认知水平。同样地,自然语言处理领域也在经历类似的转变,从人工构建语言知识库转向自动构建。这种方法不仅节省了大量的人力成本,还能更好地适应复杂多变的语言环境。

趋势五:对话机器人——从通用到场景化

对话机器人最初的目标是模仿人类对话,但由于缺乏上下文理解和实际应用场景的支持,早期的产品效果并不理想。如今,越来越多的研究集中在特定场景下的对话系统,如智能家居控制、客服咨询等。这种针对性的设计不仅能提高用户体验,还能增强系统的实用性和可靠性。

趋势六:文本理解和推理——从浅层分析到深度理解

近年来,谷歌等公司推出了一系列旨在提升文本理解和推理能力的测试平台。通过给计算机提供一篇文章并要求其回答相关问题,可以有效评估其对文本内容的理解深度。这种深度理解能力对于推动自然语言处理技术的发展至关重要。

趋势七:文本情感分析——从事实性文本到情感性文本

情感分析逐渐成为自然语言处理领域的重要研究方向之一。相较于传统的事实性文本分析,情感分析更关注文本背后的情感色彩,这在商业和政府舆情监测中具有广泛的应用前景。

趋势八:社会媒体处理——从传统媒体到社交媒体

随着互联网技术的发展,社会媒体已成为人们获取信息的主要渠道之一。在社会媒体处理方面,从传统媒体到社交媒体的过渡不仅影响了信息传播的方式,还改变了人们对情感、事件等多方面的认知。

趋势九:文本生成——从规范文本到自由文本

文本生成技术近年来取得了显著进展,从生成古诗词到新闻报道,再到写作练习,其应用范围日益扩大。未来的发展趋势是从生成规范性文本向生成自由文本转变,这将为用户带来更多样化的创作体验。

趋势十:NLP+行业——与行业深度融合,创造更大价值

自然语言处理技术的应用正逐步渗透到各行各业之中。从银行、家电到医药、司法等领域,NLP技术都能为其提供强有力的支持。预计在未来,NLP将在医疗、金融、教育和司法等行业发挥更大的作用,为这些领域创造更多价值。

本文来源: 图灵汇 文章作者: 李静