农业大数据学报 ›› 2019, Vol. 1 ›› Issue (1): 38-44.doi: 10.19788/j.issn.2096-6369.190104

• 研究综述 • 上一篇    下一篇

基于深度学习的自然语言处理技术的发展及其在农业领域的应用

崔运鹏1,2,*(),王健1,2,刘娟1,2   

  1. 1. 中国农业科学院农业信息研究所,北京 100081
    2. 农业农村部农业大数据重点实验室,北京 100081
  • 收稿日期:2018-09-20 出版日期:2019-03-26 发布日期:2019-04-04
  • 通讯作者: 崔运鹏 E-mail:cyunpeng@163.com
  • 作者简介:崔运鹏,男,博士,研究方向:农业知识管理、自然语言处理、农业大数据分析

The development of deep learning based Natural Language Processing (NLP) technology and applications in agriculture

Cui Yunpeng1,2,*(),Wang Jian1,2,Liu Juan1,2   

  1. 1. Institute of Agricultural Information, China Academy of Agricultural Sciences, Beijing, 100081
    2. Key Laboratory of Agricultural Big Data, Ministry of Agriculture and Rural Affairs, Beijing, 100081
  • Received:2018-09-20 Online:2019-03-26 Published:2019-04-04
  • Contact: Cui Yunpeng E-mail:cyunpeng@163.com

摘要:

深度学习是本世纪出现的新一代机器学习技术,深度学习技术的发展与应用对现代自然语言处理技术产生了深远的影响。本文讨论了自然语言处理技术在深度学习技术的推动下所取得的主要进展,以及近几年自然语言处理领域出现的新的技术产品和经典案例,特别分析并阐述了深度学习在文本词向量构建、磁性标注与命名实体识别相结合用于词义消歧、卷及神经网络文本自动分类、主题提取及文本内容相关性计算等关键自然语言处理任务中所发挥的重要作用,并介绍了词向量技术在水稻知识领域的作用、农业领域专有命名实体识别以及农业文献内容相关性计算等实际应用案例,并剖析了了相关技术实现细节。最后本文展望了今后一个时期自然语言处理技术的发展方向,以及其在农业领域的应用前景,并阐明了自然语言处理技术对农业领域智能化应用不可或缺的意义。

关键词: 农业大数据, 自然语言处理, 智慧农业, 机器学习:数据挖掘

Abstract:

Deep learning is an emerging but rapidly advancing technology having a profound impact on modern natural language processing (NLP) technology. This paper discusses recent developments of NLP technology driven by deep neural networks (DNN), as well as new products and recent cases. In particular, the paper examines advances relevant to the agriculture domain, such as DNN-based word embedding vector construction, the computational ability to recognize and name domain-specific entities and agricultural literature terms. Additionally, it analyzes the implementation details of related technologies. Finally, the paper reviews the trends and outlook for NLP technology, highlighting the significance of NLP technology for intelligent applications in agriculture.

Key words: Agriculture big data, NLP, smart agriculture, machine learning, data mining

中图分类号: 

  • TP181