面向大数据的数据处理与分析算法综述
作者:
作者单位:

南京航空航天大学计算机科学与技术学院/人工智能学院,南京 211106

作者简介:

通讯作者:

周宇,男,教授,E-mail:zhouyu@nuaa.edu.cn。

中图分类号:

TP391.41

基金项目:

国家自然科学基金 (61972197)资助项目;江苏省自然科学基金 (BK20201292)资助项目;青蓝工程资助项目。


Overview of Data Processing and Analysis Algorithms for Big Data
Author:
Affiliation:

College of Computer Science and Technology/College of Artificial Intelligence, Nanjing University of Aeronautics & Astronautics, Nanjing 211106, China

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    大数据处理是近年来广受关注和研究的技术领域,数据挖掘作为从大量数据中挖掘隐藏价值信息的技术,是处理大数据的有效工具。本文主要从数据挖掘的角度对大数据处理算法的研究现状进行分类总结。首先介绍了大数据中针对流式数据分类的方法,包括单模型算法和集成分类算法;其次分别从单机算法和基于分布式并行平台的多机算法两个角度概括介绍了大数据聚类方法以及大数据关联规则挖掘方法;最后总结了现有面向大数据的数据挖掘算法的研究进展并展望未来的发展趋势。

    Abstract:

    Big data processing is a technical field that has received wide attention and research in recent years. Data mining, as a technology for mining hidden valuable information from a large amount of data, is an effective tool for processing big data. This paper mainly classifies and summarizes the research status of big data processing algorithms from the perspective of data mining. Firstly, the methods of big data classification for streaming data are introduced, including single-model algorithms and integrated classification algorithms. Secondly, the clustering methods and association rule mining methods for big data are summarized respectively from the perspective of single-machine algorithms and multi-machine algorithms based on distributed parallel platforms. Finally, the existing research progress of the big data-oriented data mining algorithm is summarized and the prospect of future development trend is put forward.

    参考文献
    相似文献
    引证文献
引用本文

周宇,曹英楠,王永超.面向大数据的数据处理与分析算法综述[J].南京航空航天大学学报,2021,53(5):664-676

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2021-06-21
  • 最后修改日期:2021-08-02
  • 录用日期:
  • 在线发布日期: 2021-10-05
  • 出版日期:
文章二维码
您是第位访问者
网站版权 © 南京航空航天大学学报
技术支持:北京勤云科技发展有限公司