10.3969/j.issn.1000-386x.2014.06.007
海量数据离散化算法的并行设计与实现
连续属性的离散化是机器学习和数据挖掘的重要预处理步骤,如何高效处理海量数据连续属性离散化已成为急需要解决的问题.近年来兴起的Hadoop技术能够有效处理基于海量数据的应用.为此,设计和实现一种基于MapReduce编程模型的连续属性离散化并行算法,并给出算法设计的方法和策略.在保证离散效果的情况下,使用不同大小数据集在不同节点的集群环境下的实验结果表明,所设计的并行离散化算法具有较高的执行效率和较好的可扩展性,适合用于海量数据的快速离散化处理.
海量数据、并行化、连续属性离散化、Hadoop
31
TP18(自动化基础理论)
中国博士后科学基金项目20110491530;辽宁省教育厅基金项目L2011186;大连市科学技术基金项目2010J21DW019
2014-08-20（万方平台首次上网日期，不代表论文的发表时间）
共4页
21-23,28
