环球门户网

mapreduce工作流程(MapReduce)

更新时间:2023-09-06 09:58:16

导读 当前大家对于MapReduce都是颇为感兴趣的,大家都想要了解一下MapReduce,那么小美也是在网络上收集了一些关于MapReduce的一些信息来分...

当前大家对于MapReduce都是颇为感兴趣的,大家都想要了解一下MapReduce,那么小美也是在网络上收集了一些关于MapReduce的一些信息来分享给大家,希望能够帮到大家哦。

MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行运算。

概念"Map(映射)"和"Reduce(归约)",是它们的主要思想,都是从函数式编程语言里借来的,还有从矢量编程语言里借来的特性。

它极大地方便了编程人员在不会分布式并行编程的情况下,将自己的程序运行在分布式系统上。

当前的软件实现是指定一个Map(映射)函数,用来把一组键值对映射成一组新的键值对,指定并发的Reduce(归约)函数,用来保证所有映射的键值对中的每一个共享相同的键组。

本文到此结束,希望对大家有所帮助。

版权声明:转载此文是出于传递更多信息之目的。若有来源标注错误或侵犯了您的合法权益,请作者持权属证明与本网联系,我们将及时更正、删除,谢谢您的支持与理解。