首页 > 其他分享 >hadoop9

hadoop9

时间:2022-11-29 11:25:59浏览次数:52  
标签:文字 Map 硬件资源 MapReduce PB hadoop9

MapReduce

MapReduce 的含义就像它的名字一样浅显:Map 和 Reduce (映射和规约) 。

大数据处理

大量数据的处理是一个典型的"道理简单,实施复杂"的事情。之所以"实施复杂",主要是大量的数据使用传统方法处理时会导致硬件资源 (主要是内存) 不足。

现在有一段文字 (真实环境下这个字符串可能长达 1 PB 甚至更多) ,我们执行一个简单的"数字符"统计,即统计出这段文字中所有出现过的字符出现的数量:

标签:文字,Map,硬件资源,MapReduce,PB,hadoop9
From: https://www.cnblogs.com/chenyutong0321/p/16934870.html

相关文章