愉快小蘑菇

文章
7
资源
0
加入时间
2年10月24天

大数据处理的重要技术发展小结

按照时间线查看超大规模数据处理的重要技术以及它们产生的年代:可以把超大规模数据处理的技术发展分为三个阶段:石器时代,青铜时代,蒸汽机时代。石器时代石器时代”来比喻MapReduce诞生之前的时期。数据的大规模处理问题早已存在。早在2003年的时候,Google就已经面对大于600亿的搜索量。但是数据的大规模处理技术还处在彷徨阶段。当时每个公司或者个人可能都有自己的一套工具处理数据。却没有提炼抽象出一个系统的方法。青铜时代2003年,MapReduce的诞生标志了超大规模数据.