还在用 MapReduce？已经被淘汰了

今天是周五，和你分享一篇「大规模数据处理实战」专栏的试读文章，内容翔实，留言也精彩。作者是 Google 大脑工程师蔡元楠。今天我要与你分享的主题是「为什么 MapReduce 会被硅谷一线公司淘汰」。我有幸几次与来 Google 参观的同行交流，当谈起数据处理技术时，他们总是试图打探 MapReduce 方面的经验。这一点让我颇感惊讶，因为在硅谷，MapReduced 大家谈的已经很少了。今天这一讲，我们就来聊聊为什么 MapReduce 会被硅谷一线公司淘汰。我认为可以把超大规模数据处理的技术发展分为三个阶段：石器时代，青铜时代，蒸汽机时代。石器时代：我用石器时代来比喻MapReduce诞生之前的时期。虽然数据的大规模处理问题早已存在，早在2003年的时候，Google就已经面对大于 600 ………………………………