为什么已有Spark和Dask，阿里还要开源自研分布式科学计算引擎Mars？

作者 | 蔡芳芳 采访嘉宾 | 斯文骏 编辑 | Natalie AI 前线导读： 随着数据应用类型的愈加丰富和数据规模的不断扩大，单机早已无法满足超大规模数据计算和分析的需求，分布式才是如今大数据领域的核心关键词。作为数据分析领域非常优秀的 Python 计算库，Numpy、Scipy 能够非常高效地执行单机数值计算，但却无法支持分布式计算，难以满足对海量数据进行分析的需求。为了解决这一痛点，涌现了一批为分布式场景下大规模数据科学计算而生的新计算库 / 计算引擎，比如 Numba、Dask、谷歌开源的 JAX、阿里开源的 Mars 等。阿里的 Mars 自开源之初，就经常被拿来与 Dask 做对比，或被看作 Numpy 的替代者，那么 Mars 与 Dask 到底有何不同？Mars 的终极目标真的是要取代 Num ………………………………