数据蒋堂 | 谈谈临时性计算

作者：蒋步星来源：数据蒋堂本文约2000字，建议阅读5分钟。通过本文带大家评估了一下三种处理临时性计算的优劣。临时性计算，顾名思义，是指临时发生的一些计算需求。这种计算在日常数据处理中很常见，我们举一些例子：应对业务部门的取数需求：比如销售部门想获得进行了某项促销活动前后的销售情况变化信息；数据挖掘算法前的清理准备：将来自各个业务系统的数据（甚至一些企业外部的数据）整理成规则一致的二维表，这些动作常常比挖掘本身耗时还长得多；有业务规则的测试数据生成：测试数据不能完全随机生成，必须满足一定的业务规则以及分布比例；大数据计算的优化方案实验：性能优化是个迭代的过程，需要不断尝试各种计算方案；非日 ………………………………