解决智能推荐时代的“信息过载”，不妨从数据及存储层入手

文章预览

我们的数据集群目前规模过万，总数据量以 EB 计，日新增数据量则以 PB 计…… 这些数字来自某移动互联网企业在一次技术交流活动上对自家数据处理能力的介绍。先不说EB，就说说1PB是什么概念吧？大约是2亿张照片或2亿首MP3音乐，如果一个人不停地听这些音乐，能听上1900年。 大家可能会惊叹于这家企业强大的数据处理能力，但并非所有企业都具备同样的能力——激增的数据量如果超过了数据处理能力，就会导致“信息过载“问题，为此，人类发明了能够过滤信息的“搜索引擎”和“推荐系统”，用以高效识别和应用那部分“至关重要”的数据。 然而，据国际数据公司IDC在报告《数据时代2025》 中的预测，到2025年，属于数据分析的全球数据总量将增长至原来的50倍 ………………………………