微软开源大规模数据处理项目 Data Accelerator

来自：开源中国链接 ：https://www.oschina.net/news/106154/microsoft-open-sources-data-accelerator微软开源了一个原为内部使用的大规模数据处理项目 Data Accelerator。自 2017 年开发以来，该项目已经大规模应用在各种微软产品工作管道上。据微软官方开源博客介绍，Data Accelerator 的一些方法可以更容易地在 Apache Spark 上构建流式传输管道：即插即用：轻松设置输入源和输出接收器，以便在几分钟内建立管道。Data Accelerator 支持从 Eventhub 和 IoThub 取数据，并支持将数据下载到 Azure blob、CosmosDB、Eventhub 等。无代码体验：无需编写任何代码即可设置警报和数据处理。通过规则设计器体验，您可以指定简单和聚合的数据处理，标记和警报。SQL 查询：在 SQL 中编写复杂的处理——无需在 Scala 中工作 ………………………………