streamDM — 使用 Spark Streaming 挖掘大数据

streamDM，是由华为诺亚方舟实验室开源的使用 Spark Streaming 挖掘大数据的开源软件。Spark Streaming 是核心 Spark API 的一个扩展，它能让多个源的数据流处理成为可能。Spark 是一个可扩展可编程的框架，用于大规模分布式数据集处理。Spark Streaming 接收输入的数据流后将数据分批，再由 Spark 引擎处理，生成结果。