spark核心模块

spark core 提供核心功能,其他功能在此基础上拓展

spark sql 操作结构化数据的组件

spark streaming 针对实时数据进行流式计算的组件

spark mlib 机器学习算法库,提供模型评估、数据导入等功能和一些底层机器学习原语,

spark graphx 面向图计算提供的框架与算法库