sparkde四大特点
速度快：比hadoop的mapreduce快100倍；spark处理数据时，可以将中间处理结果存储到内存中；spark提供了非常丰富分算子，可以做到复杂任务在一个spark程序中完成
易于使用
通用性强：spark提供了spark sql、spark streaming、mlib及graphx在内的多个工具库
运行方式：spark支持多种运行方式，包括Hadoop和mesos上同时也支持standalone的独立运行模式，同时也可以运行在云kubernetes上；spark支持从hdfs、hbase、cassandra、kafka等多种途径获取数据
4.spark框架模块
spark core：spark的核心
sparksql：结构化数据的处理
spark streaming：流式计算功能
mllib：机器学习
graphx：图计算