从Spark 1.0迁移
Spark 1.0冻结了对于1.X序列的Spark Core的API,里面任意如今可用的API是没有被标记为"experimental"或“developer API",这些API将在未来的版本中被支持。对于Scala用户而言,只改变了分组操作,例如groupByKey
,cogroup
和join
,从返回(Key, Seq[Value])
鍵值对改成返回(Key, Iterable[Value])
鍵值对。
迁移指南请查阅: Spark Streaming, MLlib 和 GraphX.