使用MLlib 2+没有星火依赖

问题描述:

由于MLlib使用引擎盖下的微风有使用MLlib与微风的数据结构,使我并不需要整个生态系统的Spark,但仍然可以使用MLlib只能在本地的一种方式?使用MLlib 2+没有星火依赖

你不能做到这一点。即使可以拉取依赖关系,也不能在没有spark-core的情况下使用spark-mllib。

不过,如果你想以独立的方式运行,从MLLib算法,你需要在独立模式下安装的火花。在这种情况下不需要真正的集群,但解决方案显然不会扩展。