节俭服务器的火花上下文
问题描述:
是否每个jdbc连接到apache spark thrift服务器创建一个单独的spark上下文?如果答案是“否”,那么如何为每个到节俭服务器的JDBC连接创建一个独立的spark上下文。节俭服务器的火花上下文
答
节俭服务器中的Spark上下文只是一个。 Spark Thrift服务器不适合高并发应用程序访问。
一般来说,Spark每个JVM只支持一个SparkContext。参见[SPARK-2243](https://issues.apache.org/jira/browse/SPARK-2243)。 – zero323