如何初始化一个SparkContext

Question

如何初始化一个SparkContext

Answer 1

om pyspark import SparkConf, SparkContext
# local 时URL，本地计算机(从族的概念)
# My App 应用程序名字
conf = SparkConf().setMaster("local").setAppName("My App")
sc = SparkContext(conf = conf)
此时的sc就是一个SparkContext,了SparkContext的实例化对象，即刻就可以创建RDD了。

Answer 2

如何初始化一个SparkContext 我们采用了nginxC模块＋内置在nginx中的K-V数据库（自己开发的），来实现所有的业务逻辑，达到这个目标