Spark配置 Spark提供三个位置配置系统: Spark属性控制大多数应用程序参数，可以通过使用SparkConf对象或通过Java系统属性进行设置。 可以使用环境变量在每个节点上通过conf/spark-env.sh脚本设置每台机器的设置，例如IP地址。 可以通过log4jb.properties配置日志记录。 Spark属性控制大多数应用程序设置，并为每个应用程序单独配置。这些属性可以直接设置SparkConf传递给你的SparkContext。SparkConf允许您配置一些常用属性(例如主URL和应用程序名称)，以及通过set()方法配置任意键值对。例如，我们可以用如下两个线程...