Ⅰ 如何运行Spark程序
本文前提是已经正确安装好scala,sbt以及spark了 简述将程序挂载到集群上运行的步骤：
1、构建sbt标准的项目工程结构：SBT项目工程结构图其中：~/build.sbt文件用来配置项目的基本信息（项目名、组织名、项目版本、使用的scala版本或者再次配置些项目所需的依赖包）；project/build.properties文件配置你要使用什么版本的sbt对项目操作；project/plugins.sbt文件是给项目添加所需的插件；project/Build.scala文件是对项目进行些复杂的高级配置；详细的sbt安装配置实用参见博文：
2、到相应目录下编写程序，spark程序必须要创建一个SparkContext实例。SparkContext("master", "projectName", "SPARK_HOME", "yourProject.jar path")
3、sbt compile命令编译程序无错后，sbt package命令将程序打包。默认打包的jar文件存放路径为：项目根目录/target/scala-xx.xx.xx/your-project-name_xx.xx.xx-xx.jar
4、将打包好的jar问价添加到SPAK_CLASSPATH中（在linux中根据作用范围的不同有多种更改环境变量的方式，这里只说我的配置方式：spark根目录下的conf/spark-env.sh文件添加SPARK_CLASSPATH:xxxxxxxx）
5、配置好环境变量后就可以在spark的根目录下使用./run脚本运行你的程序了例如：./run spark.examples.SparkPi spark://masterIP:port注意，如果程序涉及IO操作起默认路径为SPARK_HOME；至于如何修改这个路径，有待研究
转载，仅供参考。
Ⅱ eclipse怎样支持scala
1、scala是什么
其实，scala是 一种语法，类似java，而sbt是 一个构建工具，类似maven,gradle,ant等。在eclipse中只有scala开发环境的插件，可以构建scala project，但是没有sbt 插件，就像没有maven插件的eclipse，只能构建和编辑java project，但是整不了maven project。
2、 构建步骤
1）构建Scala语言环境 ，和java一样，主要分两步：下载软件、配置HOME和Path.
2）安装SBT 工具，下载、配置全局变量（在windows环境中添加sbt.bat脚本，可以直接运行）
3）使用SBT生成一个类似maven 包结构的scala project。
3、实际操作
1）新建一个目录叫 test
2）在test目录中新建文件build.sbt
3）在test目录新建project目录，进入project目录，并新建plugins.sbt，在其中添加
addSbtPlugin("com.typesafe.sbteclipse" % "sbteclipse-plugin" % "2.4.0")
4）在build.sbt中配置工程的name，scala编译环境，依赖等等。如：
import sbt._
import Process._
import Keys._
EclipseKeys.createSrc := EclipseCreateSrc.Default + EclipseCreateSrc.Resource
lazy val commonSettings = Seq(
name := "test",
organization := "com.marsyoung",
version := "0.0.1-SNAPSHOT",
scalaVersion := "2.11.7"
)
lazy val root = (project in file(".")).
settings(commonSettings: _*).
settings(
libraryDependencies ++= Seq(
"junit" % "junit" % "4.4",
"javax.ws.rs" % "jsr311-api" % "1.1.1"
)
)
5）在cmd中进入对应的project目录，即test目录。运行sbt。
6）执行eclipse命令，将对应的项目转化成可以引入eclipse开发工具并且目录结构类似maven的项目。
7）打开已经安装了scala ide的eclipse，导入对应的project，会自动的编译成scala peoject.
4、小提示
SBT配置使其支持本地maven和私服，如下：
在用户根目录下的.sbt文件夹内，在windows下就是C->用户->用户名->.sbt目录下新建repositories文件并插入内容：
[repositories]
local
activator-launcher-local: file:////${activator.local.repository-${activator.home-${user.home}/.activator}/repository}, [organization]/[mole]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext]
activator-local: file:////${activator.local.repository-D:/maven/repo3.3.1}
sohu-public: http://xxx.com/nexus/content/groups/public
typesafe-releases: http://repo.typesafe.com/typesafe/releases
typesafe-ivy-releasez: http://repo.typesafe.com/typesafe/ivy-releases, [organization]/[mole]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext]
sonatype-oss-releases
sonatype-oss-snapshots
maven-central
本地maven地址为：
D:/maven/repo3.3.1