Scala的REPL Shell的调用

最近突然对spark的spark-shell发生了兴趣
它是如何启动scala的REPL的,并且在此前写入了常用的环境变量的呢?
通过查看spark的源码,找到了SparkILoop.scala

import scala.tools.nsc.interpreter.{JPrintWriter, ILoop}

/**
 *  A Spark-specific interactive shell.
 */
class SparkILoop(in0: Option[BufferedReader], out: JPrintWriter)
    extends ILoop(in0, out) {
  def this(in0: BufferedReader, out: JPrintWriter) = this(Some(in0), out)
  def this() = this(None, new JPrintWriter(Console.out, true))

def initializeSpark() {
    intp.beQuietDuring {
      processLine("""
        @transient val sc = {
          val _sc = org.apache.spark.repl.Main.createSparkContext()
          println("Spark context available as sc.")
          _sc
        }
        """)
      processLine("""
        @transient val sqlContext = {
          val _sqlContext = org.apache.spark.repl.Main.createSQLContext()
          println("SQL context available as sqlContext.")
          _sqlContext
        }
        """)
      processLine("import org.apache.spark.SparkContext._")
      processLine("import sqlContext.implicits._")
      processLine("import sqlContext.sql")
      processLine("import org.apache.spark.sql.functions._")
    }
  }
  ...
}

可以看出SparkILoop继承自scala.tools.nsc.interpreter.ILoop
紧接着着看了ILoop的api doc
终于找到了启动ILoop的方法:

import scala.tools.nsc.interpreter.ILoop
import scala.tools.nsc.Settings

val loop = new ILoop
loop.process(new Settings)

使用IntelliJ IDEA编写Scala在Spark中运行

Scala编程完整中文版 PDF

快学Scala (中文完整扫描版) PDF 

Ubuntu 安装 2.10.x版本的Scala 

Spark1.0.0部署指南

CentOS 6.2(64位)下安装Spark0.8.0详细记录

Spark简介及其在Ubuntu下的安装使用

安装Spark集群(在CentOS上)

Hadoop vs Spark性能对比

Spark安装与学习

Spark 并行计算模型

Scala 的详细介绍请点这里
Scala 的下载地址请点这里

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:https://www.heiqu.com/89339a1f24b756dffef6bbd281d334c5.html