美文网首页
zeppelin初试

zeppelin初试

作者: brucewu_2008 | 来源:发表于2018-01-18 14:51 被阅读0次

代码下载及编译, 或者发布包下载

git clone https://github.com/apache/zeppelin.git
mvn clean package -DskipTests -Pscala-2.11 -Pbuild-distr
=====
http://zeppelin.apache.org/download.html

配置

conf/zeppelin-site.xml
conf/zeppelin-env.sh
这里只设置

export SPARK_HOME=
export SPARK_SUBMIT_OPTIONS=
export HADOOP_CONF_DIR=
及zepplin的监听端口。 

我用的是spark-2.2

启动

./bin/zepplin-daemon.sh start

建立notebook

zepplin.png

错误处理

java.lang.NullPointerException
    at org.apache.zeppelin.spark.Utils.invokeMethod(Utils.java:38)
    at org.apache.zeppelin.spark.Utils.invokeMethod(Utils.java:33)
    at org.apache.zeppelin.spark.SparkInterpreter.createSparkContext_2(SparkInterpreter.java:398)
    at org.apache.zeppelin.spark.SparkInterpreter.createSparkContext(SparkInterpreter.java:387)
    at org.apache.zeppelin.spark.SparkInterpreter.getSparkContext(SparkInterpreter.java:146)
    at org.apache.zeppelin.spark.SparkInterpreter.open(SparkInterpreter.java:843)
    at org.apache.zeppelin.interpreter.LazyOpenInterpreter.open(LazyOpenInterpreter.java:70)
    
删除 hadoop-annotations-2.6.0.jar/hadoop-auth-2.6.0.jar/hadoop-common-2.6.0.jar, 从spark对应的目录下的jars拷贝2.7.3对应的版本。重启zepplin。 

参考资料

https://zeppelin.apache.org/docs/latest/install/install.html#downloading-binary-package

相关文章

网友评论

      本文标题:zeppelin初试

      本文链接:https://www.haomeiwen.com/subject/zhlwoxtx.html