页面树结构
转至元数据结尾
转至元数据起始

正在查看旧版本。 查看 当前版本.

与当前比较 查看页面历史

« 前一个 版本 3 下一个 »

Spark版本升级

1、导入Spark新镜像

获取新的spark镜像,上传到高性能版本部署服务器,并导入

docker load < Smartbi-Spark.tar     #镜像导入到docker中
docker tag localhost:5000/smartbi-spark:V9.6 服务器IP:5000/smartbi/smartbi-spark:V9.6   #注意将服务器IP替换成实际部署rancher控制台的服务器内网IP地址
docker push 服务器IP:5000/smartbi/smartbi-spark:V9.6    #注意服务器IP替换成实际部署rancher控制台的服务器内网IP地址,将镜像上传到harbor中

2、停止Spark服务

登陆Rancher控制台,勾选 smartbi-spark-master和 smartbi-spark-worker1 服务,点击暂停编排

3、更新Spark服务挂载目录

获取新的Spark挂载文件,上传到高性能版本部署服务器中,并解压到指定目录。

tar -zxvf spark-3.0.0-bin-hadoop2.7.tar.gz -C /opt

进入<高性能版本安装目录>/smartbi_data/目录,例如:

cd /data/Smartbi_All/smartbi_data/

备份原有的Spark服务挂载目录,并将新的挂载目录移动到<高性能版本安装目录>/smartbi_data/下,注意替换实际的目录。

mv smartbi-spark smartbi-spark_bk
mv /opt/spark-3.0.0-bin-hadoop2.7  /data/Smartbi_All/smartbi_data/smartbi-spark

4、升级Spark版本

登陆Rancher控制台

①选 smartbi-spark-master服务,点击查看/编辑YAML,如下图所示

找到smartbi-spark:V9.0修改成smartbi-spark:V9.6,参考下图:

修改完成后点击保存

②选择 smartbi-spark-worker1 服务,参考smartbi-spark-master服务修改方法,将配置文件中的smartbi-spark:V9.0修改成smartbi-spark:V9.6,保存

③勾选smartbi-spark-master服务和 smartbi-spark-worker1 服务,点击恢复编排,等待容器启动成功。

④服务启动成功后可查看对应日志是否有报错。

浏览器打开http://IP:32002/ 检查Spark版本

登陆smartbi,点击数据挖掘,运行挖掘实验查看是否运行成功,运行成功则说明Spark服务更新成功。

  • 无标签