Superset安装部署操作

1、安装Miniconda
2、创建Python3.7环境
- 1、配置国内镜像
- 2、常用命令
3、安装Superset
4、启动Supterset
5、对接MySQL数据源
- 1、安装依赖
- 2、重启superset

1、安装Miniconda

因为安装Superset需要Python3.7的环境，为了实现一个机器不同版本的Python，所以可以通过Miniconda来在不同的Python环境中进行切换

1、下载Miniconda

官网地址：https://conda.io/en/latest/miniconda.html

2、安装

执行命令：bash Miniconda3-latest-Linux-x86_64.sh

接下就是一直回车空格

这里设置安装路径

3、开启一个新的shell窗口

4、设置新窗口不自动开启conda

conda config --set auto_activate_base false

重回base命令：conda activate base

2、创建Python3.7环境

conda自带3.7的python环境，这里主要是为了学习conda命令，所以可以跳过

1、配置国内镜像

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main

2、常用命令

conda create -n superset python=3.7  # 创建环境superset

conda info --envs      # 查看所有环境

#conda remove -n superset --all   # 删除环境superset

conda activate superset      # 切换到 superset 环境

python -V         # 检查环境

conda deactivate       # 退出当前环境

3、安装Superset

1、安装依赖

yum install gcc gcc-c++ libffi-devel python-devel python-pip python-wheel python-setuptools openssl-devel cyrus-sasl-devel openldap-devel

2、升级setuptools和pip

pip install --upgrade setuptools pip -i https://pypi.douban.com/simple

3、安装Superset

pip install apache-superset -i https://pypi.douban.com/simple

4、初始化Superset数据库

superset db upgrade

这里我出现了error：ImportError: cannot import name ‘soft_unicode’ from ‘markupsafe’，是因为markupsafe的问题，解决：pip install markupsafe==2.0.1 将markupsafe进行降级处理

5、创建管理员用户

export FLASK_APP=superset

superset fab create-admin

修改用户时：进入root用户下隐藏文件删除superset.db，然后初始化，重新创建

6、Superset初始化

superset init

4、启动Supterset

1、安装gunicorn

pip install gunicorn -i https://pypi.douban.com/simple ，gunicorn是一个web Server，和java中的tomcat类似

2、启动

gunicorn --workers 5 --timeout 120 --bind 92.168.163.201:8787:8787 "superset.app:create_app()" --daemon

3、停止

ps -ef | awk '/superset/ && !/awk/{print $2}' | xargs kill -9

4、使用启停脚本

#!/bin/bash



superset_status(){

 result=`ps -ef | awk '/gunicorn/ && !/awk/{print $2}' | wc -l`

 if [[ $result -eq 0 ]]; then

  return 0

 else

  return 1

 fi

}



superset_start(){

 source ~/.bashrc

 superset_status >/dev/null 2>&1

 if [[ $? -eq 0 ]]; then

  conda activate superset; gunicorn --workers 5 --timeout 120 --bind 0.0.0.0:8787 --daemon "superset.app:create_app()"

 else

  echo "superset is running."

 fi

}



superset_stop(){

 superset_status >/dev/null 2>&1

 if [[ $? -eq 0 ]]; then

  echo "superset is not run."

 else

  ps -ef | awk '/gunicorn/ && !/awk/{print $2}' | xargs kill -9

 fi

}





case $1 in

 start )

  echo "start superset..."

  superset_start

 ;;

 stop )

  echo "stop superset..."

  superset_stop

 ;;

 restart )

  echo "restart superset..."

  superset_stop

  superset_start

 ;;

 status )

  superset_status >/dev/null 2>&1

  if [[ $? -eq 0 ]]; then

   echo "superset is not run."

  else

   echo "superset is running."

  fi

esac

设置执行权限：chmod +x

后续执行命令：

superset.sh status

superset.sh start

superset.sh stop

5、对接MySQL数据源

1、安装依赖

conda install mysqlclient

hive的依赖：conda install pyhive

2、重启superset