今天得知了一个Apache的孵化项目zeppelin,特了解一下. Zeppelin是一个Apache的孵化项目.一个基于web的笔记本,支持交互式数据分析.你可以用SQL.Scala等做出数据驱动的.交互.协作的文档.(类似于ipython notebook,可以直接在浏览器中写代码.笔记并共享).…

介绍 用于做数据分析和可视化 一.二进制安装 1)下载二进制包 wget http://mirrors.tuna.tsinghua.edu.cn/apache/incubator/zeppelin/0.5.6-incubating/zeppelin-0.5.6-incubating-bin-all.tgz 2)解压缩 -incubating-bin-all.tgz cd zeppelin--incubating-bin-all bin/zeppelin-daemon.sh start 注:默认端…

资料参考: Apache Ranger – Introduction http://ranger.apache.org/ 阿里云 Ranger简介 Apache Ranger初识 - 阿里云 大数据权限管理利器 - Ranger Ranger初始用…

不多说,直接上干货! 问题详解 org.apache.thrift.TApplicationException: Internal error processing getFormType at org.apache.thrift.TApplicationException.read(TApplicationException.java:) at org.apache.thrift.TServiceClient.receiveBase(TServiceClient.java:) at org.a…

Apache Zeppelin提供了web版的类似ipython的notebook,用于做数据分析和可视化.背后可以接入不同的数据处理引擎,包括spark, hive, tajo等,原生支持scala, java, shell, markdown等.它的整体展现和使用形式和Databricks Cloud是一样的,就是来自于当时的demo. Zeppelin是一个Apache的孵化项目.一个基于web的笔记本,支持交互式数据分析.你可以用SQL.Scala等做出数据驱动的.交互.协作的文档.(类…

1. 简介 Apache Zeppelin 是一个提供交互数据分析且基于Web的笔记本.方便你做出可数据驱动的.可交互且可协作的精美文档,并且支持多种语言,包括 Scala(使用 Apache Spark).Python(Apache Spark).SparkSQL. Hive. Markdown.Shell等等.当前Hive与SparkSQL已经支持查询Hudi的读优化视图和实时视图.所以理论上Zeppelin的notebook也应当拥有这样的查询能力. 2.实现效果 2.1 Hive 2.1…

在启动Zeppelin时遇到了该问题: [root@quickstart bin]# ./zeppelin-daemon.sh restart Please specify HADOOP_CONF_DIR if USE_HADOOP is true ./zeppelin-daemon.sh: line 268: /opt/soft/Programs/zeppelin-0.9.0-bin-all/logs/zeppelin-root-quickstart.cloudera.out: No such…

Overview Apache Shiro is a powerful and easy-to-use Java security framework that performs authentication, authorization, cryptography, and session management. In this documentation, we will explain step by step how Shiro works for Zeppelin notebook a…

参考文章: Apache Airflow (incubating) Documentation — Airflow ... 任务调度神器 airflow 之初体验 airflow 介绍 - 简书(原文:http://lxwei.github.io/posts/airflow%E4%BB%8B%E7%BB%8D.html) Apache Airflow官网:https://airflow.apache.org/…

Shrio是什么? Shrio是一个用Java开发的安全框架,用来保证系统或系统数据安全的.他可以用在大多数程序上,比如移动应用程序.Web程序或者大型的企业应用程序等. Shrio能干什么? 能用来做身份验证(如:用户名和密码登陆的验证).授权(如:判断登陆的用户是否具有某个权限).加密(把密码进行MD5加密成一串代码).会话管理(类似于Web程序的Session管理)等等. 这里用web程序举例子: 通常用户请求一个资源或者访问一个功能的时候,需要检测下用户是不是登陆状态或者说检测下登陆的用…