一、Superset二次开发技术
Apache Superset是一个基于Python的可视化数据探索平台,是由Airbnb开源,为现代化的数据分析工具,提供用于探索,可视化和分享数据的直观界面。Superset的二次开发可轻松扩展其内置功能,提供更多自定义需求。以下是一些常用的Superset二次开发技术:
1、Superset使用Python Flask Web框架
from flask import Flask app = Flask(__name__) @app.route('/') def hello_world(): return 'Hello World’ if __name__ == '__main__': app.run()
2、Superset可扩展通过使用开发自定义数据库类型等插件
class MyEngineSpec(BaseEngineSpec): engine = 'my_engine' max_column_name_length = 63 max_table_name_length = 63 espec = MyEngineSpec()
二、Superset二次开发部署
Superset是一个基于Python Flask Web框架的开源Web应用程序,使用Docker部署非常方便,推荐使用Docker Compose。以下是Superset二次开发部署的简单步骤:
1、安装Docker和Docker Compose
$ sudo apt-get install docker.io $ sudo pip install -U docker-compose
2、创建Superset Docker-compose.yml文件
version: '2.1' services: superset: build: . command: bash -c "/app/docker-entrypoint.sh && superset runserver -d" ports: - "8088:8088" environment: - SUPERSET_LOAD_EXAMPLES=yes volumes: - .:/app - ./superset_home:/app/superset_home
3、运行Superset
$ docker-compose up -d
三、Superset二次开发难度
Superset二次开发有一个特点:扩展易,理解难。理解Superset底层框架的架构是必须的,例如sqlalchemy、flask、celery、werkzeug等等。此外,学习前端开发技术及JavaScript语言也是必不可少的。
四、Superset二次开发钻取
Superset通过Druid和SQLAlchemy提供了有效和快速的数据查询和可视化功能。例如,您可以通过Superset创建透视表,交叉表,数字图表等,并通过钻取功能在不同的层次上对数据进行细分。以下是Superset钻取的代码示例:
query_obj = ( db.session.query( column1, column2, func.sum(column3), func.sum(column4) ) .filter(Column1 == x) .group_by(column1, column2) .having(func.sum(column3) > 5) ) return PivotTableBuilder().table_name("Results").pivot_query(query_obj).\ add_column(column1).add_column(column2).add_metric( "sum_column3", func.sum, column3, ).add_metric( "sum_column4", func.sum, column4, ).build()
五、Superset二次开发登录
Superset提供自定义身份验证和登录逻辑的方法,将登陆、鉴权、权限等实现自己的业务逻辑。以下是Superset自定义身份验证的代码示例:
from flask import request from flask_appbuilder.security.views import UserDBModelView from wtforms import Form, StringField class CustomLogin(UserDBModelView): def _handle_user(self, user, next_url): self.update_redirect() if user.auth_provider_type == 'ldap': return self.render_template( 'superset/ldap_error.html', providers=[ p for p in self.appbuilder.sm.auth_user_registration. get_auth_providers() if p.auth_type != 'ldap']) if self.appbuilder.sm.force_password_change_on_first_login and user \ and user.password == conf.get('DEFAULT_PASSWORD'): self.appbuilder.sm.session.add( self.appbuilder.sm.UserSecurity( user=user, password=generate_password_hash( request.form['new_password'], method='sha256'))) self.appbuilder.sm.session.commit() flash("Please login with new password", "warning") return redirect(self.appbuilder.get_url_for_login) return redirect(next_url) class CustomAuthDBView(AuthDBView): login_template = 'superset/custom_login.html' def create_form(self): class LoginForm(self.orig_form): username = StringField(validators=[validators.InputRequired()], default='') password = PasswordField(validators=[validators.InputRequired()], default='') setattr(LoginForm, 'next', HiddenField()) self.form_class = LoginForm def is_token_valid(self, token): return True # token validation code flask_appbuilder_flaskappbuilder.add_view_no_menu(CustomLogin) flask_appbuilder_flaskappbuilder.add_view_no_menu(CustomAuthDBView)
六、Superset使用
Superset提供基本数据探索和可视化功能。以下是一些Superset的使用示例:
1、添加数据集:
进入Superset的主页面,点击“Sources” -> ”+” -> “Database”,选择要添加的数据源类型,并填写相关信息,如数据库类型、连接信息等。
2、创建透视表:
在Superset的主页面,点击“Explore” -> “Table” -> 选择要展现的数据表,选择数据表后,可以选择透视表选项进行设置,并进行数据展示。
3、创建图表:
在Superset的主页面,点击“Explore” -> “Chart” -> 选择要展现的数据表,选择数据表后,可以选择图表类型并进行数据展示。
七、Superset教程
可以通过官网提供的Superset中文教程来学习Superset的基本操作和使用方法,也可以通过Superset社区中提供的论坛、问答社区等参与到Superset的讨论和交流中。
八、Superset前端开发
前端开发是Superset二次开发不可缺少的一部分,通过掌握相关的前端技术,可以实现Superset的定制化需求和自定义开发。以下是一些常用的Superset前端开发技术:
1、Superset使用React和Redux实现前端交互逻辑
import React from 'react'; class MyComponent extends React.Component { constructor(props) { super(props); } render() { returnHello, Superset!
; } }
2、Superset使用D3.js等可视化库来实现数据的可视化展示
var svg = d3.select("body") .append("svg") .attr("width", w) .attr("height", h) .append("g") .attr("transform", "translate(" + margin.left + "," + margin.top + ")");
九、Superset可视化平台
Superset作为一个基于Python Flask Web框架的可视化平台,可以帮助用户发现数据、分析数据、交互式地探索数据,完成对数据的可视化展示。在Superset的平台上,用户不仅可以对已有的数据进行探索和可视化,还可以对各类数据进行拖拽式的展示,并且进行数据钻取等操作。
十、Superset中文教程官网
Superset的官方网址是https://superset.incubator.apache.org/,目前提供了中文版的文档和教程。通过这个网站,用户可以了解最新的Superset的版本和相关特性,并且可以随时下载最新版本。