【OceanBase】使用 Superset 连接 OceanBase 数据库并进行数据可视化分析

文章目录

  • 前言
  • 一、前提条件
  • 二、操作步骤
    • 2.1 准备云主机实例
    • 2.2 安装docker-compose
    • 2.3 使用docker-compose安装Superset
      • 2.3.1 克隆 Superset 的 GitHub 存储库
      • 2.3.2 通过 Docker Compose 启动 Superset
    • 2.4 开通 OB Cloud 云数据库
    • 2.5 获取连接串
    • 2.6 使用 Superset 连接 OceanBase 数据库
    • 2.7 导入数据并创建表
    • 2.8 在 Superset 中创建数据集
    • 2.9 配置可视化图表
  • 三、参考链接

前言

在当今大数据与实时分析快速发展的时代，数据的高效存储、处理与可视化已成为推动业务决策的重要手段。OceanBase作为一款高性能分布式关系型数据库，凭借其卓越的事务处理能力与扩展性，广泛应用于金融、电信等领域。然而，如何将OceanBase的数据资产与强大的数据可视化工具结合，以直观、易懂的方式呈现数据价值，是一个备受关注的话题。

Apache Superset是一款开源数据可视化与数据探索工具，具有丰富的图表和仪表盘功能，支持多种数据库连接和实时交互分析。通过将Superset与OceanBase相结合，企业可以快速构建从数据存储到数据洞察的完整链路，实现更高效、更直观的数据分析与决策支持。

本文旨在详细介绍如何使用Superset连接OceanBase数据库，并通过可视化分析工具进行数据探索和展示。无论您是数据库开发者还是数据分析师，都可以通过本指南，快速掌握从OceanBase到Superset的数据可视化分析流程。

一、前提条件

  • 准备一台云主机实例；

  • 安装好Docker服务；

  • 完成配置并运行 Superset；

  • 准备好可用的数据集；

二、操作步骤

2.1 准备云主机实例

实例信息实例参数备注
主机名superset
操作系统Ubuntu 24.04.1 LTS
系统内核Linux 6.8.0-1016-aws
实例大小m5.2xlarge
vCPU/内存 (GiB)8C/32G

2.2 安装docker-compose

下载docker compose

## To download and install Compose standalone, run:
root@superset:~# curl -SL https://github.com/docker/compose/releases/download/v2.30.3/docker-compose-linux-x86_64 -o /usr/local/bin/docker-compose% Total    % Received % Xferd  Average Speed   Time    Time     Time  CurrentDload  Upload   Total   Spent    Left  Speed0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
100 61.0M  100 61.0M    0     0  19.5M      0  0:00:03  0:00:03 --:--:-- 35.9M## Apply executable permissions to the standalone binary in the target path for the installation.
root@superset:~# chmod +x /usr/local/bin/docker-compose## Test and execute Compose commands using docker-compose.
root@superset:~# ln -s /usr/local/bin/docker-compose /usr/bin/docker-compose

image-20241203223516441

查看docker-compose的版本号。

## root@superset:~# docker-compose version
root@superset:~# docker-compose version
Docker Compose version v2.30.3

2.3 使用docker-compose安装Superset

2.3.1 克隆 Superset 的 GitHub 存储库

git clone --depth=1  https://github.com/apache/superset.git

root@superset:~# git clone --depth=1  https://github.com/apache/superset.git
Cloning into 'superset'...
remote: Enumerating objects: 6775, done.
remote: Counting objects: 100% (6775/6775), done.
remote: Compressing objects: 100% (5505/5505), done.
remote: Total 6775 (delta 2198), reused 3319 (delta 1125), pack-reused 0 (from 0)
Receiving objects: 100% (6775/6775), 97.07 MiB | 16.79 MiB/s, done.
Resolving deltas: 100% (2198/2198), done.
root@superset:~#

2.3.2 通过 Docker Compose 启动 Superset

root@superset:~/superset# export TAG=3.1.1
root@superset:~/superset# docker compose -f docker-compose-image-tag.yml up -d

image-20241203224249154

image-20241203225121443

执行如下命令，初始化Superset。

image-20241203122716643

填入URL：IP地址:8088，输入用户名和密码。均为admin。

image-20241204145351369

2.4 开通 OB Cloud 云数据库

查看实例详细信息。

image-20241204115606101

点击连接，获取链接串。

image-20241204115657932

2.5 获取连接串

  1. 获取公共网络连接；如：xxxxxxxxxxxxxxxx.aliyun-cn-hangzhou-internet.oceanbase.cloud
  2. 安全设置，添加到租户白名单中的 IP 地址可以访问该租户的数据库；如，0.0.0.0/0
  3. 选择数据库和账号获取示例连接串；

image-20241204115752461

2.6 使用 Superset 连接 OceanBase 数据库

打开运行的 Superset 控制台页面，在右上角选择 + > Data > Connect database

image-20241203222417988

在弹出框中，完成如下配置：

  1. 在第一步 Select a database to connect 下，选择 MySQL 数据库类型。
  2. 在第二步 Enter the required MySQL credentials 下，根据在步骤一：获取数据库连接串中的连接串信息依次完成填写HOST，PORT，DATABASE NAME，USERNAME，PASSWORD。也可以自定义DISPLAY NAME的内容。

image-20241203172207255

单击 CONNECT，然后单击 FINISH。

image-20241204140723683

此时，我们就可以看到该数据库已经使用Superset连接。

image-20241203230839322

2.7 导入数据并创建表

导航至OB Cloud数据库控制台，点击导入样本数据。

image-20241204103350634

等待数据导入完成。

image-20241204103600765

数据导入完成。

image-20241204103725671

通过以下命令查看 flights_sample 表中的列名

mysql> use test;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -ADatabase changedmysql> DESCRIBE flights_sample;
+-------------------------+---------------+------+-----+---------+-------+
| Field                   | Type          | Null | Key | Default | Extra |
+-------------------------+---------------+------+-----+---------+-------+
| id                      | bigint(20)    | NO   | PRI | NULL    |       |
| fl_date                 | date          | YES  | MUL | NULL    |       |
| airline                 | varchar(100)  | YES  |     | NULL    |       |
| airline_dot             | varchar(100)  | YES  |     | NULL    |       |
| airline_code            | varchar(10)   | YES  |     | NULL    |       |
| dot_code                | varchar(10)   | YES  |     | NULL    |       |
| fl_number               | int(11)       | YES  |     | NULL    |       |
| origin                  | varchar(10)   | YES  |     | NULL    |       |
| origin_city             | varchar(100)  | YES  |     | NULL    |       |
| dest                    | varchar(10)   | YES  |     | NULL    |       |
| dest_city               | varchar(100)  | YES  |     | NULL    |       |
| crs_dep_time            | int(11)       | YES  |     | NULL    |       |
| dep_time                | decimal(6,2)  | YES  |     | NULL    |       |
| dep_delay               | decimal(6,2)  | YES  |     | NULL    |       |
| taxi_out                | decimal(6,2)  | YES  |     | NULL    |       |
| wheels_off              | decimal(6,2)  | YES  |     | NULL    |       |
| wheels_on               | decimal(6,2)  | YES  |     | NULL    |       |
| taxi_in                 | decimal(6,2)  | YES  |     | NULL    |       |
| crs_arr_time            | int(11)       | YES  |     | NULL    |       |
| arr_time                | decimal(6,2)  | YES  |     | NULL    |       |
| arr_delay               | decimal(6,2)  | YES  |     | NULL    |       |
| cancelled               | tinyint(1)    | YES  |     | NULL    |       |
| cancellation_code       | varchar(10)   | YES  |     | NULL    |       |
| diverted                | tinyint(1)    | YES  |     | NULL    |       |
| crs_elapsed_time        | decimal(6,2)  | YES  |     | NULL    |       |
| elapsed_time            | decimal(6,2)  | YES  |     | NULL    |       |
| air_time                | decimal(6,2)  | YES  |     | NULL    |       |
| distance                | decimal(10,2) | YES  |     | NULL    |       |
| delay_due_carrier       | decimal(6,2)  | YES  |     | NULL    |       |
| delay_due_weather       | decimal(6,2)  | YES  |     | NULL    |       |
| delay_due_nas           | decimal(6,2)  | YES  |     | NULL    |       |
| delay_due_security      | decimal(6,2)  | YES  |     | NULL    |       |
| delay_due_late_aircraft | decimal(6,2)  | YES  |     | NULL    |       |
+-------------------------+---------------+------+-----+---------+-------+
33 rows in set (0.13 sec)mysql> SELECT COUNT(*) FROM flights_sample;
+----------+
| COUNT(*) |
+----------+
|  3000000 |
+----------+
1 row in set (0.17 sec)

2.8 在 Superset 中创建数据集

导航至Superset 控制台，在右上角选择 + > Data > Create dataset。

image-20241204103900667

在 New dataset 页面，完成如下配置：

配置项说明
DATABASE选择在步骤二的 DISPLAY NAME 中定义的数据库名。
SCHEMA选择在步骤一中创建的 OceanBase 数据库。
TABLE选择在步骤三种创建的表。

单击 CREATE DATASET AND CREATE CHART，完成创建数据集。

image-20241204104102593

在创建数据集后，可根据实际情况，选择一个图表类型，单击 CREATE NEW CHART，并根据需求进行图表配置。

image-20241204104300636

2.9 配置可视化图表

效果展示如下

image-20241204105941395

image-20241204110812489

image-20241204110835457

三、参考链接

使用 Superset 和 OceanBase 进行数据分析-V4.3.4-OceanBase 数据库文档-分布式数据库使用文档

Find Open Datasets and Machine Learning Projects | Kaggle

Install Compose standalone | Docker Docs

Docker Compose | Superset

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/diannao/66238.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

余华和他的书

余华和他的书

穿透现实，启迪心灵 引言 今天我们来聊聊中国文学界的一位大佬——余华。这位老兄可不简单，他的文字就像是给社会做“心灵手术”，刀刀见血，却又精准无比。他的作品不仅在中国家喻户晓，在国际上也是响当当的。那么&…
阅读更多...
Go语言的 的数据封装（Data Encapsulation）基础知识

Go语言的 的数据封装（Data Encapsulation）基础知识

Go语言的数据封装（Data Encapsulation）基础知识 引言 数据封装（Data Encapsulation）是面向对象编程（OOP）的核心概念之一。它通过将数据和对数据的操作封装到一个单独的模块中，来实现高度的抽象…
阅读更多...
打造三甲医院人工智能矩阵新引擎（二）：医学影像大模型篇--“火眼金睛”TransUNet

打造三甲医院人工智能矩阵新引擎（二）：医学影像大模型篇--“火眼金睛”TransUNet

一、引言 1.1 研究背景与意义 在现代医疗领域，医学影像作为疾病诊断与治疗的关键依据，发挥着不可替代的作用。从传统的X射线、CT（计算机断层扫描）到MRI（磁共振成像）等先进技术，医学影像能够直观呈现人体内部结构，为医生提供丰富的诊断信息，涵盖疾病识别、病灶定位、…
阅读更多...
计算机缺失x3daudio1 7.dll怎么修复？

计算机缺失x3daudio1 7.dll怎么修复？

电脑运行时常见问题解析与修复策略：以“x3daudio1_7.dll缺失”为例 在软件开发与日常电脑维护的广阔领域中，我们时常会遇到各种系统报错和文件问题。这些问题不仅影响我们的工作效率，还可能对数据安全构成潜在威胁。作为一位经验丰富的软件开…
阅读更多...
WPF区域导航+导航参数使用+路由守卫+导航日志

WPF区域导航+导航参数使用+路由守卫+导航日志

背景：使用ContentControl控件实现区域导航是有Mvvm框架的WPF都能使用的，不限于Prism 主要是将ContenControl控件的Content内容在ViewModel中切换成不同的用户控件 下面是MainViewModel： private object body;public object Body {get { retu…
阅读更多...
通过纯文字引导DeepSeek编写一个简单的聊天机器人~

通过纯文字引导DeepSeek编写一个简单的聊天机器人~

为进一步验证DeepSeek的代码能力 和 自然语言理解力，我花费了大约1个半小时的时间，和DeepSeek仅通过文字对话，编写出一个简单的聊天机器人。 以下是最终运行效果、生成代码、引导沟通过程示例： 一、最终运行效果： 二…
阅读更多...
C/C++中new/delete与malloc/free的区别及对象管理

C/C++中new/delete与malloc/free的区别及对象管理

C/C++中new/delete与malloc/free的区别及对象管理 在C/C++编程中，动态内存管理是一个核心且复杂的话题，其中new、delete、malloc和free是四个经常用于此目的的工具。尽管它们都涉及到内存的分配和释放，但它们在处理对象时的方式和效果却大相径庭。本文将通过示例来说明这些工…
阅读更多...
安卓入门十一 常用网络协议四

安卓入门十一 常用网络协议四

MQTT（Message Queuing Telemetry Transport） MQTT是一种轻量级的、发布/订阅模式的消息传输协议。它被设计用于在低带宽或不稳定网络环境下，实现物联网设备之间的可靠通信。 4.1 MQTT详细介绍 发布/订阅模式：MQTT 使用发布/订…
阅读更多...
ansible-Ad-hoc命令行模式

ansible-Ad-hoc命令行模式

一. 简述： ansible的ad-hoc是一个概念性的名字，是相对于ansible playbook而言。类似于：通过命令行来执行一些简单的，一次性的playbook任务(通俗点就是通过命令行执行一些简单的,而又不需要将命令特殊保存起来的任务)。Ansible提供…
阅读更多...
React 如何进行路由变化监听

React 如何进行路由变化监听

一、使用react-router库（以react-router-dom为例） 1. 历史（history）对象监听 1.1 原理 react-router内部使用history对象来管理路由历史记录。可以通过访问history对象来监听路由变化。在基于类的组件中，可以通过组…
阅读更多...
UE5AI感知组件

UE5AI感知组件

官方解释： AI感知系统为Pawn提供了一种从环境中接收数据的方式，例如噪音的来源、AI是否遭到破坏、或AI是否看到了什么。 AI感知组件（AIPerception Component）是用于实现游戏中的非玩家角色（NPC）对环境和其…
阅读更多...
[SAP ABAP] SMARTFORMS表单开发

[SAP ABAP] SMARTFORMS表单开发

使用事务码SMARTFORMS进入到SMARTFORMS开发界面进行表单开发 SMARTFORMS表单开发相关资料 [SMARTFORMS] 创建样式模板https://blog.csdn.net/Hudas/article/details/144946341?spm1001.2014.3001.5501[SMARTFORMS] 创建FORMhttps://blog.csdn.net/Hudas/article/details/144…
阅读更多...
倍思氮化镓充电器分享：Super GaN伸缩线快充35W

倍思氮化镓充电器分享：Super GaN伸缩线快充35W

快节奏的时代,在旅游、办公等场景下,一款高效、便捷的充电器可以让我们的生活更便捷、高效。今天就给大家推荐一款倍思氮化镓充电器——Super GaN伸缩线快充35W。它具备多重亮点,可以满足我们在许多场景下的充电需求,成为我们的得力助手。 倍思氮化镓Super GaN伸缩线快充35W的亮…
阅读更多...
声音是如何产生的

声音是如何产生的

一、音频概述 RTMP中一般音频采用aac编码，采样率为44100HZ, 每帧1024采样，帧率43，23.2ms一帧 RTC中一般音频采用opus编码，采样率为48000HZ，每帧480采样，帧率100，10ms一帧 通道数（c…
阅读更多...
xr-frame 通过shader去除视频背景色，加载透明视频

xr-frame 通过shader去除视频背景色，加载透明视频

目录 前言 实现思路 获取 XR 框架系统： 注册自定义效果 创建效果对象 渲染通道配置 着色器代码 顶点着色器 片元着色器（颜色分量g达到条件的片元将被透透明） effect-removeBlack 完整代码 wxml中使用 前言 实现了一个用于注册自定…
阅读更多...
CSS——7.CSS注释

CSS——7.CSS注释

<!DOCTYPE html> <html><head><meta charset"UTF-8"><title>css注释</title><link rel"stylesheet" type"text/css" href"a.css"/></head><body><!--头部开始&#xff08;h…
阅读更多...
电子信息硕士面试经验

电子信息硕士面试经验

回顾2024年秋招一些面试常见的问题，主要涉及软件开发和嵌入式部分内容。 1. 浅拷贝深拷贝 深拷贝和浅拷贝是两种不同的拷贝方式，用于复制对象。它们主要区别在于对嵌套对象的处理方式。 浅拷贝：只复制对象的顶层，嵌套对象仍然是共享引用。 深拷贝：递归复制所有对象及其嵌…
阅读更多...
fnm教程

fnm教程

常用命令 // 查看所有远程可供安装的 Node 版本 fnm list-remote// 安装某一 Node 版本 fnm install <version>// 切换某一 Node 版本 fnm use <version>// 查看当前使用的 Node 版本 fnm current// 查看所有已安装的 Node 版本 fnm list// 删除某一 Node 版本 fn…
阅读更多...
物体切割效果

物体切割效果

1、物体切割效果是什么 在游戏开发中&#xff0c;物体切割效果就是物体看似被切割、分割或隐藏一部分的视觉效果。 这种效果常用与游戏和动画中&#xff0c;比如角色攻击时的切割效果&#xff0c;场景中的墙壁切割效果等等。 2、物体切割效果的基本原理 在片元着色器中判断片…
阅读更多...
GTX750Ti打DP补丁

GTX750Ti打DP补丁

背景 咸鱼收了一个二手的GTX750Ti，用于4K60Hz显示器，HDMI接口勉强可以4K60Hz，不过色彩和帧率都不是太正常，理论上它的HDMI接口是不支持的，原本也是打算用DP接口接显示器的，但是发现接DP口之后无法通过bios的vga检测最终一直重启，在华硕B760-K的BIOS中使能CSM是可以使用…
阅读更多...
最新文章

Copyright @ 2022~2023