AIGC与数据分析融合,引领商业智能新变革(TOP企业实践)

AIGC与数据分析融合,引领商业智能新变革(TOP企业实践)

  • 前言
  • AIGC与数据分析融合

前言

在当今数字化时代,数据已成为企业发展的核心资产,而如何从海量数据中挖掘出有价值的信息,成为了企业面临的重要挑战。随着人工智能技术的飞速发展,AIGC(人工智能生成内容)与数据分析的融合为企业提供了新的解决方案。

阿里巴巴作为全球领先的科技公司,一直致力于探索和应用前沿技术,以提升企业的数据分析能力和决策效率。在这个背景下,阿里巴巴的 Quick BI 产品在自然语言问数、辅助搭建和洞察等领域进行了深入的研究和实践,并且自研了 BI 领域的大模型。

通过将 AIGC 技术与数据分析相结合,Quick BI 能够帮助用户更轻松地理解和处理数据,以自然语言的方式进行交互,快速获取所需的信息。这不仅大大降低了数据分析的门槛,还提高了数据分析的效率和准确性。

此外,Quick BI 还具备强大的可视化功能,能够将复杂的数据以直观、易懂的方式呈现给用户,帮助用户更好地发现数据中的规律和趋势。同时,Quick BI 的安全体系也非常完善,通过了 ISO 的安全和隐私体系认证,确保用户数据的安全和隐私。

AIGC 技术与数据分析的融合实践,为企业提供了一种全新的数据分析方式,帮助企业更好地应对数字化时代的挑战,实现数据驱动的决策和发展。接下来,我们将深入探讨 Quick BI 在大模型与数据分析融合方面的具体内容和实践成果。

AIGC与数据分析融合

在当今数字化时代,数据分析和商业智能(BI)工具已成为企业洞察数据、优化决策的关键。随着生成式AI的发展,阿里巴巴旗下的Quick BI积极探索大模型与数据分析的融合,为企业提供更智能、高效的数据分析解决方案,引领商业智能的新变革。

在这里插入图片描述

Quick BI是一款连续五年入选Gartner ABI魔力象限的产品,今年继续巩固了在魔力象限中的挑战者地位,并稳步提升。Gartner发布的2024年数据分析和商业智能魔力象限市场分析报告显示,Quick BI在多设备的可视化交互功能、与企业业务系统的集成以及符合中国市场的标准报告制作上具有优势,尤其适合分析开发人员和业务分析师的使用场景。

在这里插入图片描述

近年来,BI分析市场呈现出三大特征。首先,数据科学和机器学习技术的普及使得BI行业逐渐向这些领域靠拢,国际市场上的BI竞品更加注重数据科学家的角色,以实现一站式的算法验证和数据分析,而国内市场在这方面的涉猎相对较少。其次,大模型的应用带来了生成式分析体验,增强了BI端到端和增强分析的能力,如智能助理等新功能使消费者能够更轻松地通过自然语言对话进行数据分析。最后,大模型在自然语言理解和归纳能力方面的突破,使整个BI行业的分析能力得到了质的飞跃,能够更好地理解和处理自然语言数据,为用户提供更准确、高效的数据分析服务。

在这里插入图片描述

BI的技术演进经历了从传统BI到敏捷BI,再到智能BI和AI时代的对话式分析的过程。传统BI依赖于预先定义的数据模型和语义层,用户需要通过复杂的查询和报表工具访问数据,对技术背景和数据库结构有一定要求,数据分析相对固定和有限。敏捷BI则通过更直观的操作方式,如点击按钮、拖拽元素等,降低了技术门槛,使非技术背景的用户也能进行数据分析,提高了分析的灵活性和自主性。智能BI阶段通过大模型提供了更加智能化的数据分析方式,用户只需以自然语言描述分析需求,智能助理便能根据上下文自动理解意图,拆解并执行任务,进一步简化了数据分析过程。AI时代的对话式分析,尤其是在AIGC的加持下,用户可以通过自然的对话与数据交互,提供了全新的端到端交互体验。Gartner认为,到2025年,增强的消费者体验将推动市场对ABI能力的采用率首次超过50%,进而影响更多的业务流程和决策。

Quick BI连续五年入选Gartner报告,具备三大竞争力。首先是灵活,阿里云拥有广泛的销售渠道和灵活的定价方式,Quick BI可以在多个平台上售卖,并提供可定制的功能包和定价模型,适应不同企业的需求,定价模式具有竞争力。其次是可集成,Quick BI与阿里云整个产品系统可组合分析,既可以作为独立工具提供,也是瓴羊大产品组合的一部分。最后是客户成功,阿里云瓴羊通过系统的培训提升用户技能,并颁发证书,推动客户成功。回到产品本身,Quick BI提供分析协同消费的数据可视化分析整体解决方案,具有智能、安全、快速、开放四大特色优势。智能方面,Quick BI的自然语言对话式操作让智能分析的门槛触手可及,其自研的BI领域大模型保障问数准确率在业界领先。安全方面,Quick BI安全体系通过ISO的安全和隐私体系认证,包括权限、水印等六大安全管控能力业界领先。快速方面,自研可控的多模式加速引擎能让10亿条数据查询秒级获取,同时支撑云上百万并发稳定服务,可用性达99.9999%。开放方面,Quick BI提供登录、嵌入、自定义、扩展等多种开放集成能力,可按需接入各类复杂系统。

在大模型与数据分析的融合探索方面,Quick BI针对企业数智化升级过程中业务团队和数据团队难以融合贯通的痛点,进行了产品形态的探索。智能搭建功能通过一键生成报表、对话式图表创建以及智能美化等功能,提升了报表搭建效率。智能问数功能使用户可以通过与智能助手对话,以自然语言获取数据并展示,实现数据集问题的即时回答。智能洞察能力帮助用户快速生成报表摘要,自动检测异常并进行归因诊断,快速发现数据问题和原因。在实现层面,Quick BI基于成熟大模型的基座,结合对BI业务的独特理解,训练出针对BI领域的大模型,并与产品的功能底座相结合,探索出BI和AI结合的最佳实践路径。

在这里插入图片描述

在智能小Q路线选择上,Quick BI最初面临两条道路。第一条道路是基于已有能力进行问述,先有BI,再融合迭代大模型的能力;第二条道路类似于早期开源DEMO项目,先简单对接通用大模型,如调用GPT生成特定SQL,再用开源图表组件展示数据。虽然第二条道路门槛较低,演示效果好,但难以商用,存在图表无交互能力、缺乏权限管控和数据源管理等企业级能力的弊端。因此,Quick BI选择了第一条道路,目前小Q使用了大量的BI能力,如可视化分析能力、成熟的图组件、高端计算能力、多端可消费能力等,还依赖了文件的四大内核引擎,包括建模分析引擎、加速引擎、渲染引擎等。智能小Q在产品上具有快速响应用户提问、直观表达数据、准确识别分析意图、简化高级知识分析等优势。

在这里插入图片描述

智能搭建实践中,智能搭建用自然语言辅助搭建报表,具有生成报表、调整数据、辅助分析和样式美化等功能。生成报表功能可根据选定数据一键生成报表,用户可在此基础上进行增补和调整。调整数据功能允许用户通过文字指令更改字段、名称和统计方式。辅助分析功能可简化多步骤高频操作,通过自然语言实现累计计算、添加条件格式辅助线等操作。样式美化功能可一键美化报表,提供惊艳效果,提升用户视觉和使用体验。

智能问数实践中,NL2SQL基于自然语言交互直接获取数据结果,具有结果可交互、易理解的AI处理过程、企业级功能和多场景支持等特色。结果可交互包括强大的可视化展示能力、结果分享或导出以及数据结果支持图表切换。易理解的AI处理过程使用户能看到AI处理数据的步骤,增加透明度和可信度。企业级功能包括权限分析、主题嵌入、自有系统多端等,满足企业用户需求。多场景支持能处理复杂查询语句,适用于多种使用场景。智能问数的关键处理步骤包括意图识别、数据实体提取和召回、模型改写以及BI系统处理及数据源精确转换。

在这里插入图片描述

在通用智能问数架构设计和实践方面,智能小Q的通用智能架构设计从上到下分为应用层、AI中间层、资源BI以及BI基座。领域模型与通用模型在行业数据和系统逻辑表达上进行了结耦,大模型工具链实现了自动化微调和高效稳定的推理服务。AI中间层位于上层应用和大模型之间,负责任务分发及协同工作,提供自定义的标准结构化语言DSL,完成AI和算子操作的对接,将BI领域大模型的应用编程变成确定性编程。BI基座引擎保证了数据分析的强复用性,承载了从数据连接建模到复杂高级计算和分析的能力。渲染引擎负责图表的可视化展示和交互式分析。

在这里插入图片描述

对于智能问数系统中NL2SQL流程的演进,最初系统定义了DSL,由大模型直接学习并生成,然后通过中间层将DSL在原始数据和知识库中实例化,转换成Quick BI能理解的实际查询参数,最后由引擎转化为物理SQL语句执行数据提取。随着系统支持更多样化的用户意图,为DSL语义准备样本的成本增加,且通用模型不包含DSL内容,团队在单表查询的标准SQL基础上进行扩展,增加抽象函数和高级计算,形成增强的SQL语言,并通过自研语法解析器将其转换成DSL映射,既利用了通用模型的能力,又降低了训练样本的准备成本。

在这里插入图片描述

在BI领域大模型实践中,NL2API负责将用户的自然语言转换为机器可读的API命令及其参数,通过AI技术识别用户意图并生成API指令,调用现有功能执行特定任务,这是一个不断进化的过程,要求扩展智能助理的功能范围并提升执行任务的质量。NL2SQL专注于处理和解释与数据库查询相关的自然语言,通过利用企业级知识库和实际问答数据,结合专门的工程技术,不断学习和优化查询解析能力,采用自定义的DSL涵盖复杂查询场景,引入反问、多轮对话和问题修正等机制,确保模型能精确处理用户查询,将其从理论演示转变为实际生产中的实用工具。

通过Quick BI在AIGC技术与数据分析的融合实践,为企业提供了更智能、高效的数据分析解决方案,推动了商业智能的发展和变革。在未来,随着技术的不断进步,相信这种融合将为企业带来更多的价值和机遇。

参考

https://mp.weixin.qq.com/s/TR1jUpwmq8QMCfIWirYZfQ

大数据AI智能圈 ✨ DATA+AI知识库,
包含DATA+AI的白皮书、研究报告、行业标准 和 实践指南 等资料,
持续更新中,欢迎转存下载关注 ❗️链接🔗:https://pan.quark.cn/s/030c89d26a6b
提取码:3S3D

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/53638.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

jswebrtc 支持 SRS 的 Webrtc 播放器

WebRTC WebRTC(Web Real-Time Communication)是一项实时通讯技术,它允许网络应用或站点在不借助中间媒介的情况下,建立浏览器之间点对点(Peer-to-Peer)的连接,实现视频流、音频流或其他任意数据…

开放式耳机具备什么特点?2024排行前十的四款百元蓝牙耳机推荐

开放式耳机具有以下特点: 佩戴舒适: 开放式耳机通常不需要插入耳道,能减少对耳道的压迫和摩擦,长时间佩戴也不易产生闷热、疼痛或瘙痒等不适,对于耳道敏感或不喜欢入耳式耳机压迫感的人来说是很好的选择。 这类耳机…

ZBrush与Blender雕刻功能哪个更好些?

选择正确的3D软件首先会让你的创作过程更加轻松,尤其是在动画或大片电影制作方面。不同的软件提供不同的功能,并倾向于专注于特定领域,如绘画、动画或雕刻。如果你选择了适合你风格和目标的软件,你可以创作出极具创意的作品。 在…

硬件工程师笔试面试——IGBT

目录 7、IGBT(绝缘栅双极晶体管) 7.1 基础 IGBT结构引脚图 IGBT实物图 7.1.1 概念 7.1.2 结构及原理 7.1.3 IGBT的安全工作区 7.1.4 IGBT分类 7.1.5 IGBT优缺点 7.2 相关问题 7.2.1 如何提高IGBT的开关速度和效率? 7.2.2 IGBT在太阳能光伏系统中的作用是什么,它如…

决策树(Decison Tree)—有监督学习方法、概率模型、生成模型、非线性模型、非参数化模型、批量学习

定义 ID3算法 输入:训练数据集(T { ( x 1 , y 1 ) , ( x 2 , y 2 ) , ⋯ , ( x N , y N ) } \left\{(x_1,y_1),(x_2,y_2),\cdots,(x_N,y_N)\right\} {(x1​,y1​),(x2​,y2​),⋯,(xN​,yN​)}),特征集A阀值 ε \varepsilon ε 输…

Java代码审计篇 | ofcms系统审计思路讲解 - 篇1 | 环境搭建、路由机制

文章目录 Java代码审计篇 | ofcms系统审计思路讲解 - 篇1 | 环境搭建、路由机制1. 前言2. 项目环境搭建3. 项目路由机制3.1. 1)先搜索pom.xml文件,看看使用了什么框架3.2. 2)确定是否是spring的路由机制3.3. 3)确定自写路由机制的…

golang学习笔记05——golang协程池,怎么实现协程池?

推荐学习文档 golang实战大纲golang优秀开发常用开源库汇总golang学习笔记01——基本数据类型golang学习笔记02——gin框架及基本原理golang学习笔记03——gin框架的核心数据结构golang学习笔记04——如何真正写好Golang代码? 协程池是一种用于高效处理任务的机制&…

面试—JavaSE

目录 面向对象三大特征 重载和重写的区别 final和static修饰符 接口和抽象类的区别 String、StringBuilder、StringBuffer的区别 面向对象三大特征 封装、继承、多态 封装 将对象的属性和方法放入到一个类中,通过访问修饰符来控制对类的访问权限 继承 继承是…

【ruby java】登陆功能/邮件发送模版240903

Rails 风格登录系统添加全面而详细的注释,解释每个部分的功能和用途。​​​​​​​​​ 详细注释,解释了每个文件和代码块的功能。以下是一些关键点的总结: 1. 控制器(Controllers): - ApplicationController: …

苏茵茵:以时尚之名,诠释品质生活

在女性追求个性化与自我表达的今天,时尚早已超越了简单的穿着打扮,它成为女性展现自我风格、彰显独特魅力的重要方式。从广泛的兴趣爱好到精心雕琢的个人风格,每一处细节都闪耀着女性对个性独特与自我表达的深切渴望。正是这股不可阻挡的潮流…

强化学习指南:训练过程与评估过程的区别

强化学习指南:训练过程与评估过程的区别 在强化学习(RL)中,训练和评估是两个截然不同但密切相关的过程。本指南将详细解释这两个过程的区别,以及如何正确实施它们。 1. 训练过程 训练是RL中最核心的部分&#xff0c…

Java 中常用内置接口函数

在 Java 8 及以后的版本中,引入了许多函数式编程的特性,其中最重要的就是内置的函数式接口。这些接口使得编写更简洁、可读性更强的代码成为可能。今天我将介绍四个常用的内置接口:Predicate、Function、Consumer 和 Supplier,并提…

static 变量和 static 函数各有什么特点?

static 关键字在 C、C 等编程语言中用于指定变量和函数的存储类型和可见性,其特点如下: static 变量 作用域: 局部静态变量:在函数内部声明,作用域限制在该函数内,但其生命周期贯穿程序整个运行过程。它只…

关于schneider施耐德140模块

SCHNEIDER 140模块是施耐德电气(Schneider Electric)公司生产的一系列工业自动化和控制产品,这些模块通常用于Quantum系列PLC(可编程逻辑控制器)系统中,以实现各种自动化和控制任务。以下是对SCHNEIDER 140…

2024.9.9 Python,有效的括号,三数之和,回溯算法解决括号生成

1.有效的括号 给定一个只包括 ‘(’,‘)’,‘{’,‘}’,‘[’,‘]’ 的字符串 s ,判断字符串是否有效。 有效字符串需满足: 左括号必须用相同类型的右括号闭合。 左括号必须以正确的顺序闭合。…

使用Protocol Buffers传输数据

使用 Google Protocol Buffers(ProtoBuf)与 Kafka 结合来定义和传输数据,可以确保传输数据的结构性、可扩展性和高效性。以下是一个简单的步骤指南,帮助你实现生产者和消费者。 1. 定义 ProtoBuf 消息格式 首先,你需…

笔记整理—内核!启动!—kernel部分(3)init进程—进程1

内核态下干了什么——构建内核。 在init进程中,一个进程有两种状态。1为内核态,init属于内核进程。2.用户态,自己将init转为用户态。从进程1之后的进程就都可以工作在用户态。 内核态中重点干了一件事情,挂载rootfs,找…

ffmpeg 视频编码及基本知识

理论 H264编码原理(简略) 1. 视频为什么需要进行编码压缩 降低视频数据大小,方便存储和传输 2. 为什么压缩的原始数据采用YUV格式 彩色图像的格式是 RGB 的,但RGB 三个颜色是有相关性的。 采用YUV格式,利用人对图像的…

【C语言必学知识点七】什么?还有人不知道什么是柔性数组?还不速来!!!

动态内存管理——详细解读柔性数组 导读一、什么是柔性数组二、柔性数组的特点三、柔性数组的使用四、柔性数组的优势结语 导读 大家好,很高兴又和大家见面啦!!! 在上一篇内容中我们介绍了C/C程序中的内存分区,在C/C…

C++11 --- 可变参数模板

序言 不知道大家有没有细细研究过在 C 语言 中的 printf 函数,也许我们经常使用他,但是我们可能并不是那么了解他。先看一下调用格式:int printf ( const char * format, ... );,在这里的 format 代表我们的输出格式,后…