StarRocks 1 月社区动态(2024)

StarRocks 在 2023 年不断进化,锤炼核心功能,打磨全新特性,成功实现了从全场景 OLAP 到云原生湖仓的全面升级,成为湖仓新范式的造浪者。2024 年,我们期待与您一同续写新篇章,共同迈向“极速统一”的新征程!新的一年,也请大家查收最新一月的社区动态。

这么多精彩的内容,不要错过了

技术动态

版本发布

3.1.7

3.0.9

2.5.18

二进制包下载:

https://www.mirrorship.cn/zh-CN/download

文档动态

中文文档

文档

  • 「部署 > 检查环境配置」:增加参数配置持久化内容。

  • 「表设计 > 索引」

  • 表设计中增加“索引”章节,包括索引概述,重构前缀索引和排序键,将 Bitmap 索引和 Bloomfilter 索引调整到该章节。

  • 统一“数据模型”的用词,将“数据模型”统一改为“表类型”。各类型的表统一为明细表、主键表、聚合表、更新表。

  • 「管理手册 > 运维集群」

    • BE 配置项:补充 Compaction 相关参数。
  • 「参考」

    • 「SQL」:优化“用户账户管理”下 SQL 的权限要求。

    • 「函数」:时间函数 date_trunc, adddate, time_slice, date_sub 支持毫秒和微秒 interval。

    • 「系统变量」:补全 SQL mode 的选项。

  • Release notes: 发布 kafka connector,k8s operator 的 release notes

文档网站

  • 将 Release Notes 从左侧导航树移动到右上角。

  • 每个页面底端增加 Feedback 反馈按钮,支持用户对文档做出打分和文字反馈。

StarRocks 文章回顾

技术内幕:

Apache InLong 实时同步数据到 StarRocks 原理与实践

StarRocks 支持通过 Stream Load 方式实时写入数据,为进一步提升导入效率,从 2.4 版本实现了新的事务接口,本文主要介绍 Stream Load 事务接口实现原理,以及 InLong 基于事务接口实现实时同步数据到 StarRocks 的实践。

StarRocks 生成列:百倍提速半结构化数据分析

生成列功能是一种加速半结构化分析的有效手段,当面对复杂的半结构化表达式计算时,可以为其添加对应的生成列,在导入阶段自动完成表达式计算,并将结果持久化。在查询阶段通过优化器的自动改写,直接从生成列中获得表达式计算结果,避免实时的表达式计算,实现透明加速。

StarRocks 在 3.1 版本正式推出 生成列(Generated Column) 特性,提供一种透明加速的解决方案,能有效提升半结构化数据的分析效率,令用户拥有更极速的分析体验。

用户案例:

申万宏源基于 StarRocks 构建实时数仓

当前,证券行业对数据的时效性、多样性和灵活性提出了更高的要求,为了解决实时数仓的挑战,申万宏源于 2023 年引入 StarRocks 对实时数仓整体架构进行了新的设计,目前基于 StarRocks 构建的实时数仓已经在申万宏源的财富管理类、投资研究类和风险管理类等多个场景中得到应用。

腾讯实验平台基于 StarRocks 构建湖仓底座

在 2022 年,腾讯 A/B Test 团队启动了海外商业化版本 ABetterChoice 的建设。目前,ABetterChoice 已接入王者荣耀海外版、PUBG Mobile、Ubisoft 全境封锁等业务。希望能够基于 StarRocks + 数据湖的整套数据生态,在深耕海外市场的同时,也能为社区和业界提供一个产品出海的新范式。

StarRocks 在小红书自助分析场景的应用与实践

近两年 StarRocks 一直是小红书 OLAP 引擎体系里非常重要的部分,过去一年,小红书的 StarRocks 使用规模呈现出翻倍的增长速度,目前整体规模已经达到 30 个集群,CPU 规模已经达到了 3 万。

短视频上新

这个月,我们新增了一个短视频模块,旨在帮助小伙伴们更准确、更迅速地获取关键信息。

8分钟带你极致体验 Flink CDC 3.0 实现 MySQL 与 StarRocks 实时数据同步

StarRocks 借助 Unified Catalog 实现数据湖统一数据访问

物化视图–湖仓加速利器

来自社区小伙伴的文章

感谢 jingyu鲸鱼、王坤、小景、HBLOG、运维仙人、 ClouGence、王日宇(阿里云)和刘成彬(游族网络)等小伙伴的分享!

如希望自己的博客被收录在社区月刊里,欢迎私信、评论或是联系 SR 小助手~

用户/生态案例:

使用 Paimon + StarRocks 极速批流一体湖仓分析

StarRocks 在游族的多维分析场景与落地实践

技术文章:

初探 StarRocks 明细模型

最佳实践 :

K8s上部署StarRocks v3.1.5存算分离验证环境

StarRocks创建 MySQL 外部表

StarRocks 最佳实践

StarRocks集群部署操作&性能测试(SSB,TPC-H)

StarRocks入门

大数据StarRocks(二) StarRocks集群部署实战

大数据StarRocks(三) StarRocks数据表设计

大数据StarRocks(四) :常用命令

大数据StarRocks(五) :Catalog

大数据StarRocks(五) :数据类型

大数据StarRocks(七):数据表创建

大数据StarRocks(八):集群扩缩容

大数据StarRocks(九):资源隔离实战

社区活动

活动回顾

实战营|阿里云 x StarRocks 邀你现场体验云上极速湖仓–深圳站

回放 可至 B 站查看 https://www.bilibili.com/video/BV1CT4y1b7gW/?vd_source=1cb452610138142d1300dd37a6162a88

PPT 下载: 【回放/PPT已更新】实战营|阿里云 x StarRocks 邀你现场体验云上极速湖仓–深圳站

从选择 StarRocks 到大规模使用的思考与实践

回放 可至 B 站查看 https://www.bilibili.com/video/BV18a4y1k7sR/?vd_source=1cb452610138142d1300dd37a6162a88

PPT 下载: 【PPT/回放已更新】从选择StarRocks到大规模使用的思考与实践

StarRocks 2024 Roadmap 全面解读

回放 可至 B 站查看 https://www.bilibili.com/video/BV1P7421T7BG/?vd_source=1cb452610138142d1300dd37a6162a88

StarRocks 2023 年度总结

回顾过去的一年,StarRocks 社区在产品升级、用户规模、开发者规模的各个方面都取得了显著的进展;4个大版本升级、50个小版本迭代,超过330家市值70亿元以上的大型企业在线上使用 StarRocks,350+位核心开发者加入社区贡献者行列。

凭借所有社区参与者的支持,StarRocks 在2023年不断进化,锤炼核心功能,打磨全新特性,成功实现了从全场景OLAP到云原生湖仓的全面升级,成为湖仓新范式的造浪者;2024,期盼在新的一年里能与你续写新篇章,共赴“极速统一”的新征程!

查看年度总结

新年期望征集

社区的进步离不开大家的支持,新的一年我们也期望能与更多的小伙伴们大步前行、共同成长。

最后,欢迎来 StarRocks 论坛 写下你对社区 2024 年的期望,我们还有好礼相赠。

活动传送门: 湖仓新范式的造浪者 | StarRocks 2023 年度总结 (内涵福利)

参与社区|Be A Rockstar!

StarRocks GitHub Monthly Contributors

感谢这些小伙伴为 StarRocks 添砖加瓦,StarRocks 因你而伟大!

@839224346 @abc982627271 @ABingHuang @alberttwong @amber-create @AndyZiYe @Astralidea @banmoy

@before-Sunrise @butaozhang @chaoyli @chenhaifengkeda @DanRoscigno @decster @dirtysalt @dujl

@EsoragotoSpirit @evelynzhaojie @freedomDR @fzhedu @GavinMar @gengjun-git @goldenbean @HangyuanLiu @hellolilyliuyi @imay @JackWangCS @jaogoy @Jin-H @jinshuangxian @kangkaisen @kapilsingh421 @kevincai @leoyy0316 @letian-jiang @lingtaolf @lipenglin @LiShuMing @LittleBeeBee

@liuyehcf @liuyufei9527 @lixiaoer666 @luohaha @macroguo-ghy @meegoo @MicePilot @mingmxu

@miomiocat @mofeiatwork @Moonm3n @motto1314 @nshangyiming @packy92 @perayb

@predator4ann @qingfengyouchen @rickif @satanson @sduzh @Seaven @sevev @silly-carbon

@silver–bullet @smartlxh @Smith-Cruise @srlch @starrocks-xupeng @stdpain @stephen-shelby

@stonechen111 @trikker @trueeyu @TszKitLo40 @wangsimo0 @Waterkin @wg1026688210

@WholeWorld-Timothy @wuxueyang96 @wxl24life @wyb @xiangguangyxg @yandongxiao

@Youngwb @zaorangyang @zdx19981006 @zenoyang @Zhangg7723 @zhangheihei

@zhangyifan27 @ZiheLiu @zombee0

新晋 Contributor :

@kapilsingh421 @JackWangCS @zhangbutao @bobo495" @zhangheihei @Waterkin

@mingmxu @jinshuangxian @freedomDR @chenhaifengkeda" @macroguo-ghy @trikker

本文由mdnice多平台发布

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/670930.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

使用#if 和 #endif 实现注释,及原因

注释我们代码中经常使用, 单行注释和多行注释我们都会经常用到。 但是有些场景下这两种注释并不是很方便,这样我们就可以使用上面的两个宏来对代码进行注释。 什么情况下使用那两种注释不方便? 1. 如果代码很多时,我们如果一行一行…

【Qt】常见问题

1.存在未解析的标识符 将build文件夹删掉重新编译。 2.左侧项目目录栏无法删除已添加项目 打开目标项目上一级的pro文件,将目标文件名字注释或者删除掉,最后保存,qt就会自动更新,将该项目隐藏掉。 3.在qt creator下添加槽函数…

c++运算符优先级

这里写目录标题 C运算符优先级定义了表达式中运算符的计算顺序。当一个表达式中有多个运算符时,运算符的优先级决定了哪些运算符先被计算。下面是C中一些常见运算符的优先级列表,从高到低排序: 阿里云参考链接:developer.aliyun.c…

模拟串口LV2,解决硬件串口资源不足问题!!!!

模拟串口通信 2.0 版本!! 我在前面的文章里面有写了 虚拟串口通信,虽然说能用,但是用过的小伙伴都说 “好!” 优缺点: 先说一点,2.0版本并不适用于同硬件串口的所有场合,仅仅针对自己开发的电子垃圾的主…

[office] 网优必备的10大经典函数公式! #知识分享#媒体

网优必备的10大经典函数公式! Excel软件看似简单,其实花样很多,尤其Excel表格。但其实只要用心多练,效率轻松提升个十倍百倍真不是问题!赶紧一起来get新技能吧~ ▋函数公式一 我们都知道从网管中查询出来的经纬度是没有小数点的。我看到不…

护眼灯色温多少合适?推荐五款合适色温的护眼台灯

很多人在购买台灯之后只会根据周围环境灯光的明暗调节亮度,对于色温的了解并不多,不知道色温应该调节到什么数值比较合适,有些人也根本没有意识到色温在影响人情绪方面起着重要作用,接下来就一起来看一下色温的标准。 一、什么色…

Day4.

单链表 #include <head.h>typedef struct List{int value;struct List *pointe; }*list; list create_space() {list s(struct List *)malloc(sizeof(struct List)); //向堆区申请空间s->pointe NULL;//初始化s->value 0;return s; } list inserhead_list(lis…

AI改编游戏大电影《使命召唤:幽灵重生》(下)

AI改编游戏大电影《使命召唤&#xff1a;幽灵重生》&#xff08;下&#xff09; 幽灵重生携生化武器毁灭人类&#xff0c;普莱斯上尉点上雪茄拿起武器&#xff0c;英雄再次迎来使命的召唤&#xff01; 《使命召唤&#xff1a;幽灵重生》&#xff08;下&#xff09;&#xff1a…

电力负荷预测 | 基于TCN的电力负荷预测(Python)———结果比对

文章目录 效果一览文章概述源码设计参考资料效果一览 文章概述 电力负荷预测 | 基于TCN的电力负荷预测(Python)———结果比对 python3.8 keras2.6.0 matplotlib3.5.2 numpy1.19.4 pandas1.4.3 tensorflow==2.6.0

【宝藏系列】嵌入式入门概念大全

【宝藏系列】嵌入式入门概念大全 0️⃣1️⃣操作系统&#xff08;Operating System&#xff0c;OS&#xff09; 是管理计算机硬件与软件资源的系统软件&#xff0c;同时也是计算机系统的内核与基石。操作系统需要处理管理与配置内存、决定系统资源供需的优先次序、控制输入与输…

jquery写表格,通过后端传值,并合并单元格

<!DOCTYPE html> <html> <head><title>Table Using jQuery</title><style>#tableWrapper {width: 100%;height: 200px; /* 设置表格容器的高度 */overflow: auto; /* 添加滚动条 */margin-top: -10px; /* 负的外边距值&#xff0c;根据实际…

Days 20 ElfBoard 板 FFmpeg移植

FFmpeg是一套可以用来记录、转换数字音频、视频&#xff0c;并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。因此&#xff0c;对于从事多媒体技术开发的工程师来说&#xff0c;深入研究FFMPEG成为一门必不可少的工作…

C++ 11新特性之tuple

概述 在C编程语言的发展历程中&#xff0c;C 11标准引入了许多开创性的新特性&#xff0c;极大地提升了开发效率与代码质量。其中&#xff0c;tuple&#xff08;元组&#xff09;作为一种强大的容器类型&#xff0c;为处理多个不同类型的值提供了便捷的手段。tuple是一种固定大…

NLP_神经概率语言模型(NPLM)

文章目录 NPLM的起源NPLM的实现1.构建实验语料库2.生成NPLM训练数据3.定义NPLM4.实例化NPLM5.训练NPLM6.用NPLM预测新词 NPLM小结 NPLM的起源 在NPLM之前&#xff0c;传统的语言模型主要依赖于最基本的N-Gram技术&#xff0c;通过统计词汇的共现频率来计算词汇组合的概率。然而…

解决opencv在图片中添加中文字体乱码问题

解决opencv在图片中添加中文字体乱码问题 需要事先安装PIL库 from PIL import Image, ImageDraw, ImageFont import cv2def cv2_img_add_text(img, text_str, left, top, text_color, text_size): if isinstance(img, np.ndarray):img Image.fromarray(cv2.cvtColor(img, …

【自然语言处理】微调 Fine-Tuning 各种经典方法的概念汇总

【自然语言处理】微调 Fine-Tuning 各种经典方法的概念汇总 前言请看此微调 Fine-TuningSFT 监督微调&#xff08;Supervised Fine-Tuning&#xff09;概念&#xff1a;监督学习&#xff0c;无监督学习&#xff0c;自监督学习&#xff0c;半监督学习&#xff0c;强化学习的区别…

Jetpack之RadionBtton、Switch、Checkbox组件介绍

Jetpack Compose系列(9) - RadionBtton、Switch、Checkbox组件介绍 RadioButton 跟View体系一样&#xff0c;Compose也有RadioButton单选按钮组件&#xff0c;遵从Material Design风格。 其构造函数如下&#xff1a; Composable fun RadioButton(selected: Boolean,onClick…

uniapp+uView 【详解】录音,自制音频播放器

效果预览 代码实现 <template><view class"btnListBox"><view class"audioBox" v-if"audioLength"><u-row><u-col span"2"><u--text aligncenter :text"currentTime"></u--text>…

YOLOv8改进 | 检测头篇 | 独创RFAHead检测头超分辨率重构检测头(适用Pose、分割、目标检测)

一、本文介绍 本文给大家带来的改进机制是RFAHead,该检测头为我独家全网首发,本文主要利用将空间注意力机制与卷积操作相结合的卷积RFAConv来优化检测头,其核心在于优化卷积核的工作方式,特别是在处理感受野内的空间特征时。RFAConv主要的优点就是增加模型的特征提取能力,…

arcgis各种版本下载

arcgic 下载&#xff01;&#xff01;&#xff01; ArcGIS是一款地理信息系统软件&#xff0c;由美国Esri公司开发。它提供了一系列完整的GIS功能&#xff0c;包括地图制作、空间数据管理、空间分析、空间信息整合、发布与共享等。ArcGIS是一个可扩展的GIS平台&#xff0c;提供…