ETL中如何自定义规则

一、ETL中的规则

在使用规则之前我们先来了解一下什么是规则,ETL中规则在很多组件中都能看见,可以理解为按照事前约定好的逻辑去执行,规则可以使得数据更加的规范统一,同时也不需要去纵向的修改底层代码,只需要动态编译然后进行绑定即可使用。

二、规则的使用

ETLCloud的规则一般应用在数据流的输入输出,对输入输出的字段做处理,例如库表输入输出字段配置,就可以找到规则的绑定了。

点击绑定规则选择需要使用的规则即可,平台提供大量常用的规则,当然有些规则还可以在官网中下载。

例如想在数据入库时对某个字段进行脱敏操作,那么我们只需选择规则即可,右侧会有该规则的使用示例,简单明了,只需要根据提示填写即可。

经过规则,入库后对比可以发现姓名字段已经被脱敏了。

三、ETLCloud自定义规则

自定义规则需要有一定编程基础的人员来操作,提供规范好的接口,让我们去实现相应的方法和编写符合场景需要的逻辑代码,下面我来教大家如何去自定义规则。

首先点击进入我们的离线应用,在页面中找到规则管理,点击规则管理,可以看到分为两大类,一种是平台内置的规则,另一种就是我们需要自己定义的规则。

在创建规则之前我们需要创建规则分类,在同一页面中找到应用配置,点击新增分类即可创建规则分类,然后回到我们的规则页面,去新增规则。

根据提示完成规则基础属性的设置,点击保存退出即可。

在规则列表中找到我们新增的规则,点击“代码” 即可弹出代码编辑页,我们就可以进行规则逻辑代码的编写。

当我们完成逻辑代码的编写后即可点击编译保存,编译通过后可以按照刚刚演示的规则教程来使用我们的自定义规则。

ETLCloud平台的规则功能不仅简化了数据处理过程中的逻辑实现难度,让不具备深度编程技能的用户也能高效处理数据;同时也为专业开发者提供了广阔的创新空间,使其能基于业务需求定制个性化规则。无论是标准化还是个性化的规则运用,都将进一步提升数据质量,增强在数据流转过程中的安全性与可控性,从而有力支撑企业的数据驱动决策和智能化转型。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/797165.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【Frida】【Android】 工具篇:查壳工具大赏

🛫 系列文章导航 【Frida】【Android】01_手把手教你环境搭建 https://blog.csdn.net/kinghzking/article/details/136986950【Frida】【Android】02_JAVA层HOOK https://blog.csdn.net/kinghzking/article/details/137008446【Frida】【Android】03_RPC https://bl…

LiveGBS流媒体平台GB/T28181常见问题-系统服务日志如何配置日志个数日志路径日志时长web操作日志操如何配置保留天数及过滤

LiveGBS系统服务日志如何配置日志个数日志路径日志时长web操作日志操如何配置保留天数及过滤 1、系统服务日志1.1、日志目录1.2、配置日志文件个数及记录时间1.3、配置日志文件路径 2、Web 操作日志2.1、配置保留天数2.2、配置不记录操作日志2.1.1、不记录所有2.1.2、不记录指定…

Golang中的上下文-context包的简介及使用

文章目录 简介context.Background()上下文取消函数上下文值传递建议Reference 简介 Go语言中的context包定义了一个名为Context的类型,它定义并传递截止日期、取消信号和其他请求范围的值,形成一个链式模型。如果我们查看官方文档,它是这样说…

java.lang.NoClassDefFoundError: javax/validation/constraints/Min

1、报错截图 2、解决办法 添加依赖 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-validation</artifactId> </dependency>

基于SpringBoot Vue单位考勤管理系统

一、&#x1f4dd;功能介绍 基于SpringBoot Vue单位考勤管理系统 角色&#xff1a;管理员、员工 管理员&#xff1a;管理员进入系统主页面&#xff0c;主要功能包括对首页、个人中心、员工管理、部门信息管理、职位信息管理、加班申请管理、打卡信息管理、工作汇报管理、请假…

SpringBoot属性配置的多种方式

✅作者简介:大家好,我是Leo,热爱Java后端开发者,一个想要与大家共同进步的男人😉😉🍎个人主页:Leo的博客💞当前专栏: 循序渐进学SpringBoot ✨特色专栏: MySQL学习 🥭本文内容:SpringBoot属性配置的多种方式 📚个人知识库: Leo知识库,欢迎大家访问 目录 …

程序员的中年篇章:技术与智慧的融合之旅

作为一名中年程序员&#xff0c;我看惯了这个行业从起步到繁荣的每一个阶段。随着岁月的流逝&#xff0c;我发现自己已步入了职业生涯的中年。在这个转折点上&#xff0c;我不禁开始反思过去&#xff0c;规划未来&#xff0c;并希望能给同行的你们一些启发和建议。 在这个行业&…

vue-创建实例

<!DOCTYPE html> <html lang"en"> <head> <meta charset"UTF-8"> <meta name"viewport" content"widthdevice-width, initial-scale1.0"> <title>创建实例</title> </head> <…

论文阅读——MVDiffusion

MVDiffusion: Enabling Holistic Multi-view Image Generation with Correspondence-Aware Diffusion 文生图模型 用于根据给定像素到像素对应关系的文本提示生成一致的多视图图像。 MVDiffusion 会在给定任意每个视图文本的情况下合成高分辨率真实感全景图像&#xff0c;或将…

2024.03.25 校招 实习 内推 面经

绿*泡*泡VX&#xff1a; neituijunsir 交流*裙 &#xff0c;内推/实习/校招汇总表格 1、校招 & 实习 | 旷视科技2024春季校园招聘正式启动&#xff08;内推&#xff09; 校招 & 实习 | 旷视科技2024春季校园招聘正式启动&#xff08;内推&#xff09; 2、校招&…

钉钉自建应用-下载excel(h5)

由于不同手机对于文件下载有不同的支持&#xff0c;而且文件路径也不一样&#xff0c;找起来十分的麻烦。所以&#xff0c;最好是找到一个都支持的方法。还好&#xff0c;钉钉官网提供了网盘&#xff0c;我们可把文件保存到钉钉自带的网盘&#xff0c;这样方便查找。 这里需要…

【TypeScript系列】TypeScript 声明文件

举例 这篇指南的目的是教你如何书写高质量的 TypeScript 声明文件。 我们在这里会展示一些 API 的文档&#xff0c;以及它们的使用示例&#xff0c; 并且阐述了如何为它们书写声明文件。 这些例子是按复杂度递增的顺序组织的。 带属性的对象函数重载可重用类型&#xff08;接…

备战蓝桥杯---数论相关问题

目录 一、最大公约数和最小公倍数 二、素数判断 三、同余 四、唯一分解定理 五、约数个数定理 六、约数和定理 五、快速幂 六、费马小定理 七、逆元 一、最大公约数和最小公倍数 文章链接&#xff1a;最大公约数和最小公倍数 二、素数判断 文章链接&#xff1a;在J…

飞书机器人的开发

飞书机器人是飞书提供的一种自动化工具&#xff0c;可以帮助用户在飞书平台上实现自动化任务、消息推送等功能。飞书机器人基于Webhook技术&#xff0c;通过HTTP请求实现与外部系统的通信。下面我将介绍如何在飞书上开发一个简单的机器人&#xff0c;并提供一些示例代码和操作步…

【名词概念】Headless BI

https://mp.weixin.qq.com/s/i4rTR7PdBrjvh1HNmID0sg 在理解Headless BI之前&#xff0c;我们需要先理解一下什么叫做Headless? Headless的概念最初的来源与内容管理平台有关&#xff0c;一般是指内容管理平台中的一些应用不提供可视化界面&#xff0c;只是通过API方式把内容…

碧桂园服务:以长期主义走出稳健增长曲线

3月27日&#xff0c;碧桂园服务发布了2023全年业绩&#xff0c;总收入约426.1亿元&#xff0c;同比增长3.0%&#xff0c;保持稳健增长的势头。在会上&#xff0c;碧桂园服务执行董事、总裁徐彬淮发布公司未来战略&#xff0c;提出“稳中求进&#xff0c;以进促稳”的发展主旋律…

QT 创建线程的几种方法

//qt创建线程的几种方法 //在Qt中&#xff0c;创建线程的主要方法有以下几种&#xff1a; //1.继承QThread类重写run方法 class MyThread : public QThread { Q_OBJECT public: void run() override { // 在这里执行你的代码 } }; // 使用 MyThread *myThread n…

C语言——#define的使用

#define定义常量 基本语法 #define name stuff //&#xff08;#define&#xff09;&#xff08;变量名&#xff09;&#xff08;定义的数值&#xff09; 这里记得&#xff0c;是不加分号的 定义常量&#xff08;这里 就要涉及我们经常说的宏定义&#xff09; 定义常量的使…

蚓链使用数字化能力做到让企业增值

蚓链使用数字化能力做到让企业增值 蚓链致力于推动企业从消费互联网向产业互联网的转型。通过提供数据价值与新兴技术相结合的工具&#xff0c;蚓链帮助企业重塑业务流程、优化企业结构&#xff0c;进而重构整个产业生态。这种转型不仅有助于企业提升运营效率&#xff0c;还能…

sklearn库都有哪些数据集

Scikit-learn&#xff08;通常简称为sklearn&#xff09;是Python的一个开源机器学习库&#xff0c;它包含了许多用于机器学习和数据挖掘的工具。其中&#xff0c;它提供了一些内置的数据集&#xff0c;用于测试算法和训练模型。以下是截至我的知识截止日期为止&#xff0c;skl…