《Robust Semantic Communications Against Semantic Noise》
-
定义
语义噪声是一种导致误解语义信息和解码错误的噪声。它导致传输的语义符号和接收到的语义符号之间存在差异,在语义编码、数据传输和语义解码阶段都可能被引入[1] -
分类
不同源(文本和图像等)产生语义噪声的原因是不同的:
- 文本
文本中的语义噪声是指语义歧义,其中单词的微小变化(例如同义词替换)可能会使深度学习模型误解句子的语义。 - 图像
图像进行了一些细微的修改(利用对抗样本),对抗样本会误导深度学习模型并导致性能显着下降,但人类几乎察觉不到。
人们已经提出了多种在图像中生成对抗性样本的方法,例如快速梯度符号法(FGSM)和投影梯度下降法(PGD)
- 文本
[1] From semantic communication to semantic-aware networking: Model, architecture, and open problems
《A Robust Deep Learning Enabled Semantic Communication System for Text》
对于文本
语义通信系统,将语义噪声分为两种:
- 字面语义噪声
由书写错误或表达歧义引起的 - 对抗性语义噪声
通过语义信道添加到嵌入层的扰动或攻击引起的