卫星通信可以提供海量连接和无缝覆盖,但也面临雨衰、传播时延长、同频干扰等挑战。为了提高传输效率并应对严峻的场景,语义通信已成为流行的选择,特别是在配备基础模型(FM)时。在本研究中,我们介绍了一种基于 FM 的语义卫星通信框架,称为 FMSAT ...
扩散模型(DM)可以逐渐学习去除噪声,近年来在人工智能生成内容(AIGC)中得到了广泛的应用。 DM消除噪声的特性让我们想知道DM是否可以应用于无线通信以帮助接收器减轻信道噪声。为了解决这个问题,我们在本文中提出了用于无线信道语义通信的信道去噪扩散模型(CDDM) ...
在本文中,我们提出了一种用于通信系统中信道估计的深度学习( dl)知值来找到信道响应的未知值... ...
本文研究了一种用于海量通信的端到端视频语义通信系统。在所考虑的系统中,发送器必须连续将视频发送到接收器,以促进沉浸式应用(例如交互式视频会议)中的角色重建。然而,传输具有大量数据的原始视频信息对有限的无线资源提出了挑战 ...
在本文中,我们设计了一类新型的高效深度联合源信道编码方法,以实现无线信道上的端到端视频传输。所提出的方法利用非线性变换和条件编码架构来自适应地提取跨视频帧的语义特征,并通过深度联合源信道编码在无线信道上传输语义特征域表示。我们的框架被命名为深度视频语义传输(DVST) ...
本文研究自动驾驶中基于图像分割的语义通信问题。在真实的交通场景中,检测关键物体(例如 ...
本文研究了无线网络上的自适应比特率(ABR)视频语义通信。在所考虑的模型中,视频传感设备必须将视频语义信息传输到边缘服务器,以促进无处不在的视频传感服务,例如自动驾驶场景中边缘服务器的道路环境监测。然而,由于无线网络条件的变化,如果设备连续传输固定码率的视频语义信息,同时保证低传输延迟和高语义准确性具有挑战性 ...
大多数关于传感系统中机器学习的研究都集中在低级感知任务上,这些任务在短时间内处理原始传感数据。然而,许多实际应用,例如人体例行建模和占用跟踪,需要高级推理能力来理解概念并根据长期传感器轨迹做出推断。由于训练样本有限和传感器轨迹的高维性,现有的基于机器学习的处理此类复杂任务的方法很难泛化,因此需要整合人类知识来设计第一原理模型或逻辑推理方法 ...
将现有方法应用于情感支持对话(为有需要的人提供有价值的帮助)有两个主要局限性:(a)它们通常采用对话级情感标签,该标签太粗粒度,无法捕获用户的即时心理状态; (b) 其中大多数侧重于在响应中表达同理心,而不是逐渐减少用户的痛苦。为了解决这些问题,我们提出了一种新颖的模型 \textbf{MISC},它首先推断用户的细粒度情绪状态,然后使用混合策略巧妙地做出响应。基准数据集上的实验结果证明了我们方法的有效性,并揭示了细粒度情感理解以及混合策略建模的好处 ...
联合对话情感分类(DSC)和行为识别(DAR)的任务旨在同时预测对话中每个话语的情感标签和行为标签。在本文中,我们提出了一个新的框架,通过集成 \textit{预测级交互}而不是语义级交互来建模显式依赖关系,更符合人类直觉。此外,我们提出了说话者感知时间图(SATG)和双任务关系时间图(DRTG),将 \textit{时间关系} 引入对话理解和双任务推理中 ...