本文研究了无线网络上的自适应比特率（ABR）视频语义通信。在所考虑的模型中，视频传感设备必须将视频语义信息传输到边缘服务器，以促进无处不在的视频传感服务，例如自动驾驶场景中边缘服务器的道路环境监测。然而，由于无线网络条件的变化，如果设备连续传输固定码率的视频语义信息，同时保证低传输延迟和高语义准确性具有挑战性 ...
大多数关于传感系统中机器学习的研究都集中在低级感知任务上，这些任务在短时间内处理原始传感数据。然而，许多实际应用，例如人体例行建模和占用跟踪，需要高级推理能力来理解概念并根据长期传感器轨迹做出推断。由于训练样本有限和传感器轨迹的高维性，现有的基于机器学习的处理此类复杂任务的方法很难泛化，因此需要整合人类知识来设计第一原理模型或逻辑推理方法 ...
将现有方法应用于情感支持对话（为有需要的人提供有价值的帮助）有两个主要局限性：（a）它们通常采用对话级情感标签，该标签太粗粒度，无法捕获用户的即时心理状态; (b) 其中大多数侧重于在响应中表达同理心，而不是逐渐减少用户的痛苦。为了解决这些问题，我们提出了一种新颖的模型 \textbf{MISC}，它首先推断用户的细粒度情绪状态，然后使用混合策略巧妙地做出响应。基准数据集上的实验结果证明了我们方法的有效性，并揭示了细粒度情感理解以及混合策略建模的好处 ...
联合对话情感分类（DSC）和行为识别（DAR）的任务旨在同时预测对话中每个话语的情感标签和行为标签。在本文中，我们提出了一个新的框架，通过集成 \textit{预测级交互}而不是语义级交互来建模显式依赖关系，更符合人类直觉。此外，我们提出了说话者感知时间图（SATG）和双任务关系时间图（DRTG），将 \textit{时间关系} 引入对话理解和双任务推理中 ...
本文研究了车联网（IoV）上基于语义的高效图像传输问题。在所考虑的模型中，车辆共享其视觉传感器感知的大量视觉数据，以协助其他车辆做出驾驶决策。然而，由于频谱资源有限，很难维持高可靠的视觉数据传输 ...
对话中的情绪识别（ERC）近年来因其广泛应用的必要性而备受关注。现有的 ERC 方法大多分别对自身和说话者之间的上下文进行建模，这造成了它们之间缺乏足够交互的主要问题。在本文中，我们提出了一种新颖的 ERC 说话者和位置感知图神经网络模型（S+PAGE），它包含三个阶段，结合了 Transformer 和关系图卷积网络（R-GCN）的优点，以实现更好的上下文建模 ...
同理心是一种基于他人情感状态推理的复杂认知能力。为了更好地理解他人并在对话中表达更强的同理心，我们认为必须同时解决两个问题：（i）从对方的话语中识别出哪个词是引起对方情绪的原因；（ii）反映这些词响应生成中的特定单词。然而，以前识别文本中情感原因单词的方法需要子话语级别的注释，这可能要求很高 ...
包括文本、音频、图像和视频在内的多模态信号可以集成到语义通信（SC）中，以在语义层面提供低延迟和高质量的沉浸式体验。然而，多模态 SC 面临着一些挑战，包括数据异构性、语义模糊性和信号衰落。大型人工智能模型的最新进展，特别是多模态语言模型（MLM）和大型语言模型（LLM），为这些问题提供了潜在的解决方案 ...
语义通信作为下一代通信系统中替代传统通信的一种有前景的技术，受到了研究人员的极大关注，这主要是因为它能够降低通信成本。然而，很少有文献研究其在多用户场景中的有效性，特别是当用户使用的模型架构及其计算能力存在变化时。为了解决这个问题，我们探索了一种语义通信系统，通过在基站（BS）使用多功能发射器来满足具有不同模型架构的多个用户的需求 ...
对话中的情绪识别（ERC）是一个重要且活跃的研究领域。最近的工作表明了使用多种方式的好处（例如 ...