语义通信代表了当前通信范式的重大突破,因为它们专注于恢复所传输的符号序列背后的含义,而不是符号本身。在语义通信中,目的地的范围不是恢复与传输的符号在符号上相同的符号列表,而是恢复在语义上与源发出的语义消息等效的消息。这种范式转变为编码和解码规则引入了许多自由度,可以利用这些自由度来提高通信系统的设计效率 ...
近年来,新型通信策略应运而生,以应对连接设备数量的增加和传输信息质量的提高所带来的挑战。其中,语义通信取得了有希望的结果,特别是当与最先进的深度生成模型(例如大语言或扩散模型)相结合时,能够从极度压缩的语义信息中重新生成内容。然而,这些方法中的大多数都侧重于在传统通信系统之上的接收器处处理接收到的内容的单用户场景 ...
扩散模型的最新进展在生成模型方面取得了重大突破。生成模型和语义通信(SemCom)的结合可以实现超低速率的高保真语义信息交换。提出了一种用于图像任务的新颖的生成 SemCom 框架,其中预训练的基础模型分别充当语义编码器和解码器,用于语义特征提取和图像再生 ...
随着语义赋能通信(SemCom)研究的兴起,学术界和工业界对各个方面(例如理论、应用、指标和实现)的兴趣空前增长 ...
GPT 和 LLaMa 等大型语言模型 (LLM) 因其在各种机器学习任务中的卓越能力而引发了机器智能的革命。然而, LLM 从数据中心到边缘设备的过渡带来了一系列挑战和机遇。虽然这种转变可以增强隐私性和可用性,但它受到这些模型巨大参数大小的阻碍,导致不切实际的运行时间成本 ...
生成人工智能(GAI)已成为一个快速发展的领域,在智能、自动地创建多样化内容方面展现出巨大潜力。为了支持此类人工智能生成内容(AIGC)服务,未来的通信系统应利用有限但宝贵的频谱资源满足更严格的要求(包括数据速率、吞吐量、延迟等) ...
生成基础人工智能模型最近在仅使用文本提示和条件信号来指导生成过程来合成具有高感知质量的自然信号方面取得了巨大成功。这使得未来无线网络中的语义通信能够以极低的数据速率进行。在本文中,我们开发了一个具有预训练生成模型的延迟感知语义通信框架 ...
随着智能业务需求的不断增长,第六代(6G)无线网络将从单纯注重高传输速率的传统架构转向基于万物智能连接的新架构。语义通信(SemCom)是一种革命性的架构,它将用户以及应用程序的需求和信息的含义集成到数据处理和传输中,预计将成为 6G 的新核心范式。虽然 SemCom 有望超越经典的香农范式,但在实现 SemCom 支持的智能无线互联网的道路上还需要克服一些障碍 ...
我们提出了一种用于无线图像传输的新型自适应深度联合源通道编码(JSCC)方案。所提出的方案使用单一深度神经网络(DNN)模型支持速率,并根据通道条件和多种图像内容进行学习动态控制速率。具体来说,引入策略网络来利用速率和信号质量之间的权衡空间... ...
多模态情感分析 (MSA) 旨在识别多模态视频内容中说话者的情绪倾向,引发人们对与声纹和面部图像等多模态数据相关的隐私风险的严重担忧。最近的分布式协作学习已被验证为多模式任务中隐私保护的有效范例。然而,他们经常忽视不同模式之间的隐私差异,努力在性能和隐私保护之间取得平衡 ...