IEEE Internet of Things Journal 语义通信与 DeepJSCC 调研(2023—至今)
本专题覆盖 2023 年至 2026 年 IEEE Internet of Things Journal 中与语义通信、DeepJSCC 及图像/视频/语音/点云无线传输相关的研究。逐篇分析以可验证全文为依据,分别回答研究动机、端到端方法、数字化接口、实际传输开销、信道错误进入 decoder 的方式及实验支持范围。
现有进展:如今,下一代网络的一个雄心勃勃的目标是开发智能的总体空间-空气-地面-水计算系统,以提供一个智能的生态系统,能够有效地运行在异构域的计算。 PDF p.1
仍然存在的问题:然而,在水下域中的计算的有效实现必然是数据感测、传输和转发,这使得大量数据的传输在时间和功率方面都是昂贵的。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:梯度或中间特征既大又易受噪声影响,通信错误会直接改变训练收敛或推理决策;这使空口聚合与任务 loss 必须一起考虑。 PDF p.1
本文提出什么:本文提出了一种自智能系统,能够有效地进行水下环境监测或水下调查的关键基础设施,通过使用语义通信范式,以降低由于水下信道传播条件的损害。 PDF p.1
方案为何可能有效:随后,本文开发了一个跨域(即,水和地面)FL框架,考虑和优化的数据收集过程中涉及的水下通信方面; ·语义通信方案的建议,以克服水下环境的关键性,使高效和有效的图像传输源于水下设备,并致力于跨域FL功能。 PDF p.2
作者希望证明什么:FL模型达到的精度是迭代次数的函数。注意,SC曲线显著降低了传输时间,代表了减少水下环境对FL框架影响的有用解决方案。 PDF p.8
方法与端到端信息流
本文提出了一种自智能系统,能够有效地进行水下环境监测或水下关键基础设施的调查,通过使用语义通信范式,以减少由于水下信道传播条件的损害。(即水下和地面)FL框架,考虑并优化数据收集过程中涉及的水下通信方面;·提出了一种语义通信方案,以克服水下环境的关键性,使高效和有效的图像传输源于水下设备,并致力于跨域FL功能。因此,本文的贡献可以概括如下:设计和开发了一个地面-水下框架,用于执行从水下设备收集的数据,在SSBS上创建图像数据集,SSBS与地面SBS一起执行FL,并依次完成智能任务。 PDF p.1PDF p.2
架构/方法图|来源:《A Semantic-Oriented Federated Learning for Hybrid Ground–Aqua Computing Systems》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Semantic-Oriented Federated Learning for Hybrid Ground–Aqua Computing Systems》,原 PDF p.7,Fig. 4 Loss function as a function of the number of epochs 核对论文
核心纳入2023图像传输、压缩或生成
Communication-Efficient Framework for Distributed Image Semantic Wireless Transmission
架构/方法图|来源:《Cooperative Resource Management in Quantum Key Distribution (QKD) Networks for Semantic Communication》,原 PDF p.3,Fig. 1 The architecture consists of the QKD layer, the QKD management and control layer, and the semantic layer 核对论文关键实验结果图/表|来源:《Cooperative Resource Management in Quantum Key Distribution (QKD) Networks for Semantic Communication》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2023图像传输、压缩或生成
High-Resolution Data Acquisition and Joint Source-Channel Coding in Underwater IoT
现有进展:可靠和持续的水监测是智能水下物联网(UW IoT)中的一个具有挑战性的问题,因为它具有苛刻,未经探索和不可预测的性质。 PDF p.1
仍然存在的问题:为了解决上述挑战,我们提出了一种新的架构,包括密集部署的水下全模拟生物降解传感器的基板,使持续感测和不断传输数据到表面的数字浮标。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:为了解决上述挑战,我们提出了一种新的架构,包括密集部署的水下全模拟生物降解传感器的基板,使持续感测和不断传输数据到表面的数字浮标。 PDF p.1
方案为何可能有效:我们提出了一种利用半导体器件特有的特性(特别是单个金属氧化物半导体场效应晶体管(MOSFET)晶体管的输入-输出关系)实现香农映射的超低功耗方法。 PDF p.2
作者希望证明什么:与传统HARQ相比,相关HARQ的每归一化延迟的长期吞吐量与轮次数的关系。不需要多轮传输并且不需要更多的重传;而传统方案将需要多得多的重传轮次来实现可靠传输。 PDF p.10
方法与端到端信息流
为了应对上述挑战,我们提出了一种新的结构,它由密集部署的水下全模拟生物可降解传感器组成,能够持续感知并向水面数字浮标连续传输数据。我们提出了一种利用半导体器件特有的特性实现香农映射的超低功耗方法(特别是单个金属氧化物半导体场效应晶体管(MOSFET)晶体管的输入-输出关系)。我们提出了一种利用半导体器件特有的特性实现香农映射的超低功耗方法。(特别是单个金属氧化物半导体场效应晶体管(MOSFET)晶体管的输入-输出关系)。 PDF p.1PDF p.2
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 High-Resolution Data Acquisition and Joint Source-Channel Coding in Underwater IoT:为了应对上述挑战,我们提出了一种新的结构,它由密集部署的水下全模拟生物可降解传感器组成,能够持续感知并向水面数字浮标连续传输数据。我们提出了一种利用半导体器件特有的特性实现香农映射的超低功耗方法(特别是单个金属氧化物半导体场效应晶体管(MOSFET)晶体管的输入-输出关系)。我们提出了一种利用半导体器件特有的特性实现香农映射的超低功耗方法。(特别是单个金属氧化物半导体场效应晶体管(MOSFET)晶体管的输入-输出关系)。
AJSCC电路设计:在水下动态信道中,需要自适应调整AJSCC参数,例如量化量φ。当量化误差最小时,较小的φ导致接收机处的MSE更好;然而,当寻求更高的分辨率时,它也导致传感器处的更高功耗(由于附加硬件)。 表示判定:High-Resolution Data Acquisition and Joint Source-Channel Coding in Underwater IoT 的主传输单位属于“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.3PDF p.7
信道与工作点AWGN、fading channel、wireless channel、SNR of 20 dB
实验小节中明确出现的比较对象包括JSCC、FEC;指标包括MSE、accuracy、mAP、latency、throughput、BER、PER;信道/链路条件包括AWGN、fading channel、wireless channel;正文可定位的代表性工作点有SNR of 20 dB。 PDF p.7
与传统HARQ相比,相关HARQ的每归一化延迟的长期吞吐量与轮数的关系。而传统的方案需要更多的重传轮次才能实现可靠的传输,目标是通过使用适当的信道编码来减少通信开销和其它浮标的破坏性影响2,即,最小化P-P,从而提高性能。 PDF p.6PDF p.10
架构/方法图|来源:《High-Resolution Data Acquisition and Joint Source-Channel Coding in Underwater IoT》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《High-Resolution Data Acquisition and Joint Source-Channel Coding in Underwater IoT》,原 PDF p.8,Fig. 7 With the varying number of nodes, MDR versus SNR with multipath lifetime of (a) 26.67 ms; (b) 13.33 ms; and (c) 6.67 ms 核对论文
核心纳入2023图像传输、压缩或生成
Joint Task and Data-Oriented Semantic Communications: A Deep Separate Source-Channel Coding Scheme
仍然存在的问题:然而,上述手工方案利用线性或固定的变换函数,其不能捕获源数据的分布信息。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:针对面向任务和数据的联合语义通信(JTD-SC)提出了一种深度分离的信源信道编码(DSSCC)框架,并利用变分自编码器方法解决了语义失真的率失真问题。 PDF p.1
方案为何可能有效:本文的主要贡献概括如下:首先,我们提出了一个基于DSSCC的框架JTD-SC与一般的源数据和语义任务。 PDF p.2
作者希望证明什么:仿真结果表明,与经典压缩方案和新兴的深度联合信源信道方案相比,该方案在大多数情况下都能获得更好的编码增益以及数据恢复和分类性能。 PDF p.1
方法与端到端信息流
本文提出了一种面向任务和数据的联合语义通信(JTD-SC)的深度分离信源信道编码(DSSCC)框架,并利用变分自编码器方法解决了语义失真的率失真问题。第一、我们提出了一个基于DSSCC的JTD框架,尽管上述DSSCC方案研究了不同的DNN架构以增强联合数据,压缩和语义恢复性能,它们不考虑整个系统的贝叶斯逻辑。 PDF p.1PDF p.2
架构/方法图|来源:《Joint Task and Data-Oriented Semantic Communications: A Deep Separate Source-Channel Coding Scheme》,原 PDF p.14,Fig. 14 However, with the decreasing of the channel bandwidth ratio, the proposed scheme that considers the semantic distortion still have a superior performance than the BPG scheme 核对论文关键实验结果图/表|来源:《Joint Task and Data-Oriented Semantic Communications: A Deep Separate Source-Channel Coding Scheme》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2023通用语义通信系统
Lattice-Based Analog Mappings for Low-Latency Wireless Sensor Networks
现有进展:我们认为在无线传感器网络(WSN)中的空间相关的模拟信息的传输,通过衰落的单输入多输出(SIMO)多址接入信道(MAC)的低延迟的要求。 PDF p.1
仍然存在的问题:我们推导出一个最小均方误差(MMSE)解码器,该解码器同时考虑了编码格的多维结构和空间相关性。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
本文提出什么:一个基于格的模拟联合信源信道编码(JSCC)的方法被认为是在每个传感器使用$n$维格编码的连续源符号的矢量,然后发送到一个多天线中心节点。 PDF p.1
方案为何可能有效:我们推导出一个最小均方误差(MMSE)解码器,该解码器同时考虑了编码格的多维结构和空间相关性。 PDF p.2
作者希望证明什么:结果表明,在满足低延迟的限制,基于格的模拟JSCC提供性能增益和更高的可靠性相对于现有先进的JSCC计划。 PDF p.1
方法与端到端信息流
我们导出了一个同时考虑编码格的多维结构和空间相关性的最小均方误差(MMSE)译码器,我们导出了一个同时考虑编码格的多维结构和空间相关性的MMSE译码器。 PDF p.2
输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 Lattice-Based Analog Mappings for Low-Latency Wireless Sensor Networks:我们导出了一个同时考虑编码格的多维结构和空间相关性的最小均方误差(MMSE)译码器,我们导出了一个同时考虑编码格的多维结构和空间相关性的MMSE译码器。
架构/方法图|来源:《Lattice-Based Analog Mappings for Low-Latency Wireless Sensor Networks》,原 PDF p.5,Fig. 2 Block diagram of the considered analog JSCC communication system 核对论文关键实验结果图/表|来源:《Lattice-Based Analog Mappings for Low-Latency Wireless Sensor Networks》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2023语义感知资源分配与网络优化
Online Resource Allocation for Semantic-Aware Edge Computing Systems
架构/方法图|来源:《Semantic and Logical Communication-Control Codesign for Correlated Dynamical Systems》,原 PDF p.14,Fig. 7 Number of communication samples for each MLD-system of the proposed and baseline models with SNR = 10 dB for (a) high-dimensional feature-space representation (d = 4) and (b) low-dimensional feature-space representation (d = 2) 核对论文关键实验结果图/表|来源:《Semantic and Logical Communication-Control Codesign for Correlated Dynamical Systems》,原 PDF p.14,Fig. 7 Number of communication samples for each MLD-system of the proposed and baseline models with SNR = 10 dB for (a) high-dimensional feature-space representation (d = 4) and (b) low-dimensional feature-space representation (d = 2) 核对论文
相关但非核心2023语义感知资源分配与网络优化
YOLO-Based Semantic Communication With Generative AI-Aided Resource Allocation for Digital Twins Construction
架构/方法图|来源:《YOLO-Based Semantic Communication With Generative AI-Aided Resource Allocation for Digital Twins Construction》,原 PDF p.6,Fig. 2 ELAN-H model structure with HorNet 核对论文关键实验结果图/表|来源:《YOLO-Based Semantic Communication With Generative AI-Aided Resource Allocation for Digital Twins Construction》,原 PDF p.6,Fig. 3 Comparisons of different attention steps 核对论文
核心纳入2024语义感知资源分配与网络优化
A Joint Communication and Computation Design for Distributed RIS-Assisted Probabilistic Semantic Communication in IIoT
仍然存在的问题:然而,由于RIS系统中存在大量的RIS单元以及不同RIS之间的协作通信,使得多RIS系统的联合波束形成设计变得更加复杂。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:因此,本文提出一种有效的多RIS系统波束形成设计方法。 PDF p.1
方案为何可能有效:该联合通信和计算问题被表述为一个优化问题,其目标是在总发射功率、相移、RIS-用户关联和语义压缩比约束下,最大化系统的语义感知传输速率之和。 PDF p.1
作者希望证明什么:算例仿真验证了所得条件的有效性和优越性。 PDF p.1
方法与端到端信息流
为此,本文提出了一种多RIS系统中的波束赋形设计方法,该方法将通信和计算的联合问题描述为一个优化问题,其目标是在总发射功率、相移、RIS-用户关联和语义压缩比等约束条件下,使系统的语义感知传输速率之和最大化,并结合分布式RIS和语义通信的优点,摘要本文研究了一种分布式RISs辅助的概率语义通信(PSC)的联合通信和计算框架。 PDF p.1PDF p.2
架构/方法图|来源:《A Joint Communication and Computation Design for Distributed RIS-Assisted Probabilistic Semantic Communication in IIoT》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Joint Communication and Computation Design for Distributed RIS-Assisted Probabilistic Semantic Communication in IIoT》,原 PDF p.11,Fig. 14 Sum semantic-aware rate versus sum transmit power under user distribution 2 核对论文
核心纳入2024语音/音频传输或识别
A Perceptually Motivated Approach for Low-Complexity Speech Semantic Communication
现有进展:近年来的研究表明,语义通信在提高传输速率方面表现良好,尤其是在低信噪比环境下。 PDF p.1
仍然存在的问题:然而,现有的语音语义通信方法没有考虑到接收方的语音感知和方法的复杂性,限制了语义通信方法的实际应用。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
本文提出什么:为此,本文提出了一种基于感知驱动的低复杂度语音语义通信方法。 PDF p.1
方案为何可能有效:具体地说,我们采用端到端的通信方法来传输源语音并在接收机处获得重构语音。 PDF p.1
作者希望证明什么:与现有的神经语义传输方法相比,在不影响语音质量的前提下,提高了传输效率,传输所需的符号数减少了60%。 PDF p.1
方法与端到端信息流
本文提出了一种感知驱动的低复杂度语音语义通信方法,即采用端到端的通信方式传输源语音并在接收端获得重构语音,在此基础上,提出了一种主要关注接收者听觉感知的低复杂度语音到语音语义通信方法。 PDF p.1PDF p.2
输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 A Perceptually Motivated Approach for Low-Complexity Speech Semantic Communication:本文提出了一种感知驱动的低复杂度语音语义通信方法,即采用端到端的通信方式传输源语音并在接收端获得重构语音,在此基础上,提出了一种主要关注接收者听觉感知的低复杂度语音到语音语义通信方法。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:连续神经 JSCC latent / 实复信道符号
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“连续神经 JSCC latent / 实复信道符号”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:A Perceptually Motivated Approach for Low-Complexity Speech Semantic Communication 的主传输单位属于“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.7
架构/方法图|来源:《A Perceptually Motivated Approach for Low-Complexity Speech Semantic Communication》,原 PDF p.4,Fig. 2 (a) Overall architecture of the proposed perceptually motivated system 核对论文关键实验结果图/表|来源:《A Perceptually Motivated Approach for Low-Complexity Speech Semantic Communication》,原 PDF p.7,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2024图像传输、压缩或生成
A Semantic Communication Approach for Multiscene Target Detection in Intelligent Vehicle Networks
现有进展:随着智能车辆网络成为现代交通系统不可或缺的一部分,在复杂的城市环境中对准确、高效的多场景目标检测的需求日益迫切。 PDF p.1
仍然存在的问题:针对动态路况下海量图像数据的快速、准确处理和传输问题,提出了一种多场景目标检测语义通信(MTDSC)方法。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:针对动态路况下海量图像数据的快速、准确处理和传输问题,提出了一种多场景目标检测语义通信(MTDSC)方法。 PDF p.1
方案为何可能有效:本研究的创新之处在于,不仅深化了图像语义处理的研究,更重要的是,针对人工神经网络中多场景目标检测的具体需求,提出了一种优化的语义通信方法。 PDF p.3
作者希望证明什么:实验结果表明,MTDSC能够有效地实现不同道路场景下的语义图像重建,即使在低码率和复杂场景下,也能保证关键信息的保留和高质量的图像重建。 PDF p.1
方法与端到端信息流
针对动态路况下海量图像数据的快速、准确处理和传输的挑战,提出了多场景目标检测语义通信(MTDSC)方法,本研究的创新之处在于不仅深化了图像语义处理的研究,更重要的是,本文的创新之处在于不仅深化了对图像语义的研究,而且提出了一种新的基于图像语义的多场景目标检测方法本文提出了一种优化的语义通信方法,以满足虚拟网络中多场景目标检测的特殊需求。 PDF p.1PDF p.3
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 A Semantic Communication Approach for Multiscene Target Detection in Intelligent Vehicle Networks:针对动态路况下海量图像数据的快速、准确处理和传输的挑战,提出了多场景目标检测语义通信(MTDSC)方法,本研究的创新之处在于不仅深化了图像语义处理的研究,更重要的是,本文的创新之处在于不仅深化了对图像语义的研究,而且提出了一种新的基于图像语义的多场景目标检测方法本文提出了一种优化的语义通信方法,以满足虚拟网络中多场景目标检测的特殊需求。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:A Semantic Communication Approach for Multiscene Target Detection in Intelligent Vehicle Networks 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
在本实验中,我们选择了四种不同的条件进行测试,分别表示为:条件1:低分辨率,图像分辨率为480×320;条件2:中分辨率,800×600;条件3:高分辨率,1920×1080;条件4:夜间或弱光条件。 PDF p.9
架构/方法图|来源:《A Semantic Communication Approach for Multiscene Target Detection in Intelligent Vehicle Networks》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Semantic Communication Approach for Multiscene Target Detection in Intelligent Vehicle Networks》,原 PDF p.11,Fig. 8 SSIM values of four methods in different scenarios (data curve chart containing ten sets of EXPERIMENTAL RESULTS) 核对论文
核心纳入2024边缘学习与任务通信
Adaptive Federated Deep Learning-Based Semantic Communication in the Social Internet of Things
现有进展:语义通信的引入为实现社交物联网中高效、可靠的信息传输提供了有效的解决方案。 PDF p.1
仍然存在的问题:然而,在SIoT内确保高质量和可靠的数据传输仍然是一个重大挑战。 PDF p.1
为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
为什么这个问题重要:梯度或中间特征既大又易受噪声影响,通信错误会直接改变训练收敛或推理决策;这使空口聚合与任务 loss 必须一起考虑。 PDF p.1
本文提出什么:本文提出了一种基于自适应联邦深度学习的语义通信框架。 PDF p.1
方案为何可能有效:第四节介绍了拟议框架的实施细节。 PDF p.2
作者希望证明什么:仿真结果表明,与传统模型相比,该方法在低信噪比、低带宽环境下具有更好的适应性和更高的稳定性。 PDF p.1
方法与端到端信息流
在本文中,我们提出了一个基于自适应联邦深度学习的语义通信框架。第四节介绍了所提框架的实现细节。 PDF p.1PDF p.2
输入输入是边缘学习与任务通信所需的梯度、模型更新或中间特征。
发送端发送端采用 Adaptive Federated Deep Learning-Based Semantic Communication in the Social Internet of Things:在本文中,我们提出了一个基于自适应联邦深度学习的语义通信框架。第四节介绍了所提框架的实现细节。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为聚合模型或边缘推理结果。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Adaptive Federated Deep Learning-Based Semantic Communication in the Social Internet of Things 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.6
架构/方法图|来源:《Adaptive Federated Deep Learning-Based Semantic Communication in the Social Internet of Things》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Adaptive Federated Deep Learning-Based Semantic Communication in the Social Internet of Things》,原 PDF p.8,Fig. 5 Comparison experiment between bandwidth-adaptive model and fixed bandwidth model under different bandwidths 核对论文
核心纳入2024任务导向推理
Attention-Aware Semantic Communications for Collaborative Inference
架构/方法图|来源:《Attention-Aware Semantic Communications for Collaborative Inference》,原 PDF p.4,Fig. 2 This process of selecting critical patches is governed by the proposed attention-aware patch selection rule, elaborated in Section IV 核对论文关键实验结果图/表|来源:《Attention-Aware Semantic Communications for Collaborative Inference》,原 PDF p.10,Fig. 13 Comparison of min-entropy and Shannon entropy with the edge device employing DeiT-Tiny and the server employing DeiT-Base 核对论文
核心纳入2024任务导向推理
Classification-Driven Discrete Neural Representation Learning for Semantic Communications
架构/方法图|来源:《Classification-Driven Discrete Neural Representation Learning for Semantic Communications》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Classification-Driven Discrete Neural Representation Learning for Semantic Communications》,原 PDF p.9,Fig. 6 Test accuracy after sequential removal of semantic symbols 核对论文
相关但非核心2024语义感知资源分配与网络优化
Electric Semantic Compression-Based 6G Wireless Sensing and Communication Integrated Resource Allocation
论文主旨:首先,构建了一种新的电子语义通信信息时效性度量--语义峰值年龄(Peak Age of Semantics,PAoS),该度量涵盖了信息感知、语义压缩、语义传输和语义解码的整个生命周期。 其次,提出了一种基于Top-N2和混合知识统计驱动的模糊强化学习的感知和语义通信集成资源分配算法。 核心证据目标:最后,基于实际应用场景的仿真结果表明,与两种对比算法相比,所提算法的平均PAoS分别降低了4.72%和9.49%,最大PAoS分别降低了5.76%和13.57%。
Motivation|Introduction 怎样导出本文方案
现有进展:针对6G支持下配电网分层协调控制的关键问题,研究了传感与通信一体化资源分配问题。 PDF p.1
仍然存在的问题:首先,构建了一种新的电子语义通信信息时效性度量--语义峰值年龄(Peak Age of Semantics,PAoS),该度量涵盖了信息感知、语义压缩、语义传输和语义解码的整个生命周期。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:其次,提出了一种基于Top-N2和混合知识统计驱动的模糊强化学习的感知和语义通信集成资源分配算法。 PDF p.1
方案为何可能有效:首先,构建了一个适合配电网分层协同控制的6G电力语义通信框架。 PDF p.2
作者希望证明什么:最后,基于实际应用场景的仿真结果表明,与两种对比算法相比,所提算法的平均PAoS分别降低了4.72%和9.49%,最大PAoS分别降低了5.76%和13.57%。 PDF p.1
方法与端到端信息流
其次,提出了一种基于Top-N2和混合知识统计驱动的模糊强化学习的感知和语义通信相结合的资源分配算法,初步构建了一个适合配电网分层协同控制的6G电力语义通信框架。 PDF p.1PDF p.2
输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 Electric Semantic Compression-Based 6G Wireless Sensing and Communication Integrated Resource Allocation:其次,提出了一种基于Top-N2和混合知识统计驱动的模糊强化学习的感知和语义通信相结合的资源分配算法,初步构建了一个适合配电网分层协同控制的6G电力语义通信框架。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Electric Semantic Compression-Based 6G Wireless Sensing and Communication Integrated Resource Allocation 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.8
最后,基于实际应用场景的仿真结果表明,与两种对比算法相比,该算法平均PAoS分别降低了4.72%和9.49%,最大PAoS分别降低了5.76%和13.57%,与DRL和CRRAUS相比,该算法平均PAoS分别降低了4.72%和9.49%,24 h最大PAoS分别降低5.76%和13.57%。 PDF p.1PDF p.10
架构/方法图|来源:《Electric Semantic Compression-Based 6G Wireless Sensing and Communication Integrated Resource Allocation》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Electric Semantic Compression-Based 6G Wireless Sensing and Communication Integrated Resource Allocation》,原 PDF p.8,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2024语义感知资源分配与网络优化
Engineering a Lightweight Deep Joint Source-Channel Coding Based Semantic Communication System
现有进展:深度联合信源信道编码(DeepJSCC)是一种新兴的语义通信技术,是随着物联网对边缘设备需求的日益增长而出现的。 PDF p.1
仍然存在的问题:然而,DeepJSCC面临着与信道衰落相关的挑战。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:首先,本文提出了一种基于集成学习的DeepJSCC(DeepJSCC-ES)算法来抵抗信道衰落。 PDF p.1
方案为何可能有效:在本文中,我们致力于在配备传统数字系统的典型边缘设备上设计轻量级DeepJSCC系统。 PDF p.2
作者希望证明什么:仿真结果表明,所提出的DeepJSCC-ES系统性能优于基准DeepJSCC,尤其在低信噪比条件下表现优异。 PDF p.1
方法与端到端信息流
首先,我们提出了一种基于集成学习的DeepJSCC(DeepJSCC-ES)方法来抵抗信道衰落,在本文中,我们致力于在传统数字系统的典型边缘设备上设计一个轻量级的DeepJSCC系统,在本文中,我们致力于在传统数字系统的典型边缘设备上设计一个轻量级的DeepJSCC系统。 PDF p.1PDF p.2
架构/方法图|来源:《Engineering a Lightweight Deep Joint Source-Channel Coding Based Semantic Communication System》,原 PDF p.9,Fig. 7 Average PSNR of proposed pruning algorithm for different SNRs 核对论文关键实验结果图/表|来源:《Engineering a Lightweight Deep Joint Source-Channel Coding Based Semantic Communication System》,原 PDF p.8,Fig. 5 Average PSNR of the DeepJSCC-ES and other compared systems for different SNRs 核对论文
现有进展:面向任务的语义通信由于其能够在不牺牲任务性能的前提下减少数据传输量而受到越来越多的关注。 PDF p.1
仍然存在的问题:然而,现有语义通信的不可解释性在一定程度上阻碍了其实际应用。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
本文提出什么:为此提出了一种基于三元组的可解释语义通信(TESC)方案,用于高效地表示文本语义。 PDF p.1
方案为何可能有效:具体来说,我们开发了一种语义提取方法,将文本转换为三元组,同时使用句法依赖分析,以提高语义的完整性。 PDF p.1
作者希望证明什么:实验结果表明:1)TESC方案在Top-1精度和传输效率方面优于基准方案; 2)与传统通信方法相比,TESC方案具有约150%的性能增益。 PDF p.1
方法与端到端信息流
本文提出了一种基于三元组的可解释语义通信(TESC)方案,用于有效地表示文本语义。具体地,我们开发了一种语义提取方法,将文本转换为三元组,同时使用句法依赖分析来增强语义完整性。本文提出了一种新的基于三元组的可解释语义通信(TESC)方案,用于文本任务,其可有效地过滤冗余信息以减少传输的数据量。 PDF p.1PDF p.2
输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 Explainable Semantic Communication for Text Tasks:本文提出了一种基于三元组的可解释语义通信(TESC)方案,用于有效地表示文本语义。具体地,我们开发了一种语义提取方法,将文本转换为三元组,同时使用句法依赖分析来增强语义完整性。本文提出了一种新的基于三元组的可解释语义通信(TESC)方案,用于文本任务,其可有效地过滤冗余信息以减少传输的数据量。
值得注意的是,我们已经采用了8位量化。此外,所提出的TESC方案,只需要1.14 MB,通过使用8位参数量化实现了大量的空间节省,这与依赖于32位量化的现有方法形成了显著的对比。 表示判定:Explainable Semantic Communication for Text Tasks 的主传输单位属于“数字压缩 bitstream 或量化 feature;无线接口未纳入研究”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.8PDF p.11
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.8
架构/方法图|来源:《Explainable Semantic Communication for Text Tasks》,原 PDF p.3,Fig. 2 An illustration of the proposed TESC scheme for text tasks 核对论文关键实验结果图/表|来源:《Explainable Semantic Communication for Text Tasks》,原 PDF p.11,Fig. 9 The number of transmitted symbols comparison between TESC and various baselines 核对论文
核心纳入2024图像传输、压缩或生成
Federated KD-Assisted Image Semantic Communication in IoT Edge Learning
现有进展:从第五代移动的通信(5G)到超5G(B5 G)的演进将导致物联网(IoT)中更普遍和更智能的范例。 PDF p.1
仍然存在的问题:然而,ISC需要合适的设备和足够的计算资源来支持复杂的神经网络模型,这是一个重大挑战。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:为了解决这个问题,我们提出了一个联邦语义特征提取(FedSFD)架构,以提高ISC的全局性能相结合的联邦学习(FL)和特征提取(FD)的特征知识转移。 PDF p.1
方案为何可能有效:其次,我们将信息瓶颈(IB)的概念,损失函数的设计,以平衡压缩和重建。 PDF p.1
作者希望证明什么:仿真实验表明,与基线算法相比,该算法在组ISC重建中具有更好的ISC重建效果和噪声鲁棒性。 PDF p.1
方法与端到端信息流
为了解决这个问题,本文提出了一种联合语义特征提取(FedSFD)结构,通过联合学习(FL)和特征提取(FD)来实现特征知识的传递,从而提高ISC的全局性能。其次,我们将信息瓶颈(IB)的概念引入到损失函数的设计中,以平衡压缩和重构。在损失函数设计中引入了信息瓶颈的思想,在图像压缩和重建性能之间进行了折衷。 PDF p.1PDF p.2
架构/方法图|来源:《Federated KD-Assisted Image Semantic Communication in IoT Edge Learning》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Federated KD-Assisted Image Semantic Communication in IoT Edge Learning》,原 PDF p.10,Fig. 4 PSNR values at multiple rounds for I.I.D CIFAR-10 data 核对论文
核心纳入2024任务导向推理
Goal-Oriented Source Coding and Filtering for Vehicular Communications
现有进展:车联网(V2X)网络将成为未来几代蜂窝网络的重要应用,必将改变我们对交通系统的概念。 PDF p.1
仍然存在的问题:然而,在共享和有限的容量范围内满足这些高度严格的要求对科学界构成了巨大的挑战。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:在本文中,我们提出了一个架构和多种选择,以实现过滤和源代码的目标为导向的车辆通信。 PDF p.1
方案为何可能有效:我们选择了Bloom过滤器(BF)作为过滤消息的方法,并认为驱动BF的过滤规则是由ML/DL 2技术指导的人工智能(AI)过程的结果。 PDF p.2
作者希望证明什么:我们的研究结果表明,面向目标的通信,执行作为组合的布鲁姆过滤和面向目标的源编码,可以大大有助于不仅减少高达30%的能源消耗,但也减少延迟,这反过来又增加了支持量的延迟敏感的流量高达819.2%。 PDF p.1
方法与端到端信息流
在本文中,我们提出了一个架构和多种选择,以实现面向目标的车辆通信的过滤和源代码。我们选择了布隆过滤器(BF)作为过滤消息的方法,并认为驱动BF的过滤规则是由ML/DL 2技术指导的人工智能(AI)过程的结果。更具体地说,在GO通信的背景下,我们提出使用两种互补技术:滤波和信源编码。 PDF p.1PDF p.2
输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Goal-Oriented Source Coding and Filtering for Vehicular Communications:在本文中,我们提出了一个架构和多种选择,以实现面向目标的车辆通信的过滤和源代码。我们选择了布隆过滤器(BF)作为过滤消息的方法,并认为驱动BF的过滤规则是由ML/DL 2技术指导的人工智能(AI)过程的结果。更具体地说,在GO通信的背景下,我们提出使用两种互补技术:滤波和信源编码。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Goal-Oriented Source Coding and Filtering for Vehicular Communications 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.12
我们的研究结果表明,以目标为导向的通信,作为布卢姆过滤和目标为导向的源编码的组合,可以大大有助于不仅减少高达30%的能源消耗,但也减少延迟,这反过来又将延迟敏感流量的支持量增加了819.2%一旦我们知道如何根据K配置无损编码器以具有我们可以预期的有界延迟和压缩增益,我们就评估V2X网络中的源编码器在与没有源编码的基线场景相比时的效果。 PDF p.1PDF p.12
架构/方法图|来源:《Goal-Oriented Source Coding and Filtering for Vehicular Communications》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Goal-Oriented Source Coding and Filtering for Vehicular Communications》,原 PDF p.12,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2024视频传输、生成或控制
MDVSC—Efficient Wireless Model Division Video Semantic Communication
架构/方法图|来源:《MDVSC—Efficient Wireless Model Division Video Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《MDVSC—Efficient Wireless Model Division Video Semantic Communication》,原 PDF p.12,Fig. 9 PSNR (subgraph (a)) and MS-SSIM (subgraph (b)) performance versus the change of channel SNR over fading channel 核对论文
核心纳入2024边缘学习与任务通信
Mobility-Aware Split-Federated With Transfer Learning for Vehicular Semantic Communication Networks
现有进展:因此,有效地解决增强未来车载网络的通信效率、可靠性和QoS的挑战成为支持6G的车载网络正在进行的演进中的中心关注点。 PDF p.1
仍然存在的问题:然而,在高度移动的车辆网络中,可靠且有效的模型训练变得非常具有挑战性。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:梯度或中间特征既大又易受噪声影响,通信错误会直接改变训练收敛或推理决策;这使空口聚合与任务 loss 必须一起考虑。 PDF p.1
本文提出什么:为解决该问题,提出一种新的基于车辆任务卸载场景的移动感知分裂-联邦迁移学习(MSFTL)框架。 PDF p.1
方案为何可能有效:据我们所知,没有先前的有效学习框架能够在实时移动的车辆卸载环境中更新语义编码器模型,同时寻址Q1-Q3。 PDF p.2
作者希望证明什么:特别地,为了进一步降低训练成本和适应车辆机动场景,提出了一种基于Stackelberg博弈的高机动性训练资源优化机制。 PDF p.1
方法与端到端信息流
为了解决这些问题,本文提出了一种基于车辆任务卸载场景的移动感知分裂-联邦迁移学习框架(MSFTL).据我们所知,目前还没有一种有效的学习框架能够在实时移动的车辆卸载环境中更新语义编码器模型的同时,同时处理Q1-Q3.据我们所知,没有先前的有效学习框架能够在实时移动的车辆卸载环境中更新语义编码器模型,同时寻址Q1-Q3。 PDF p.1PDF p.2
输入输入是边缘学习与任务通信所需的梯度、模型更新或中间特征。
发送端发送端采用 Mobility-Aware Split-Federated With Transfer Learning for Vehicular Semantic Communication Networks:为了解决这些问题,本文提出了一种基于车辆任务卸载场景的移动感知分裂-联邦迁移学习框架(MSFTL).据我们所知,目前还没有一种有效的学习框架能够在实时移动的车辆卸载环境中更新语义编码器模型的同时,同时处理Q1-Q3.据我们所知,没有先前的有效学习框架能够在实时移动的车辆卸载环境中更新语义编码器模型,同时寻址Q1-Q3。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为聚合模型或边缘推理结果。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Mobility-Aware Split-Federated With Transfer Learning for Vehicular Semantic Communication Networks 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.7
架构/方法图|来源:《Mobility-Aware Split-Federated With Transfer Learning for Vehicular Semantic Communication Networks》,原 PDF p.5,Fig. 3 The framework of the proposed MSFTL 核对论文关键实验结果图/表|来源:《Mobility-Aware Split-Federated With Transfer Learning for Vehicular Semantic Communication Networks》,原 PDF p.11,Fig. 9 Bonus impact on training data number 核对论文
核心纳入2024任务导向推理
Multilevel Feature Transmission in Dynamic Channels: A Semantic Knowledge Base and Deep-Reinforcement-Learning-Enabled Approach
现有进展:随着边缘计算的普及,边缘设备上的高效人工智能推理对于智能应用(如自动驾驶汽车和虚拟/增强现实)已变得至关重要。 PDF p.1
仍然存在的问题:针对端到端通信系统中动态信道条件和设备移动性带来的挑战,提出了一种优化框架。 PDF p.1
为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:针对端到端通信系统中动态信道条件和设备移动性带来的挑战,提出了一种优化框架。 PDF p.1
方案为何可能有效:我们的方法建立在现有方法的基础上,通过利用语义知识库来驱动多级特征传输,在整个传输过程中考虑时间因素、状态转换和动态元素。 PDF p.1
作者希望证明什么:数值实验结果表明,与传统贪婪算法相比,本文方法在不同的系统设置下具有更好的性能。 PDF p.1
方法与端到端信息流
针对端到端通信系统中动态信道条件和设备移动性带来的挑战,提出了一种基于语义知识库的多层次特征传输优化方法,该方法充分考虑了传输过程中的时间因素、状态转换和动态元素,并将该问题描述为一个在线优化问题,使用马尔可夫链来对识别样本的状态转移建模。 PDF p.1PDF p.2
输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Multilevel Feature Transmission in Dynamic Channels: A Semantic Knowledge Base and Deep-Reinforcement-Learning-Enabled Approach:针对端到端通信系统中动态信道条件和设备移动性带来的挑战,提出了一种基于语义知识库的多层次特征传输优化方法,该方法充分考虑了传输过程中的时间因素、状态转换和动态元素,并将该问题描述为一个在线优化问题,使用马尔可夫链来对识别样本的状态转移建模。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Multilevel Feature Transmission in Dynamic Channels: A Semantic Knowledge Base and Deep-Reinforcement-Learning-Enabled Approach 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
系统在多级中间特征与最终类别标签之间自适应选择发送层级,并用即时传输率 R(i) 把所选表示的数据量换算为时延。论文报告的是 feature level、传输率和端到端 latency/accuracy 权衡,没有给出量化位宽、码本或逐帧 bitstream;因此不能把网络张量维度直接解释为空口 bit 数。 PDF p.6
架构/方法图|来源:《Multilevel Feature Transmission in Dynamic Channels: A Semantic Knowledge Base and Deep-Reinforcement-Learning-Enabled Approach》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Multilevel Feature Transmission in Dynamic Channels: A Semantic Knowledge Base and Deep-Reinforcement-Learning-Enabled Approach》,原 PDF p.8,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2024多模态检索与任务通信
Multimodal Virtual Semantic Communication for Tiny-Machine-Learning-Based UAV Task Execution
架构/方法图|来源:《Multimodal Virtual Semantic Communication for Tiny-Machine-Learning-Based UAV Task Execution》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Multimodal Virtual Semantic Communication for Tiny-Machine-Learning-Based UAV Task Execution》,原 PDF p.3,Fig. 1 Task-oriented multimodal UAV communication scenario 核对论文
相关但非核心2024语义信息度量与理论
Rate-Adaptable Multitask-Oriented Semantic Communication: An Extended Rate–Distortion Theory-Based Scheme
架构/方法图|来源:《Rate-Adaptable Multitask-Oriented Semantic Communication: An Extended Rate–Distortion Theory-Based Scheme》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Rate-Adaptable Multitask-Oriented Semantic Communication: An Extended Rate–Distortion Theory-Based Scheme》,原 PDF p.10,Fig. 5 Number of transmitted symbols and multitask performance under different SNRs on the NYUD-v2 validation set 核对论文
核心纳入2024文本传输或语言任务
Semantic Communication Meets Edge Intelligence: Semantic-Relay-Aided Text Transmissions
现有进展:为了解决这些问题,我们在本文中提出了一种新的架构,称为语义中继(SemRelay),它作为边缘服务器为两类边缘用户提供DL启用的SemCom(DeepSC)服务,称为具有丰富计算资源的语义用户(SemUsers)和具有有限资源的传统用户(ConUsers)。 PDF p.1
仍然存在的问题:然而,现有的研究通常忽略了移动的设备上有限的计算和存储资源,这可能使其无法负担实现资源需求高的基于深度学习(DL)的语义编码器/解码器。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
本文提出什么:为了解决这些问题,我们在本文中提出了一种新的架构,称为语义中继(SemRelay),它作为边缘服务器为两类边缘用户提供DL启用的SemCom(DeepSC)服务,称为具有丰富计算资源的语义用户(SemUsers)和具有有限资源的传统用户(ConUsers)。 PDF p.1
方案为何可能有效:此外,一个优化问题,制定联合设计的SemRelay发射功率分配和系统带宽分配,以最大限度地提高所有用户的加权和速率。 PDF p.1
作者希望证明什么:最后,通过数值仿真验证了所提算法的有效性,并与传统的解码转发中继相比,所提SemRelay具有更优的性能,尤其是在小带宽区域。 PDF p.1
方法与端到端信息流
为了解决上述问题,我们提出了一种新的体系结构,称为语义中继(SemRelay),它充当边缘服务器,为两类边缘用户(称为语义用户)提供支持DL的SemCom(DeepSC)服务(SemUsers)拥有丰富的计算资源和传统用户(ConUsers)的能力,用公式表示优化问题以联合设计SemRelay发射功率分配和系统带宽分配以最大化所有用户的加权和速率。所提出的具有边缘学习能力的SemRelay不同于传统的针对比特传输而设计的解码转发(DF)中继,因为它可以通过利用其丰富的计算资源来执行基于DL的语义传输和解码。 PDF p.1PDF p.2
架构/方法图|来源:《Semantic Communication Meets Edge Intelligence: Semantic-Relay-Aided Text Transmissions》,原 PDF p.5,Fig. 2 Proposed SemRelay-aided multiuser text transmission system 核对论文关键实验结果图/表|来源:《Semantic Communication Meets Edge Intelligence: Semantic-Relay-Aided Text Transmissions》,原 PDF p.12,Fig. 6 Achievable weighted sum-rate for heterogeneous users versus total bandwidth B̄ 核对论文
相关但非核心2024图像传输、压缩或生成
Semantic Similarity Score for Measuring Visual Similarity at Semantic Level
架构/方法图|来源:《Semantic Similarity Score for Measuring Visual Similarity at Semantic Level》,原 PDF p.4,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Semantic Similarity Score for Measuring Visual Similarity at Semantic Level》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2024点云/三维场景传输
Semantic-Aware Architecture Design for a Lifelong Swarm Metaverse
架构/方法图|来源:《Semantic-Aware Architecture Design for a Lifelong Swarm Metaverse》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Semantic-Aware Architecture Design for a Lifelong Swarm Metaverse》,原 PDF p.13,Fig. 8 RESULTS in training process 核对论文
相关但非核心2024通用语义通信系统
Semantic-Aware Spectrum Sharing in Internet of Vehicles Based on Deep Reinforcement Learning
现有进展:本文研究了高速移动的车联网(IoV)中的语义通信,重点研究了车对车(V2 V)和车对基础设施(V2 I)通信之间的频谱共享。 PDF p.1
仍然存在的问题:频谱稀缺和高网络流量的挑战 PDF p.1
为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
本文提出什么:我们提出了一种语义感知的频谱共享(SSS)算法,使用深度强化学习(DRL)和软演员-评论家(SAC)方法。 PDF p.1
方案为何可能有效:我们设计了一种基于DRL SAC方法的语义感知频谱共享算法(SSS),以最大限度地提高V2 I的高速语义频谱效率(HSSE),并提高V2 V链路有效语义信息传输(SRS)的成功率1。 PDF p.2
作者希望证明什么:实验结果表明,SSS算法的性能优于其他基线算法,包括基于传统通信的频谱共享算法和采用其他强化学习方法的频谱共享算法。 PDF p.1
方法与端到端信息流
提出了一种基于深度强化学习(DRL)和软行动者-批评者(SAC)方法的语义感知频谱共享(SSS)算法。为了最大化V2 I的高速语义频谱效率(HSSE),提高V2 V链路有效语义信息传输(SRS)的成功率,我们设计了一种基于DRL SAC方法的语义感知频谱共享算法(SSS)。基于DRL SAC方法的感知频谱共享算法(SSS),以最大化V2 I的高速语义频谱效率(HSSE),并提高V2 V链路的有效语义信息传输(SRS)的成功率1。 PDF p.1PDF p.2
输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 Semantic-Aware Spectrum Sharing in Internet of Vehicles Based on Deep Reinforcement Learning:提出了一种基于深度强化学习(DRL)和软行动者-批评者(SAC)方法的语义感知频谱共享(SSS)算法。为了最大化V2 I的高速语义频谱效率(HSSE),提高V2 V链路有效语义信息传输(SRS)的成功率,我们设计了一种基于DRL SAC方法的语义感知频谱共享算法(SSS)。基于DRL SAC方法的感知频谱共享算法(SSS),以最大化V2 I的高速语义频谱效率(HSSE),并提高V2 V链路的有效语义信息传输(SRS)的成功率1。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Semantic-Aware Spectrum Sharing in Internet of Vehicles Based on Deep Reinforcement Learning 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.9
架构/方法图|来源:《Semantic-Aware Spectrum Sharing in Internet of Vehicles Based on Deep Reinforcement Learning》,原 PDF p.4,Fig. 2 The SYSTEM MODEL We consider there exists W V2I links and Q V2V links in the system, where the interferences exists among different links 核对论文关键实验结果图/表|来源:《Semantic-Aware Spectrum Sharing in Internet of Vehicles Based on Deep Reinforcement Learning》,原 PDF p.13,Fig. 10 The HSSE versus vehicular number 16 18 20 核对论文
相关但非核心2024任务导向推理
Source Value-Based Resource Allocation in Task-Oriented Communications
架构/方法图|来源:《Source Value-Based Resource Allocation in Task-Oriented Communications》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Source Value-Based Resource Allocation in Task-Oriented Communications》,原 PDF p.12,Fig. 12 TAD as the number of devices increases under different schemes 核对论文
相关但非核心2024语义感知资源分配与网络优化
UAV-Assisted Digital-Twin Synchronization With Tiny-Machine-Learning-Based Semantic Communications
现有进展:语义通信是无人机(UAV)辅助边缘计算环境中数字孪生(DT)同步的新兴范例,其中机器学习(ML)模型被部署在边缘服务器和UAV上作为语义编码器和解码器以执行实时同步。 PDF p.1
仍然存在的问题:然而,在有限的系统资源,额外的计算工作量仍然带来了所有参与者的语义信息提取和恢复。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:在这项工作中,我们提出了一个优化的基于ML的DT同步框架,以最大限度地减少无人机辅助边缘计算环境中的同步延迟,考虑虚拟能量赤字队列稳定性的时间平均约束。 PDF p.1
方案为何可能有效:由于共存的微小ML为基础的语义通信,语义提取因子被引入到制定DT同步问题的时间平均时间最小化问题。 PDF p.1
作者希望证明什么:此外,DRLS算法可以实现高达57.14%的同步能量减少与代表性的同步策略相比。 PDF p.1
方法与端到端信息流
在这项工作中,我们提出了一个优化的基于微小ML的DT同步框架,以最大限度地减少无人机辅助边缘计算环境中的同步延迟,考虑虚拟能量赤字队列稳定性的时间平均约束。由于微小ML的语义通信共存,引入语义提取因子,将DT同步问题公式化为时间-为了充分探索语义通信的好处,我们在无人机辅助边缘计算环境中开发了一个基于tinyML的语义通信的DT同步框架。 PDF p.1PDF p.2
架构/方法图|来源:《UAV-Assisted Digital-Twin Synchronization With Tiny-Machine-Learning-Based Semantic Communications》,原 PDF p.11,Fig. 5 It is worth noting that the proposed DRLS scheme is equivalent to the conventional UECS scheme when the extraction factor threshold is set to omin = 1 核对论文关键实验结果图/表|来源:《UAV-Assisted Digital-Twin Synchronization With Tiny-Machine-Learning-Based Semantic Communications》,原 PDF p.2,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2024图像传输、压缩或生成
Wireless Power Transfer Meets Semantic Communication For Resource-Constrained IoT Networks: A Joint Transmission Mode Selection and Resource Management Approach
现有进展:在这项工作中,我们考虑在资源受限的物联网(IoT)系统中整合能量收集(EH)和语义通信策略。 PDF p.1
仍然存在的问题:然而,这对物联网设备提出了重大挑战,因为图像数据通常很大,并且对它们的能量和带宽资源有固有的限制。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:该系统使IoT设备能够从基站收集能量,利用该收集的能量来提取和传输语义信息(例如,场景图)。 PDF p.1
方案为何可能有效:为了最大限度地将图像数据或场景图传输到中心站,我们制定了一个综合问题,该问题联合优化了EH持续时间,原始图像选择,发射功率和物联网设备的信道分配。 PDF p.1
作者希望证明什么:在真实的数据集上的仿真结果表明,与基线方案相比,本文提出的算法具有更优的性能。 PDF p.1
方法与端到端信息流
该系统使物联网设备能够从基站获取能量,并利用获取的能量提取和传输语义信息为了最大化到中心站的图像数据或场景图的总传输,我们用公式表示一个综合问题,该综合问题联合优化EH持续时间、原始图像选择、发射功率以及向物联网设备的信道分配。我们用公式表达了一个优化问题,该优化问题旨在通过联合优化EH持续时间、原始图像和三元组之间的选择、发送功率和向物联网设备的信道分配来最大化发送到BS的总图像数据。 PDF p.1PDF p.2
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Wireless Power Transfer Meets Semantic Communication For Resource-Constrained IoT Networks: A Joint Transmission Mode Selection and Resource Management Approach:该系统使物联网设备能够从基站获取能量,并利用获取的能量提取和传输语义信息为了最大化到中心站的图像数据或场景图的总传输,我们用公式表示一个综合问题,该综合问题联合优化EH持续时间、原始图像选择、发射功率以及向物联网设备的信道分配。我们用公式表达了一个优化问题,该优化问题旨在通过联合优化EH持续时间、原始图像和三元组之间的选择、发送功率和向物联网设备的信道分配来最大化发送到BS的总图像数据。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Wireless Power Transfer Meets Semantic Communication For Resource-Constrained IoT Networks: A Joint Transmission Mode Selection and Resource Management Approach 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.8
架构/方法图|来源:《Wireless Power Transfer Meets Semantic Communication For Resource-Constrained IoT Networks: A Joint Transmission Mode Selection and Resource Management Approach》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Wireless Power Transfer Meets Semantic Communication For Resource-Constrained IoT Networks: A Joint Transmission Mode Selection and Resource Management Approach》,原 PDF p.10,Fig. 5 Reward comparison among the DQN, PPO, and A2C schemes 核对论文
相关但非核心2025任务导向推理
A Hybrid Federated Learning Framework for Task-Oriented Semantic Communication
现有进展:在现有的基于深度学习的语义通信系统中,语义模型的集中式训练存在隐私泄露的风险,而分布式训练给用户设备(UE)带来了巨大的计算负担。 PDF p.1
仍然存在的问题:为了克服上述缺陷,本文提出了一种混合联邦学习(Hybrid-FL)框架,在保护用户隐私的同时减轻用户的计算负担。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:为了克服上述缺陷,本文提出了一种混合联邦学习(Hybrid-FL)框架,在保护用户隐私的同时减轻用户的计算负担。 PDF p.1
方案为何可能有效:具体地,每个UE将局部梯度和语义符号上传到基站,用于全局和局部语义模型的协作训练。 PDF p.1
作者希望证明什么:实验结果表明,与传统FL算法相比,Hybrid-FL算法的准确率提高了20%,延迟减少了80%。 PDF p.1
方法与端到端信息流
为解决该问题,提出了一种混合联邦学习方法(Hybrid-FL)框架来减轻UE的计算负担,同时保护用户隐私。具体地,每个UE将局部梯度和语义符号上传到基站,用于全局和局部语义模型的协作训练。贡献和组织在本文中,我们提出了一种混合FL(Hybrid-FL)框架来增强分布式UE之间的面向任务的SC的训练,同时通过将计算任务部分地从UE卸载到BS来减少等待时间。 PDF p.1PDF p.2
输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 A Hybrid Federated Learning Framework for Task-Oriented Semantic Communication:为解决该问题,提出了一种混合联邦学习方法(Hybrid-FL)框架来减轻UE的计算负担,同时保护用户隐私。具体地,每个UE将局部梯度和语义符号上传到基站,用于全局和局部语义模型的协作训练。贡献和组织在本文中,我们提出了一种混合FL(Hybrid-FL)框架来增强分布式UE之间的面向任务的SC的训练,同时通过将计算任务部分地从UE卸载到BS来减少等待时间。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:A Hybrid Federated Learning Framework for Task-Oriented Semantic Communication 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.11
架构/方法图|来源:《A Hybrid Federated Learning Framework for Task-Oriented Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Hybrid Federated Learning Framework for Task-Oriented Semantic Communication》,原 PDF p.14,Fig. 7 Accuracy comparisons on the CIFAR-10 and Cityscapes datasets versus different SNR 核对论文
核心纳入2025图像传输、压缩或生成
A Novel Lightweight Joint Source-Channel Coding Design in Semantic Communications
dependency层为每个输入特征映射使用单个内核。 表示判定:lightweight 的主传输单位属于“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
发送端以压缩控制量 R 将图像 x 映射为连续 semantic code z=E_{θ_e}(x,R),再经衰落与噪声信道发送。论文用压缩比/连续 latent 维度调节带宽,没有定义 VQ、每维量化 bit 或 index-to-bit 链路,因此只能比较 R 或 channel uses,不能从模型输出直接换算帧级 bitstream。 PDF p.2PDF p.3
数据集为ImageNet、Kodak、CLIC;指标包括PSNR、SSIM、MS-SSIM、MSE、mAP;信道/链路条件包括Rician、wireless channel。 PDF p.3
大量的模拟实验表明,LICRnet在保持令人满意的图像压缩和重建性能的同时,显著降低了计算复杂度,使其非常适合在资源受限的环境中部署。与使用固定或移动窗口注意力的先前工作不同,我们的VW-MSA基于特征分辨率自适应地缩放窗口大小,能够在高分辨率下进行细粒度的细节提取,并在低分辨率下进行全局表示,同时显著降低注意力开销。 PDF p.1PDF p.2
现有进展:作为这一领域的开创性工作,深度学习支持的语义通信(DeepSC)构成了一种基于transformer的新型算法框架,transformer是一种广泛用于数字处理文本的深度学习工具。 PDF p.1
仍然存在的问题:然而,现实世界的通信系统比上述理想模型复杂得多。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
本文提出什么:此外,为了提高训练效率,我们提出了一个预训练计划和部分再训练计划,快速调整神经网络参数时,新的用户被添加到MAC。 PDF p.1
方案为何可能有效:与专注于点对点传输的DeepSC相反,这项工作扩展了基于Transformer的MAC信道中多用户通信的语义提取,并将SIC方案纳入其中。 PDF p.2
作者希望证明什么:在经典信息论中,连续干扰消除(SIC)方案是一种常用的抑制干扰和获得信道容量的方法。 PDF p.1
方法与端到端信息流
此外,为了提高训练效率,我们提出了一种预训练方案和一种部分再训练方案,当新用户添加到MAC时,该方案可以快速调整神经网络参数。与专注于点对点传输的DeepSC相反,这项工作将基于Transformer的语义提取扩展到MAC信道中的多用户通信,与专注于点对点传输的DeepSC相反,这项工作扩展了基于Transformer的语义提取,用于MAC信道中的多用户通信,其中SIC方案被并入。 PDF p.1PDF p.2
输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 A Semantic Approach to Successive Interference Cancellation for Multiple Access Networks:此外,为了提高训练效率,我们提出了一种预训练方案和一种部分再训练方案,当新用户添加到MAC时,该方案可以快速调整神经网络参数。与专注于点对点传输的DeepSC相反,这项工作将基于Transformer的语义提取扩展到MAC信道中的多用户通信,与专注于点对点传输的DeepSC相反,这项工作扩展了基于Transformer的语义提取,用于MAC信道中的多用户通信,其中SIC方案被并入。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:A Semantic Approach to Successive Interference Cancellation for Multiple Access Networks 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.9
架构/方法图|来源:《A Semantic Approach to Successive Interference Cancellation for Multiple Access Networks》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Semantic Approach to Successive Interference Cancellation for Multiple Access Networks》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025语音/音频传输或识别
A Universal Speech Semantic Communication Framework for Multitask Applications Based on Unsupervised Models
现有进展:随着下一代网络应用的日益复杂和多种服务需求的共存,基于生成人工智能(GAI)和大模型(LM)的语义通信被广泛认为是解决这些挑战的有前途的解决方案。 PDF p.1
仍然存在的问题:然而,随着新兴和日益复杂的应用程序的出现,如虚拟接收2025年7月13日;修订2025年9月1日;接受2025年9月11日。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
本文提出什么:在本文中,我们提出了一个语义通信系统,旨在满足不同的语音应用程序的要求,同时使准确的语音传输。 PDF p.1
方案为何可能有效:语义编码器包括用于学习通用语音表示的无监督模型wav 2 vec 2.0,以实现跨各种语音相关任务的适应性。 PDF p.1
作者希望证明什么:这些系统的目标不仅是通过减少传输数据来减轻系统负担,而且还要适应新的复杂要求。 PDF p.1
方法与端到端信息流
本文提出了一种语义通信系统,该系统在保证语音传输准确性的同时,还能满足语音应用的各种需求。语义编码器包含一个用于学习通用语音表示的无监督模型wav2vec2.0,以实现对各种语音相关任务的适应性。基于这些优点,该工作提出了一种无监督的语义语音通信系统,其克服了传统的基于DNN的方法的限制,并且提供了更灵活和可推广的解决方案。 PDF p.1PDF p.2
输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 A Universal Speech Semantic Communication Framework for Multitask Applications Based on Unsupervised Models:本文提出了一种语义通信系统,该系统在保证语音传输准确性的同时,还能满足语音应用的各种需求。语义编码器包含一个用于学习通用语音表示的无监督模型wav2vec2.0,以实现对各种语音相关任务的适应性。基于这些优点,该工作提出了一种无监督的语义语音通信系统,其克服了传统的基于DNN的方法的限制,并且提供了更灵活和可推广的解决方案。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:连续神经 JSCC latent / 实复信道符号
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“连续神经 JSCC latent / 实复信道符号”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:A Universal Speech Semantic Communication Framework for Multitask Applications Based on Unsupervised Models 的主传输单位属于“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.7
架构/方法图|来源:《A Universal Speech Semantic Communication Framework for Multitask Applications Based on Unsupervised Models》,原 PDF p.6,Fig. 4 Blockwise architecture of the proposed semantic communication system, which ensures high fidelity speech transmission and supports a wide range of other speech applications by allowing the semantic decoder to be replaced without modifying the encoder 核对论文关键实验结果图/表|来源:《A Universal Speech Semantic Communication Framework for Multitask Applications Based on Unsupervised Models》,原 PDF p.7,Fig. 5 As in most transmission systems, the BER decreases with the increasing of signal-to-noise ratio (SNR) 核对论文
核心纳入2025任务导向推理
Advanced Semantic Communication Techniques for IoT Using Disentangled Information Bottleneck
现有进展:本文探讨了源数据压缩对通信系统接收端任务执行性能的影响,以及信道环境变化对语义编码特征的干扰和影响。 PDF p.1
仍然存在的问题:然而,大多数现有的语义通信框架只是将预先训练好的DNN划分为两个子网,分别部署在发送端和接收端,忽略了下游任务对源数据特征压缩的重要影响。 PDF p.1
为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:为了进一步优化语义通信模型的性能,提出了一种基于解缠信息瓶颈的语义通信框架(DIB-DeepSC),通过分离和解耦源数据中的无关信息,提高模型的推理精度,从而更大程度地压缩与下游任务执行相关的有效信息,降低通信开销。 PDF p.1
方案为何可能有效:在第三节中,我们基于构建的DIB-DeepSC框架设计了相关模块的损耗函数。 PDF p.3
作者希望证明什么:为了进一步优化语义通信模型的性能,提出了一种基于解缠信息瓶颈的语义通信框架(DIB-DeepSC),通过分离和解耦源数据中的无关信息,提高模型的推理精度,从而更大程度地压缩与下游任务执行相关的有效信息,降低通信开销。 PDF p.1
方法与端到端信息流
为了进一步优化语义通信模型的性能,语义通信框架该模型通过分离和解耦源数据中的无关信息,提高了模型的推理精度,从而更大程度地压缩了与下游任务执行相关的有效信息,降低了通信开销。在构建的DIB-DeepSC框架的基础上,设计了相关模块的损失函数,与传统的IB框架设计相比,DIB-DeepSC具有更强的信息压缩能力,能够更有效地提取任务相关信息。 PDF p.1PDF p.2PDF p.3
信道与工作点MIMO、SNR of 20 dB、SNR of 27.30 dB、compression ratio of 320
数据集为CIFAR-10、DIV2K;实验小节中明确出现的比较对象包括DeepJSCC、DeepSC、JSCC;指标包括accuracy、classification accuracy;信道/链路条件包括MIMO;正文可定位的代表性工作点有SNR of 20 dB、SNR of 27.30 dB、compression ratio of 320。 PDF p.10
为了进一步优化语义通信模型的性能,DIB-DeepSC(DIB-DeepSC),通过分离和解耦源数据中的无关信息,提高模型的推理精度,从而更大程度地压缩与下游任务执行相关的有效信息,图中描绘的数据清楚地表明,随着SNR的变化,由我们提出的方案实现的通信模块的接收端端处的重建图像质量显著优于其他两个方案(即,DeepJSCC和VFE),具有大约1dB或更高的优势裕度。 PDF p.1PDF p.12
架构/方法图|来源:《Advanced Semantic Communication Techniques for IoT Using Disentangled Information Bottleneck》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Advanced Semantic Communication Techniques for IoT Using Disentangled Information Bottleneck》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025通用语义通信系统
An N -ary-Based Reliable Semantic Communication System With a Correction and Reasoning Approach
架构/方法图|来源:《An N -ary-Based Reliable Semantic Communication System With a Correction and Reasoning Approach》,原 PDF p.3,Fig. 3 Proposed semantic communication system framework based on n-ary relation 核对论文关键实验结果图/表|来源:《An N -ary-Based Reliable Semantic Communication System With a Correction and Reasoning Approach》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025视频传输、生成或控制
Cross-Layer Encrypted Semantic Communication Framework for Panoramic Video Transmission
仍然存在的问题:在本文设定中,现有方法不能同时满足“视频传输、生成或控制”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
本文提出什么:因此,我们提出了一个跨层加密语义通信(CLESC)框架的全景视频传输,结合特征提取,编码,加密,循环冗余校验(CRC),和重传过程,以实现语义通信和传统的通信系统之间的兼容性。 PDF p.1
方案为何可能有效:为了验证上述框架,我们设计了一个端到端的自适应全景视频语义传输(APVST)网络,该网络利用深度联合信源信道编码(JSCC)结构和注意力机制,集成了纬度自适应模块,便于自适应语义特征提取和全景视频的可变长度编码。 PDF p.1
作者希望证明什么:与传统的和基于人工智能(AI)的视频源编码传输方案相比,我们提出的CLESC在低信噪比(SNR)条件下实现了上级传输性能。 PDF p.1
方法与端到端信息流
因此,我们提出了一种跨层加密语义通信(CLESC)框架,用于全景视频传输,结合特征提取、编码、加密、循环冗余校验(CRC)和重传过程,以实现语义通信与传统通信系统的兼容。为了验证上述框架,我们设计了一个端到端的自适应全景视频语义传输(APVST)网络,该网络利用了深度联合信源信道编码(JSCC)结构和注意机制,与纬度自适应模块集成,该纬度自适应模块便于全景视频的自适应语义特征提取和可变长度编码。具体地,我们框架中的链路层根据语义信息的重要性动态调整资源分配和差错控制策略(以下称为语义重要性)。 PDF p.1PDF p.2
架构/方法图|来源:《Cross-Layer Encrypted Semantic Communication Framework for Panoramic Video Transmission》,原 PDF p.2,Fig. 1 Illustration of several possible schemes for ensuring compatibility and adaptation between semantic communication and traditional mobile communication frameworks 核对论文关键实验结果图/表|来源:《Cross-Layer Encrypted Semantic Communication Framework for Panoramic Video Transmission》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Deep Semantic Communication for Knowledge Sharing in Internet of Vehicles
现有进展:沿着智能交通系统(ITS)的发展,基于人工智能(AI)的机器学习技术在车联网(IoV)中得到了广泛的应用。 PDF p.1
仍然存在的问题:然而,它是具有挑战性的,以确保知识共享的效率下不稳定的连接车辆之间的不同NN模型架构。 PDF p.1
为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:在这篇文章中,我们提出了一个新的知识共享的深度语义通信框架(SCKS),使一对多NN模型传输和实现有效的知识共享的车联网。 PDF p.1
方案为何可能有效:为了便于异构接收者有效理解语义信息,设计了一种基于生成对抗网络(generative adversarial networks,GAN)的语义解码算法。 PDF p.1
作者希望证明什么:仿真结果表明,与DeepJSCC和知识提炼(KD)等现有方法相比,SCKS方法在带宽需求和计算效率方面具有更高的性能。 PDF p.1
方法与端到端信息流
本文提出了一种新的用于知识共享的深层语义通信框架SCKS(Deep Semantic Communication Framework for Knowledge Sharing),该框架支持一对多的神经网络模型传输,实现了车联网内高效的知识共享。为了便于异构接收者对语义信息的有效理解,我们设计了一种基于生成对抗网络(Generative Adversarial Networks,GAN)的语义解码算法。据我们所知,还没有关于开发用于传递NN模型的深层语义通信系统的报道。 PDF p.1PDF p.2
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 ITS:本文提出了一种新的用于知识共享的深层语义通信框架SCKS(Deep Semantic Communication Framework for Knowledge Sharing),该框架支持一对多的神经网络模型传输,实现了车联网内高效的知识共享。为了便于异构接收者对语义信息的有效理解,我们设计了一种基于生成对抗网络(Generative Adversarial Networks,GAN)的语义解码算法。据我们所知,还没有关于开发用于传递NN模型的深层语义通信系统的报道。
架构/方法图|来源:《Deep Semantic Communication for Knowledge Sharing in Internet of Vehicles》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Deep Semantic Communication for Knowledge Sharing in Internet of Vehicles》,原 PDF p.9,Fig. 4 (a) ConvNet accuracy versus the number of synthetic images M; (b) Accuracy gap versus the number of synthetic images M 核对论文
核心纳入2025图像传输、压缩或生成
Diffusion-Based Semantic-Communication-Assisted Low-Altitude Intelligent Service for IoT
架构/方法图|来源:《Diffusion-Based Semantic-Communication-Assisted Low-Altitude Intelligent Service for IoT》,原 PDF p.4,Fig. 2 SYSTEM MODEL for our D-JSCC framework 核对论文关键实验结果图/表|来源:《Diffusion-Based Semantic-Communication-Assisted Low-Altitude Intelligent Service for IoT》,原 PDF p.8,Fig. 5 PSNR and MS-SSIM performance versus sampling steps 核对论文
核心纳入2025任务导向推理
Doppler-Adaptive Digital Semantic Communication for Low Earth Orbit Satellite Systems
现有进展:这些结果证实了所提出的框架在低轨卫星支持的物联网网络中促进高效和鲁棒的SC的潜力。 PDF p.1
仍然存在的问题:语义通信(SC)已被用来通过传输与任务相关的信息而不是原始数据来应对这些挑战;然而,当前的SC框架不足以应对低地球轨道环境,因为它们依赖于固定的信噪比(SNR)边界来选择调制方案。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:在本文中,我们提出了一个为基于LEO的物联网系统量身定制的自适应SC框架,该框架集成了深度强化学习(DRL)代理和矢量量化变分自动编码器(VQ-VAE)。 PDF p.1
方案为何可能有效:针对该问题,该文提出一种新的SC-SatCom系统自适应调制与多普勒补偿相结合的方案。 PDF p.2
作者希望证明什么:仿真实验结果表明,与传统的SC基线相比,该方法能够以更低的符号开销、更少的存储器占用和更少的推理时间获得相当的重建质量。 PDF p.1
方法与端到端信息流
本文提出了一种基于LEO的物联网自适应SC框架,该框架将深度强化学习(DRL)Agent与矢量量化变分自动编码器(VQ-VAE)相结合,提出了一种新的SC-SatCom系统自适应调制与多普勒补偿相结合的框架。提出了一种在SC-SatCom系统中集成自适应调制和多普勒补偿的新框架。 PDF p.1PDF p.2
输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Doppler-Adaptive Digital Semantic Communication for Low Earth Orbit Satellite Systems:本文提出了一种基于LEO的物联网自适应SC框架,该框架将深度强化学习(DRL)Agent与矢量量化变分自动编码器(VQ-VAE)相结合,提出了一种新的SC-SatCom系统自适应调制与多普勒补偿相结合的框架。提出了一种在SC-SatCom系统中集成自适应调制和多普勒补偿的新框架。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 2:数字语义变量接入调制、信道编码或 OFDM 链路”解释。
接收端接收端从解调/信道译码后的 bit 或 index;残余错误是否进入语义 decoder 需单独判断开始,再执行语义解码、任务推理或生成。
本文提出了一种基于LEO的物联网系统自适应SC框架,该框架将深度强化学习(DRL)代理与矢量量化变分自动编码器(VQ-VAE)相结合,提出了一种数字兼容SC方法,该方法使用矢量量化变分自动编码器(VQ-VAE)产生与标准调制方案兼容的离散符号。 表示判定:Doppler-Adaptive Digital Semantic Communication for Low Earth Orbit Satellite Systems 的主传输单位属于“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.8
架构/方法图|来源:《Doppler-Adaptive Digital Semantic Communication for Low Earth Orbit Satellite Systems》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Doppler-Adaptive Digital Semantic Communication for Low Earth Orbit Satellite Systems》,原 PDF p.9,Fig. 11 Performance comparison between SC-SatCom and conventional digital transmission methods on CIFAR10 核对论文
核心纳入2025图像传输、压缩或生成
Enhancing the Reliability of Multiuser Image Semantic Communication in Wireless Networks
现有进展:移动的互联网的快速增长已经导致了对各种数据类型的可靠传输的日益增长的需求,尤其是通过无线网络在多个用户之间共享的图像。 PDF p.1
仍然存在的问题:传统的通信系统在管理大规模图像传输方面面临挑战。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:为了满足这些需求,我们设计了一个基于Swin Transformer和卷积神经网络的语义提取和重构模块STC,该模块支持并行语义处理,并引入了增强的信道感知注意机制,然后与残差块集成,形成一个用于语义提取、压缩和重构的联合信源信道编码(JSCC)模型。 PDF p.1
方案为何可能有效:为了满足这些需求,我们设计了一个基于Swin Transformer和卷积神经网络的语义提取和重构模块STC,该模块支持并行语义处理,并引入了增强的信道感知注意机制,然后与残差块集成,形成一个用于语义提取、压缩和重构的联合信源信道编码(JSCC)模型。 PDF p.1
作者希望证明什么:仿真结果表明,与其他基于学习的方法相比,JSCC模型在保持计算效率的同时显著提高了图像质量。 PDF p.1
方法与端到端信息流
为了满足这些需求,我们设计了一个基于Swin Transformer和卷积神经网络的语义提取和重构模块STC,该模块实现了语义的并行处理,并引入了增强的信道感知注意机制,和重构,我们考虑了基站(BS)通过下行链路向用户发送图像语义信息的无线通信场景,旨在实现高可靠性的ISC系统。 PDF p.1PDF p.2
信道与工作点Rayleigh、fading channel、wireless channel、SNR of 0 dB、at 0 dB SNR、at 18 dB SNR
数据集为ImageNet、Kodak;实验小节中明确出现的比较对象包括DeepJSCC、JSCC、SSCC、LDPC、SAC、HM;指标包括PSNR、SSIM、MSE、accuracy;信道/链路条件包括Rayleigh、fading channel、wireless channel;正文可定位的代表性工作点有SNR of 0 dB、at 0 dB SNR、at 18 dB SNR。 PDF p.9
仿真结果表明,与其他基于学习的方法相比,JSCC模型在保持计算效率的同时,显著提高了图像质量。其次,基于DNN的解决方案在低信噪比条件下的性能明显优于传统的SSCC解决方案,这一优势在瑞利衰落场景中尤为突出。 PDF p.1PDF p.10
架构/方法图|来源:《Enhancing the Reliability of Multiuser Image Semantic Communication in Wireless Networks》,原 PDF p.6,Fig. 4 Designed architecture of JSCC 核对论文关键实验结果图/表|来源:《Enhancing the Reliability of Multiuser Image Semantic Communication in Wireless Networks》,原 PDF p.13,Fig. 14 Performance comparison of different schemes 核对论文
核心纳入2025图像传输、压缩或生成
Explainable Artificial Intelligence Enhance Image Semantic Communication System in 6G-IoT
换算边界:连续 latent 未规定每个符号的 bit-depth,不能无条件换算为 bit rate。
信道怎样作用,以及 decoder 实际拿到什么
信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复
此外,我们使用的正交幅度调制(QAM)的阶数为64。结果表明,所有的方法表现出性能下降,在瑞利衰落信道相比,AWGN信道。 信道处理归类为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.8PDF p.9
语义 decoder 实际面对的是:AWGN/衰落作用后的带噪连续符号。 PDF p.8PDF p.9
是否真正处理离散变量出错:不适用 VQ index 跳变。论文处理的是连续噪声/衰落;这不能自动证明量化和调制后的数字链路鲁棒性。
实验设置与主要结论
数据集/场景CIFAR-10、Kodak
BaselineVVC、DeepJSCC、DeepSC、JSCC、LDPC、QAM、ResNet
评价指标PSNR、accuracy
信道与工作点AWGN、Rayleigh、fading channel、SNR of 20 dB、at 20dB SNR、at 5 dB SNR、SNR of 30.70 dB、compression ratio of 1/48、compression ratio of 1/2、compression ratio of 1/25
数据集为CIFAR-10、Kodak;实验小节中明确出现的比较对象包括VVC、DeepJSCC、DeepSC、JSCC、LDPC、QAM、ResNet;指标包括PSNR、accuracy;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR of 20 dB、at 20dB SNR、at 5 dB SNR、SNR of 30.70 dB、compression ratio of 1/48、compression ratio of 1/2、compression ratio of 1/25。 PDF p.9
实验结果表明,我们的方法在整个决策过程中增强了可解释性,在带宽压缩比为1/25的CIFAR-10数据集上实现了高达55%的显著精度提高,并且在增加压缩水平的情况下也获得了有竞争力的图像重建质量。AWGN信道下的精度与带宽压缩比,其中SNR为20 dB。压缩,尽管我们提出的XAI-SCS在保留语义信息方面显著优于DeepJSCC和DeepSC。 PDF p.1PDF p.9
架构/方法图|来源:《Explainable Artificial Intelligence Enhance Image Semantic Communication System in 6G-IoT》,原 PDF p.6,Fig. 3 Architecture of the proposed EST-CL 核对论文关键实验结果图/表|来源:《Explainable Artificial Intelligence Enhance Image Semantic Communication System in 6G-IoT》,原 PDF p.10,Fig. 9 Accuracy versus the bandwidth compression ratio under Rayleigh fading channels, where SNR is 20 dB 核对论文
核心纳入2025多模态检索与任务通信
Federated-Learning-Enabled Cross-Modal Semantic Communication for 6G
现有进展:鉴于6G超大规模接入和动态连接需求,用户和数据数量呈指数级增长,这使得通信难以实现可持续发展。 PDF p.1
仍然存在的问题:在本文设定中,现有方法不能同时满足“多模态检索与任务通信”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
本文提出什么:因此,在这项研究中,我们提出了一个新的跨模态语义通信的框架,以提高效率的多模态处理,特别是触觉模态。 PDF p.1
方案为何可能有效:该方法采用可伸缩编码方法保持了高峰信噪比(PSNR),并根据韦伯定律尽可能地压缩了触觉数据,满足了人类对触觉模态的感知。B)在传输方面,我们提出了一种联邦深度强化学习(FDRL)方法,以快速收敛的方式满足各种模态的要求。 PDF p.2
作者希望证明什么:第三,在信号处理中,通过DL和机器学习(ML)提供低秩信号重构和沉浸式体验质量(QoE)评估,以改善和量化用户的体验。 PDF p.1
方法与端到端信息流
因此,本研究提出了一种新的跨模态语义通信框架,以提高多模态处理的效率,特别是触觉模态,通过可伸缩编码方法保持高峰信噪比(PSNR),并根据韦伯定律尽可能地压缩触觉数据,以满足人类对触觉模态的感知。B)在传输方面,我们提出了一种联邦深度强化学习(FDRL)方法,以满足快速收敛的各种模态的要求。为了解决上述挑战,在本文中,我们提出了一种新的框架,将FL与跨模态语义通信相结合,以解决这些挑战,重点关注三个关键目标。 PDF p.1PDF p.2
输入输入是多模态检索与任务通信所需的图像、文本或其他模态的任务特征。
发送端发送端采用 Federated-Learning-Enabled Cross-Modal Semantic Communication for 6G:因此,本研究提出了一种新的跨模态语义通信框架,以提高多模态处理的效率,特别是触觉模态,通过可伸缩编码方法保持高峰信噪比(PSNR),并根据韦伯定律尽可能地压缩触觉数据,以满足人类对触觉模态的感知。B)在传输方面,我们提出了一种联邦深度强化学习(FDRL)方法,以满足快速收敛的各种模态的要求。为了解决上述挑战,在本文中,我们提出了一种新的框架,将FL与跨模态语义通信相结合,以解决这些挑战,重点关注三个关键目标。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为跨模态检索、匹配或联合推理结果。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Federated-Learning-Enabled Cross-Modal Semantic Communication for 6G 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.10
实验小节中明确出现的比较对象包括DQN、FedAvg;指标包括MSE、accuracy、mAP、latency、throughput、F1-score。 PDF p.10
第三,在信号处理方面,通过深度学习和机器学习的低秩信号重构和沉浸式体验质量(QoE)评估来改善和量化用户体验。为了验证我们提出的方案在多用户场景下的延迟优化能力,我们与三种典型的基线方法进行了对比实验:1)集中式方法; 2)随机资源分配策略;以及3)贪婪最大信道增益策略。 PDF p.1PDF p.11
架构/方法图|来源:《Federated-Learning-Enabled Cross-Modal Semantic Communication for 6G》,原 PDF p.10,Fig. 6 Modal-aware resource allocation on FDRL framework in cross-modal semantic communication 核对论文关键实验结果图/表|来源:《Federated-Learning-Enabled Cross-Modal Semantic Communication for 6G》,原 PDF p.11,Fig. 8 Learning accuracy versus the number of devices 核对论文
核心纳入2025任务导向推理
Importance-Aware Robust Semantic Transmission for LEO Satellite–Ground Communication
信道与工作点AWGN、Rayleigh、Nakagami、fading channel、wireless channel、SNR of 38.648 dB、SNR of 39.077 dB
实验小节中明确出现的比较对象包括JSCC;指标包括accuracy、mAP、IoU、latency;信道/链路条件包括AWGN、Rayleigh、Nakagami、fading channel、wireless channel;正文可定位的代表性工作点有SNR of 38.648 dB、SNR of 39.077 dB。 PDF p.10
IRST方案首先应用分割模型增强算法来提高语义分割的粒度和准确性,但在低信噪比条件下,叠加方案表现出明显的优势,将PSNR提高了约1.2 ~ 1.5 dB,证实了其在高噪声场景下的鲁棒性。 PDF p.1PDF p.12
架构/方法图|来源:《Importance-Aware Robust Semantic Transmission for LEO Satellite–Ground Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Importance-Aware Robust Semantic Transmission for LEO Satellite–Ground Communication》,原 PDF p.13,Fig. 7 The performance comparison of different schemes 核对论文
核心纳入2025图像传输、压缩或生成
In-Band Full-Duplex System for Semantic Communication
现有进展:由于带内全双工(IBFD)技术中严重的自干扰(SI),造成了极其恶劣的通信环境,解决这一挑战已成为关键的研究热点。 PDF p.1
仍然存在的问题:在本文设定中,现有方法不能同时满足“图像传输、压缩或生成”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:同时,语义通信技术在受限环境中表现出显着的优势,使有效的信息传输,减少数据量和优化的带宽利用率。 PDF p.1
方案为何可能有效:引入语义重要性映射模块,将语义符号映射到基带信号,同时考虑信道条件和语义符号的重要性。 PDF p.1
作者希望证明什么:实验结果表明,语义重要性的集成有效地减轻了干扰,提高了通信性能,特别是在低信号干扰噪声比(SINR)的条件下。 PDF p.1
方法与端到端信息流
同时,语义通信技术在受限环境下通过减少数据量和优化带宽利用率实现高效的信息传输而显示出显著的优势。引入语义重要性映射模块,将语义符号映射到基带信号,同时考虑信道条件和语义符号的重要性。在获得yADC之后,应用所提出的数字域SI消除技术,然后是解映射模块、DeepJSCC解码器及语义解码器。 PDF p.1PDF p.6
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 In-Band Full-Duplex System for Semantic Communication:同时,语义通信技术在受限环境下通过减少数据量和优化带宽利用率实现高效的信息传输而显示出显著的优势。引入语义重要性映射模块,将语义符号映射到基带信号,同时考虑信道条件和语义符号的重要性。在获得yADC之后,应用所提出的数字域SI消除技术,然后是解映射模块、DeepJSCC解码器及语义解码器。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:连续神经 JSCC latent / 实复信道符号
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“连续神经 JSCC latent / 实复信道符号”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:In-Band Full-Duplex System for Semantic Communication 的主传输单位属于“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.11
架构/方法图|来源:《In-Band Full-Duplex System for Semantic Communication》,原 PDF p.10,Fig. 6 Architecture diagram of the Digital Cancellation Module 核对论文关键实验结果图/表|来源:《In-Band Full-Duplex System for Semantic Communication》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025通用语义通信系统
IoT-Enabled Traffic Management System Using Vehicle Count Prediction in a Semantic Communication Framework
现有进展:近年来,城市化的快速发展、技术进步以及对移动性的需求不断增长,2025年6月20日;当前版本的日期为2025年8月25日。 PDF p.1
仍然存在的问题:ITS的实施被认为是应对交通量增加、污染和城市化带来的挑战的关键。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
本文提出什么:在我们的研究中,我们引入了一个新的框架,称为语义通信(SemCom),它集成了卷积神经网络(CNN)和长短时记忆(LSTM)网络。 PDF p.1
方案为何可能有效:为了提高用户体验质量,提出了一个综合考虑车辆用户安全性、物联网设备传输功率、预测精度和语义熵的优化问题。 PDF p.1
作者希望证明什么:仿真结果表明,该模型在平均绝对误差(MAE)和QoE度量方面优于现有方法。 PDF p.1
方法与端到端信息流
在我们的研究中,我们引入了一个新的框架称为语义通信(SemCom),它集成了卷积神经网络(CNN)和长短期记忆(LSTM)网络。为了提高体验质量(QoE),我们制定了一个优化问题,考虑了车辆用户安全性,物联网设备传输功率,预测精度和语义熵。我们在第三节中详细讨论了所提出的模型。 PDF p.1PDF p.2
架构/方法图|来源:《IoT-Enabled Traffic Management System Using Vehicle Count Prediction in a Semantic Communication Framework》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《IoT-Enabled Traffic Management System Using Vehicle Count Prediction in a Semantic Communication Framework》,原 PDF p.8,Fig. 1 Before presenting our PROBLEM FORMULATION (see Section IV-E), in the following sections, we first describe the constraints that affect the QoE.10 A 核对论文
核心纳入2025任务导向推理
Joint Source-Channel Noise Adding With Adaptive Denoising for Diffusion-Based Semantic Communications
现有进展:语义通信(SemCom)旨在传达消息的预期含义,而不仅仅是传输比特,从而提供更高的效率和鲁棒性,特别是在资源受限或有噪声的环境中。 PDF p.1
仍然存在的问题:然而,当前的方法主要将通信噪声作为要被减轻的外部干扰来对待,而没有充分利用扩散过程的独特结构。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:本文提出了一种基于扩散模型的SemCom联合信源-信道加噪自适应去噪算法(JSCNA-AD)。 PDF p.1
方案为何可能有效:在本节中,我们将详细介绍所建议的JSCNA-AD框架的体系结构设计。 PDF p.2
作者希望证明什么:实验结果表明,该方法在各种噪声条件下的性能均明显优于现有的SemCom方法,表明基于扩散的模型在下一代通信系统中具有潜在的应用价值。 PDF p.1
方法与端到端信息流
本文介绍了一个基于自适应去噪的信源-信道联合加噪算法(JSCNA-AD)。在本节中,我们将详细介绍所提出的JSCNA-AD框架的架构设计。自适应降噪:我们建议注意-该机制将接收到的图像划分成语义上有意义的区域,并且向每个区域动态地分配反向扩散步骤的数量基于其估计的语义重要性。 PDF p.1PDF p.2
换算边界:连续 latent 未规定每个符号的 bit-depth,不能无条件换算为 bit rate。
信道怎样作用,以及 decoder 实际拿到什么
信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复
论文没有进一步规定可复现的物理层收发流程;由系统模型与实验条件可将信道作用点归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 信道处理归类为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2PDF p.10
语义 decoder 实际面对的是:AWGN/衰落作用后的带噪连续符号。 PDF p.2PDF p.10
是否真正处理离散变量出错:不适用 VQ index 跳变。论文处理的是连续噪声/衰落;这不能自动证明量化和调制后的数字链路鲁棒性。
实验设置与主要结论
数据集/场景ImageNet、STL-10
BaselineJPEG、JPEG2000、LDPC
评价指标latency
信道与工作点AWGN、Rayleigh
数据集为ImageNet、STL-10;实验小节中明确出现的比较对象包括JPEG、JPEG2000、LDPC;指标包括latency;信道/链路条件包括AWGN、Rayleigh。 PDF p.10
大量的实验表明,我们的方法在各种噪声条件下的性能明显优于现有的SemCom方案,强调了基于扩散的模型在下一代通信系统中的潜力。该图清楚地表明,我们提出的JSCNAAD系统明显优于其他SemCom系统,如WITT,以及基于深度学习的通信系统,如DeepJSCC和传统的通信方法,包括具有LDPC编码的JPEG 2000。 PDF p.1PDF p.16
架构/方法图|来源:《Joint Source-Channel Noise Adding With Adaptive Denoising for Diffusion-Based Semantic Communications》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Joint Source-Channel Noise Adding With Adaptive Denoising for Diffusion-Based Semantic Communications》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025文本传输或语言任务
Knowledge Graph-Enhanced Triplet Semantic Communication System for Low-Altitude IoT Transmission
现有进展:语义通信(SemCom)是未来无线通信的一个重要方向,其目的是通过提取和传输语义信息来实现高效、低冗余的通信。 PDF p.1
仍然存在的问题:然而,现有的SemCom框架在语义压缩和泛化方面存在局限性。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
本文提出什么:针对上述问题,文章提出了一种基于知识图的SemCom系统。 PDF p.1
方案为何可能有效:所提出的系统由三个核心组件组成:a)发射机; B)接收机; c)共享KG,并被设计为在LA-IoT环境中的各种通信场景中通用。 PDF p.3
作者希望证明什么:实验结果表明,在高信噪比条件下,该系统的BLEU得分超过0.9,METEOR得分超过0.93,在语义保真度上优于基线方法,同时显著降低了冗余度。 PDF p.1
方法与端到端信息流
为了应对这些挑战,本文提出了一种知识图增强的SemCom系统。该系统由三个核心组件组成:a)发送器; B)接收端;和c)共享KG,并且被设计为在LA-IoT环境中的不同通信场景中通用。该系统由三个核心组件组成:a)发送器; B)接收端;和c)共享KG。以及c)共享KG,并且被设计为在LA-IoT环境内的各种通信场景中进行概括。 PDF p.1PDF p.3
输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 Knowledge Graph-Enhanced Triplet Semantic Communication System for Low-Altitude IoT Transmission:为了应对这些挑战,本文提出了一种知识图增强的SemCom系统。该系统由三个核心组件组成:a)发送器; B)接收端;和c)共享KG,并且被设计为在LA-IoT环境中的不同通信场景中通用。该系统由三个核心组件组成:a)发送器; B)接收端;和c)共享KG。以及c)共享KG,并且被设计为在LA-IoT环境内的各种通信场景中进行概括。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:连续神经 JSCC latent / 实复信道符号
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“连续神经 JSCC latent / 实复信道符号”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Knowledge Graph-Enhanced Triplet Semantic Communication System for Low-Altitude IoT Transmission 的主传输单位属于“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.8
架构/方法图|来源:《Knowledge Graph-Enhanced Triplet Semantic Communication System for Low-Altitude IoT Transmission》,原 PDF p.11,Fig. 7 METEOR scores under different SNRs for various schemes over (a) AWGN and (b) Rayleigh channels for Huffman+RS(5,7), Huffman+LDPC (r = 2/3), 6-bit+RS, 6-bit+LDPC, DeepSC, and proposed KG-enhanced system (coverage 0.3) 核对论文关键实验结果图/表|来源:《Knowledge Graph-Enhanced Triplet Semantic Communication System for Low-Altitude IoT Transmission》,原 PDF p.11,Fig. 9 BLEU score comparison of self-attention and structure-aware attention mechanisms under AWGN and rayleigh channels 核对论文
核心纳入2025语音/音频传输或识别
Low-Bitrate High-Quality Digital Semantic Communication Based on RVQGAN
架构/方法图|来源:《Low-Bitrate High-Quality Digital Semantic Communication Based on RVQGAN》,原 PDF p.6,Fig. 4 Architecture of the CNS module 核对论文关键实验结果图/表|来源:《Low-Bitrate High-Quality Digital Semantic Communication Based on RVQGAN》,原 PDF p.8,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2025语义感知资源分配与网络优化
Mobility-Aware Semantic Offloading With NOMA in Edge-Enabled IoT Networks
现有进展:为了解决这个问题,我们提出了一个通用的语义感知卸载框架,该框架集成了语义通信,非正交多址接入(NOMA),MEC和边缘物联网网络中的用户移动性预测。 PDF p.1
仍然存在的问题:然而,语义提取引入了显著的计算开销,这可能会给资源受限的IoT设备带来负担。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:为了解决这个问题,我们提出了一个通用的语义感知卸载框架,该框架集成了语义通信,非正交多址接入(NOMA),MEC和边缘物联网网络中的用户移动性预测。 PDF p.1
方案为何可能有效:我们制定了一个联合优化问题,通过优化卸载决策,语义因素,发射功率和时隙调度,以最大限度地减少总用户侧的能源消耗。 PDF p.1
作者希望证明什么:值得注意的是,线性移动模型仅用于简化轨迹预测;我们框架的核心机制仅依赖于从用户位置导出的预测信道增益,并且独立于特定的移动路径。 PDF p.9
方法与端到端信息流
为了解决这个问题,我们提出了一个通用的语义感知的卸载框架,该框架集成了语义通信,非正交多址接入(NOMA),MEC和边缘使能物联网网络中的用户移动性预测。我们制定了一个联合优化问题,通过优化卸载决策,语义因素,发送功率和时隙调度来最小化总用户侧能耗。与上述研究不同,我们的工作开发了一个通用的统一优化框架,该框架独特地集成了SemCom、MEC和用户移动性感知。 PDF p.1PDF p.3
输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 Mobility-Aware Semantic Offloading With NOMA in Edge-Enabled IoT Networks:为了解决这个问题,我们提出了一个通用的语义感知的卸载框架,该框架集成了语义通信,非正交多址接入(NOMA),MEC和边缘使能物联网网络中的用户移动性预测。我们制定了一个联合优化问题,通过优化卸载决策,语义因素,发送功率和时隙调度来最小化总用户侧能耗。与上述研究不同,我们的工作开发了一个通用的统一优化框架,该框架独特地集成了SemCom、MEC和用户移动性感知。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Mobility-Aware Semantic Offloading With NOMA in Edge-Enabled IoT Networks 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.10
架构/方法图|来源:《Mobility-Aware Semantic Offloading With NOMA in Edge-Enabled IoT Networks》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Mobility-Aware Semantic Offloading With NOMA in Edge-Enabled IoT Networks》,原 PDF p.11,Fig. 3 Impact of the number of users K on energy consumption 核对论文
核心纳入2025通用语义通信系统
MRCoach: A Real-Time IoT-Enabled Mixed Reality System With Semantic-Aware Transmission for Smart Sports and Personalized Coaching
架构/方法图|来源:《MRCoach: A Real-Time IoT-Enabled Mixed Reality System With Semantic-Aware Transmission for Smart Sports and Personalized Coaching》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《MRCoach: A Real-Time IoT-Enabled Mixed Reality System With Semantic-Aware Transmission for Smart Sports and Personalized Coaching》,原 PDF p.5,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Multitask Semantic Communication: A Mutual Information-Aided Semi-Supervised Approach
架构/方法图|来源:《Multitask Semantic Communication: A Mutual Information-Aided Semi-Supervised Approach》,原 PDF p.10,Fig. 5 Classification accuracy and the PSNR of the proposed MIJSCC framework w.r.t 核对论文关键实验结果图/表|来源:《Multitask Semantic Communication: A Mutual Information-Aided Semi-Supervised Approach》,原 PDF p.10,Fig. 5 Classification accuracy and the PSNR of the proposed MIJSCC framework w.r.t 核对论文
核心纳入2025图像传输、压缩或生成
Multiuser Content-Style Adaptive Semantic Communication for Image Transmission
现有进展:通过在编码端嵌入语义提取模块,实现了语义信息的精细编码和存储,在保证有意义信息准确传递的同时,减少了数据量。 PDF p.1
仍然存在的问题:然而,现有的多用户SC图像传输方法缺乏自适应性,无法兼顾内容和风格特征,导致图像重建质量下降。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:多用户语义通信(SC)通过理解信息的内在含义并在设备之间共享共同的语义特征,能够降低带宽消耗并增强抗噪能力,为在各种物联网场景中的广泛应用提供了巨大潜力。 PDF p.1
方案为何可能有效:在第二节中介绍了所提出的多用户内容风格自适应SC(MU-CSASC)系统的框架。 PDF p.3
作者希望证明什么:实验结果表明,在信噪比较低的情况下,与传统方法相比,该方法在多用户语义通信中的峰值信噪比(PSNR)提高了10%以上。 PDF p.1
方法与端到端信息流
多用户语义通信(SC)通过理解信息的内在含义并跨设备共享公共语义特征来实现减少的带宽消耗和增强的噪声恢复力,提出的多用户内容风格自适应SC的框架第二章介绍了多用户内容风格自适应SC(MU-CSASC)系统的结构。 PDF p.1PDF p.3
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Multiuser Content-Style Adaptive Semantic Communication for Image Transmission:多用户语义通信(SC)通过理解信息的内在含义并跨设备共享公共语义特征来实现减少的带宽消耗和增强的噪声恢复力,提出的多用户内容风格自适应SC的框架第二章介绍了多用户内容风格自适应SC(MU-CSASC)系统的结构。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Multiuser Content-Style Adaptive Semantic Communication for Image Transmission 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.10
架构/方法图|来源:《Multiuser Content-Style Adaptive Semantic Communication for Image Transmission》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Multiuser Content-Style Adaptive Semantic Communication for Image Transmission》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025边缘学习与任务通信
Multiuser Semantic Communication With Federated Learning for Intelligent Search Service
现有进展:智能搜索使用户能够快速地从互联网上获取信息,但现有的方案无法实现准确的语义感知和可靠的信息传输,尤其是在受限的通信条件下,降低了搜索的准确性和个性化的用户体验。 PDF p.1
仍然存在的问题:然而,用户日益增长的智能需求和多样化的通信场景对智能搜索服务提出了巨大挑战,尤其是在搜索意图感知和可靠传输方面。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:梯度或中间特征既大又易受噪声影响,通信错误会直接改变训练收敛或推理决策;这使空口聚合与任务 loss 必须一起考虑。 PDF p.1
本文提出什么:为了克服上述缺陷,本文提出了一种多用户语义通信系统MU-SemCom-PS。 PDF p.1
方案为何可能有效:具体地,该系统在发送端引入了一种新的语义编码器,通过从多个角度分析搜索历史来深度提取用户特定的搜索语义;在接收端设计了一种语义解码器,通过利用用户之间的隐式相关性来恢复和增强搜索语义,从而基于恢复的搜索语义来执行PS任务。 PDF p.1
作者希望证明什么:实验结果显示,该算法在受限通信条件下显著提高了搜索精度和鲁棒性。 PDF p.1
方法与端到端信息流
为了解决这些问题,本文提出了一种多用户语义通信系统MU-SemCom-PS,该系统在发送端引入了一种新的语义编码器,通过对用户搜索历史的多角度分析,深度提取用户特定的搜索语义,并在接收机处设计语义解码器以通过利用用户之间的隐式相关性来恢复和增强搜索语义,第五部分对所提出的方案进行了验证和分析,第六部分是结论。 PDF p.1PDF p.2
换算边界:若论文未给码本大小 K、token 数、熵码和 FEC/包头,则总 bit 数仍不可唯一确定。
信道怎样作用,以及 decoder 实际拿到什么
信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担
此外,在MU-SemCom-PS系统中,在两种信道模型下,MU-SemCom-PS系统的三个排序指标均随用户数的增加而呈稳定上升趋势,而在Rayleigh衰落信道下的性能明显低于AWGN信道下的性能,这是由于Rayleigh衰落信道的复杂性,使得难以在接收机处恢复语义特征并降低任务性能。 信道处理归类为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.12
架构/方法图|来源:《Multiuser Semantic Communication With Federated Learning for Intelligent Search Service》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Multiuser Semantic Communication With Federated Learning for Intelligent Search Service》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025点云/三维场景传输
NORRIS: Noise-Resilient and Resource-Efficient Semantic Encoded Point Cloud Data Transmission for Internet of Things Communications
现有进展:近年来,随着自动驾驶汽车(AV)、增强现实/虚拟现实(AR/VR)等物联网应用的出现,3D数据受到了极大的关注。 PDF p.1
仍然存在的问题:然而,通过物联网设备传输大量信息是另一个挑战,这一挑战仍然存在。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
本文提出什么:因此,本文介绍了NORRIS;一种基于语义的点云数据传输技术,可以减轻传输的数据,同时增强对信道噪声的恢复能力。 PDF p.1
方案为何可能有效:我们进行了广泛的实验-使用训练/验证分割和资源受限设备上的评估-以优化我们的神经网络大小。 PDF p.6
作者希望证明什么:它还将传输的数据量减少了10倍,同时将含义提取速度加快了5倍。 PDF p.1
方法与端到端信息流
因此,本文介绍了NORRIS;一种基于语义的点云数据传输技术,它可以减轻传输数据的影响,同时增强对信道噪声的抵抗能力。我们进行了大量的实验-使用训练/验证分割和对资源受限设备的评估-来优化我们的神经网络大小。为了解决这些限制,本文介绍了NORRIS:这是一个具有抗噪声能力和资源效率的框架,用于物联网基础设施中的语义编码和点云数据传输。 PDF p.1PDF p.2PDF p.6
架构/方法图|来源:《NORRIS: Noise-Resilient and Resource-Efficient Semantic Encoded Point Cloud Data Transmission for Internet of Things Communications》,原 PDF p.8,Fig. 3 Illustration of NORRIS framework from input to output 核对论文关键实验结果图/表|来源:《NORRIS: Noise-Resilient and Resource-Efficient Semantic Encoded Point Cloud Data Transmission for Internet of Things Communications》,原 PDF p.7,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025文本传输或语言任务
On Harnessing Semantic Communication With Natural Language Processing
现有进展:通过实验努力,我们探索了语义通信(SemCom)和自然语言处理(NLP)的交叉点,以解决SemCom模型中的差距,重点是减少歧义和增强6G通信。 PDF p.1
仍然存在的问题:克服语义表示中的障碍并解决当前深度神经网络(DNN)中无法区分数据传输与其内在含义的缺陷是关键目标。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
本文提出什么:我们的方法包括两个阶段:1)阶段1:设计一个基于NLP的公平分类系统,利用无监督风格转换和零次学习等技术,将人类直觉与语义规范相结合。 PDF p.1
方案为何可能有效:总之,这些阶段增强了我们对SemCom的理解和设计,在第二节中进一步详细介绍。 PDF p.2
作者希望证明什么:扩展训练和网络系统调整对于在SemCom中采用信道感知NLP功能至关重要,这提高了模型的性能。 PDF p.9
方法与端到端信息流
我们的方法包括两个阶段:1)第一阶段:设计基于NLP的公平分类系统,利用无监督风格转换和零触发学习等技术,将人类直觉与语义规范相结合。这些阶段共同增强了我们对SemCom的理解和设计,详见第二节。我们使用NLP开发情感分析,以从数据集中识别和提取主观信息,如意见,情绪和态度。 PDF p.1PDF p.2
输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 On Harnessing Semantic Communication With Natural Language Processing:我们的方法包括两个阶段:1)第一阶段:设计基于NLP的公平分类系统,利用无监督风格转换和零触发学习等技术,将人类直觉与语义规范相结合。这些阶段共同增强了我们对SemCom的理解和设计,详见第二节。我们使用NLP开发情感分析,以从数据集中识别和提取主观信息,如意见,情绪和态度。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:On Harnessing Semantic Communication With Natural Language Processing 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.6
架构/方法图|来源:《On Harnessing Semantic Communication With Natural Language Processing》,原 PDF p.4,Fig. 3 High-level view which demonstrates the details of Phase 1, where we demonstrate the system architecture and interaction between components 核对论文关键实验结果图/表|来源:《On Harnessing Semantic Communication With Natural Language Processing》,原 PDF p.6,Fig. 5 Phase 1: confidence intervals custom dualmodel 核对论文
相关但非核心2025多模态检索与任务通信
Online Energy Efficient Multimodal Probabilistic Semantic Communication
架构/方法图|来源:《Online Energy Efficient Multimodal Probabilistic Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Online Energy Efficient Multimodal Probabilistic Semantic Communication》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2025图像传输、压缩或生成
Performance Optimization for Multicell Multihop Semantic 6G Cloudified Networks Considering Compression, Transmission, and Computation
架构/方法图|来源:《Performance Optimization for Multicell Multihop Semantic 6G Cloudified Networks Considering Compression, Transmission, and Computation》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Performance Optimization for Multicell Multihop Semantic 6G Cloudified Networks Considering Compression, Transmission, and Computation》,原 PDF p.15,Fig. 12 Minimum tolerant PSNR satisfaction ratio versus PSNR scale factor based on different datasets 核对论文
核心纳入2025点云/三维场景传输
RIS-Assisted Semantic Communication for Real-Time 3-D Reconstruction via Gaussian Splatting
架构/方法图|来源:《RIS-Assisted Semantic Communication for Real-Time 3-D Reconstruction via Gaussian Splatting》,原 PDF p.6,Fig. 3 NETWORK ARCHITECTURE of the SGM 核对论文关键实验结果图/表|来源:《RIS-Assisted Semantic Communication for Real-Time 3-D Reconstruction via Gaussian Splatting》,原 PDF p.10,Fig. 6 Visualization RESULTS of novel view synthesis from 3-D reconstruction using different methods under the target view 核对论文
核心纳入2025视频传输、生成或控制
SCSC: The Super Compressed Semantic Communication Transmission Method for Images and Video Frames
现有进展:为了解决低带宽场景下(如物联网水下或无线网络)高质量数据重构的挑战,本文提出了一种新的超高效图像和视频帧压缩框架。 PDF p.1
仍然存在的问题:然而,它的性能受限于高分辨率内容的次优语义提取,以及缺乏为实时应用定制的统一多模态框架。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
本文提出什么:为解决这一问题,我们提出了一种专门针对图像和视频帧设计的超压缩SemCom(SCSC)框架,以克服传统方法的局限。 PDF p.1
方案为何可能有效:该框架采用优化的特征提取方法从图像或视频帧中捕获必要的语义信息,将其转换为紧凑的灰度表示,以最大限度地减少带宽受限设备的数据量。 PDF p.1
作者希望证明什么:对于4K图像和视频帧,该框架在1-15 dB的SNR条件下实现了98.35%的MS-SSIM留存率,展示了实时物联网通信的稳健性能。 PDF p.1
方法与端到端信息流
为了解决这一问题,我们提出了一种针对图像和视频帧的超压缩SemCom(SCSC)框架,该框架采用了一种优化的特征提取方法来从图像或视频帧中捕获必要的语义信息,将其转换为紧凑的灰度表示,以最大限度地减少带宽受限设备的数据量。为确保带宽的适用性-受限的物联网环境中,我们SCSC框架中的发射机在不完全了解CSI的情况下运行。 PDF p.1PDF p.6
架构/方法图|来源:《SCSC: The Super Compressed Semantic Communication Transmission Method for Images and Video Frames》,原 PDF p.4,Fig. 1 Proposed super compression SemCom transmission model for images and video frames 核对论文关键实验结果图/表|来源:《SCSC: The Super Compressed Semantic Communication Transmission Method for Images and Video Frames》,原 PDF p.9,Fig. 7 MS-SSIM performance comparison of different models under AWGN channel at various SNR levels 核对论文
核心纳入2025图像传输、压缩或生成
sDMCM—A Semantic Digital Modulation Constellation Mapping Scheme for Semantic Communication
现有进展:近年来,随着数字水印技术的发展,基于深度神经网络和语义通信的联合信源信道编码(Joint Source-Channel Coding,JSCC)技术得到了快速发展。 PDF p.1
仍然存在的问题:然而,传统的数字调制星座图映射设计不适合语义通信,因为它们主要关注于最小化所传输数据的误码率,而不是语义信息的数值变化。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:然而,传统的数字调制星座图映射设计不适合语义通信,因为它们主要关注于最小化所传输数据的误码率,而不是语义信息的数值变化。 PDF p.1
方案为何可能有效:此外,所提出的方案允许灵活地调整数字调制阶数,使得当量化比特深度和调制阶数不匹配时能够进行语义数字通信,从而避免了当存在不匹配时重新训练端到端JSCC模型的需要。 PDF p.3
作者希望证明什么:后者证实了sDMCM在实际物联网语义数字通信系统中的优势,sDMCM的MS-SSIM性能在除极低SNR条件外的所有条件下均优于比较方法。 PDF p.16
方法与端到端信息流
然而,传统的数字调制星座映射设计主要关注的是最小化传输数据的误码率,而不是语义信息的数值变化,因此不适合语义通信,另外,所提出的方案允许灵活地调整数字调制阶数,当量化比特深度和调制阶数不匹配时,使能语义数字通信,从而避免了当存在失配时重新训练端到端JSCC模型的需要。另外,所提出的方案允许灵活地调整数字调制阶数,从而在量化比特深度和调制阶数不匹配时实现语义数字通信,从而避免了在存在失配时重新训练端到端JSCC模型的需要。 PDF p.1PDF p.3
架构/方法图|来源:《sDMCM—A Semantic Digital Modulation Constellation Mapping Scheme for Semantic Communication》,原 PDF p.4,Fig. 1 Schematic of semantic analog communication framework 核对论文关键实验结果图/表|来源:《sDMCM—A Semantic Digital Modulation Constellation Mapping Scheme for Semantic Communication》,原 PDF p.10,Fig. 11 Example figure of sDMCM PAM with n = 4 and m = 3 核对论文
核心纳入2025图像传输、压缩或生成
Semantic Feature Division Multiple Access for Digital Semantic Broadcast Channels
现有进展:在本文中,我们提出了一种在多用户广播(广播通信(BC))网络中用于推理和图像重建任务的数字语义特征划分多址(SFDMA)范例。 PDF p.1
仍然存在的问题:具体地,针对推理任务,设计了一种基于鲁棒信息瓶颈(RIB)的SFDMA数字BC网络,该网络能够在推理性能、数据压缩和多用户干扰之间实现折衷。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:在本文中,我们提出了一种在多用户广播(广播通信(BC))网络中用于推理和图像重建任务的数字语义特征划分多址(SFDMA)范例。 PDF p.1
方案为何可能有效:本文探索了一种新的资源域--语义特征域,提出了一种语义特征划分多址接入(SFDMA)方案,将多个用户的信息编码在可区分的特征子空间中。 PDF p.2
作者希望证明什么:仿真研究验证了该方案的有效性和优越性。 PDF p.1
方法与端到端信息流
本文提出了一种数字语义特征划分多址(SFDMA)的多用户广播模式本文探索了一种新的资源域--语义特征域,提出了一种基于语义特征划分的多址接入(SFDMA)方案,其中多个用户的信息被编码在可区分的特征子空间中,本文探索了一种新的资源域--语义特征域,并提出了一种语义特征划分多址(SFDMA)方案,其中多个用户的信息被编码在可区分特征子空间中。 PDF p.1PDF p.2
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Semantic Feature Division Multiple Access for Digital Semantic Broadcast Channels:本文提出了一种数字语义特征划分多址(SFDMA)的多用户广播模式本文探索了一种新的资源域--语义特征域,提出了一种基于语义特征划分的多址接入(SFDMA)方案,其中多个用户的信息被编码在可区分的特征子空间中,本文探索了一种新的资源域--语义特征域,并提出了一种语义特征划分多址(SFDMA)方案,其中多个用户的信息被编码在可区分特征子空间中。
架构/方法图|来源:《Semantic Feature Division Multiple Access for Digital Semantic Broadcast Channels》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Semantic Feature Division Multiple Access for Digital Semantic Broadcast Channels》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Semantic Image Communication Based on Swin Transformer for Satellite IoE
语义通信的核心原则在于放弃原始bitstream的完全传输,而有利于提取和传递与任务相关的语义特征。 表示判定:Semantic Image Communication Based on Swin Transformer for Satellite IoE 的主传输单位属于“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
架构/方法图|来源:《Semantic Image Communication Based on Swin Transformer for Satellite IoE》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Semantic Image Communication Based on Swin Transformer for Satellite IoE》,原 PDF p.8,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Semantic Importance-Aware Image Transmission in V2X Networks
架构/方法图|来源:《Semantic Importance-Aware Image Transmission in V2X Networks》,原 PDF p.13,Fig. 8 Number of transmission failures over different transmit power and transmission order schemes 核对论文关键实验结果图/表|来源:《Semantic Importance-Aware Image Transmission in V2X Networks》,原 PDF p.13,Fig. 8 Number of transmission failures over different transmit power and transmission order schemes 核对论文
核心纳入2025语义信息度量与理论
Semantic-Importance-Aware Communication Over MIMO Fading Channels
论文主旨:然而,大多数现有的框架集中在单输入单输出(SISO)信道,这限制了它们在多天线系统中的使用。 为了解决这个差距,我们提出了语义重要性感知通信(SIAC-MIMO),多输入多输出(MIMO)衰落信道设计的系统。 核心证据目标:在2 W2到64 W 64 MIMO设置上的实验证明了SIAC-MIMO的优越性,与传统的源-信道分离方案相比,在单用户场景中在低SNR下的平均结构相似性指数度量(MS-SSIM)方面实现了5-18%的改进,在多用户MIMO设置中实现了16-23%的改进,突出了该系统在高效和稳健通信方面的潜力。
Motivation|Introduction 怎样导出本文方案
现有进展:语义通信是下一代无线通信系统的一个很有前途的范例,它优化了语义信息的表示及其对信道影响的弹性,在低信噪比(SNR)环境中优于传统系统。 PDF p.1
仍然存在的问题:然而,大多数现有的框架集中在单输入单输出(SISO)信道,这限制了它们在多天线系统中的使用。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
本文提出什么:为了解决这个差距,我们提出了语义重要性感知通信(SIAC-MIMO),多输入多输出(MIMO)衰落信道设计的系统。 PDF p.1
方案为何可能有效:在本文中,我们只关注MIMO系统中的复用能力,因此我们只考虑前r个发射天线。 PDF p.4
作者希望证明什么:在2 W2到64 W 64 MIMO设置上的实验证明了SIAC-MIMO的优越性,与传统的源-信道分离方案相比,在单用户场景中在低SNR下的平均结构相似性指数度量(MS-SSIM)方面实现了5-18%的改进,在多用户MIMO设置中实现了16-23%的改进,突出了该系统在高效和稳健通信方面的潜力。 PDF p.1
方法与端到端信息流
为了解决这一问题,我们提出了一种针对多输入多输出(MIMO)衰落信道的语义重要性感知通信(SIAC-MIMO)系统。在本文中,我们只关注MIMO系统中的复用能力,因此只考虑前r个发射天线。 PDF p.1PDF p.4
架构/方法图|来源:《Semantic-Importance-Aware Communication Over MIMO Fading Channels》,原 PDF p.4,Fig. 1 Framework of the SIAC-MIMO over fading MIMO channel 核对论文关键实验结果图/表|来源:《Semantic-Importance-Aware Communication Over MIMO Fading Channels》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Semantic-Importance-Aware Reordering-Enhanced Semantic Communication System With OFDM Transmission
架构/方法图|来源:《Semantic-Importance-Aware Reordering-Enhanced Semantic Communication System With OFDM Transmission》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Semantic-Importance-Aware Reordering-Enhanced Semantic Communication System With OFDM Transmission》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025语义感知资源分配与网络优化
Semantic-Oriented Modulation for Wireless Communication
架构/方法图|来源:《Semantic-Oriented Modulation for Wireless Communication》,原 PDF p.13,Fig. 14 Complex number plots si obtained from an image transmission 核对论文关键实验结果图/表|来源:《Semantic-Oriented Modulation for Wireless Communication》,原 PDF p.7,Fig. 6 Performance comparison of CosSim for different L and M 核对论文
核心纳入2025边缘学习与任务通信
SVQ-VAE: Federated-Learning-Based Semantic-Aware Communication for Vehicular Networks
语义 decoder 实际面对的是:默认无误恢复的 bitstream、token 或 index。 PDF p.11
是否真正处理离散变量出错:否。论文默认数字码流可靠到达,未评估 bit flip、熵码失同步或 packet loss 对语义变量的影响。
实验设置与主要结论
数据集/场景CIFAR-10、ImageNet、BDD100K
BaselineJPEG、LDPC、ViT、FedAvg
评价指标accuracy、classification accuracy
信道与工作点Rayleigh、MIMO、SNR of 5 dB
数据集为CIFAR-10、ImageNet、BDD100K;实验小节中明确出现的比较对象包括JPEG、LDPC、ViT、FedAvg;指标包括accuracy、classification accuracy;信道/链路条件包括Rayleigh、MIMO;正文可定位的代表性工作点有SNR of 5 dB。 PDF p.10
在CIFAR-10和BDD 100 K数据集上的仿真实验表明,与现有的联邦语义通信体系结构相比,本文提出的基于联邦学习的语义感知通信具有上级任务完成率、语义传输效率和传输延迟等方面的优势,并且在不同码本大小下,HPFL策略的分类准确率始终高于传统的Fedavg策略。 PDF p.1PDF p.11
架构/方法图|来源:《SVQ-VAE: Federated-Learning-Based Semantic-Aware Communication for Vehicular Networks》,原 PDF p.11,Fig. 4 Classification accuracy versus SNR of different federated semantic communication architectures on (a) CIFAR-10 and (b) BDD100K 核对论文关键实验结果图/表|来源:《SVQ-VAE: Federated-Learning-Based Semantic-Aware Communication for Vehicular Networks》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Taming Learnable Codebook Design and Modulation for Digital Semantic Image Communication
架构/方法图|来源:《Taming Learnable Codebook Design and Modulation for Digital Semantic Image Communication》,原 PDF p.12,Fig. 13 Ablation study of the proposed NRB and CR algorithms across (a) PSNR, (b) SSIM, and (c) LPIPS metrics 核对论文关键实验结果图/表|来源:《Taming Learnable Codebook Design and Modulation for Digital Semantic Image Communication》,原 PDF p.11,Fig. 9 Performance comparison with different numbers of quantization heads, where more heads consistently yield better RESULTS 核对论文
核心纳入2025任务导向推理
Task-Oriented Semantic Communication With Adaptive Semantic Reconstruction Network
仍然存在的问题:然而,在复杂的通信环境中,语义通信仍然面临着语义信息丢失、传输效率低、适应性差等挑战。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:为了提高复杂通信环境下的传输效率和适应性,提出了一种新的基于自适应语义重构的语义通信方案(SCASR)。 PDF p.1
方案为何可能有效:与传统方法仅依赖于修改编码器结构来调整压缩率不同,该方法根据语义重要性和不同的SCR要求动态生成掩码向量。 PDF p.2
作者希望证明什么:结果表明,SCASR优于现有的语义通信和传统的计划,提供更高的平均交集超过联合(mIoU),并增强语义传输效益(STB)。 PDF p.1
方法与端到端信息流
为了提高复杂通信环境下的传输效率和适应性,提出了一种新的基于自适应语义重构的语义通信(SCASR)方案,该方法根据语义重要性和不同的SCR要求动态生成掩码向量,该方法依靠修改编码器结构来调整压缩率,根据语义重要性和不同的SCR要求动态生成掩码向量。 PDF p.1PDF p.2
输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Task-Oriented Semantic Communication With Adaptive Semantic Reconstruction Network:为了提高复杂通信环境下的传输效率和适应性,提出了一种新的基于自适应语义重构的语义通信(SCASR)方案,该方法根据语义重要性和不同的SCR要求动态生成掩码向量,该方法依靠修改编码器结构来调整压缩率,根据语义重要性和不同的SCR要求动态生成掩码向量。
架构/方法图|来源:《Task-Oriented Semantic Communication With Adaptive Semantic Reconstruction Network》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Task-Oriented Semantic Communication With Adaptive Semantic Reconstruction Network》,原 PDF p.9,Fig. 4 mIoU versus SNR under SCASR and other schemes 核对论文
核心纳入2025通用语义通信系统
Toward Efficient and Privacy-Aware eHealth Systems: An Integrated Sensing, Computing, and Semantic Communication Approach
现有进展:对呼吸和心跳等生命体征的实时非接触式监测以及可靠的通信对于现代医疗系统至关重要,尤其是在远程和隐私敏感的环境中。 PDF p.1
仍然存在的问题:为了克服这些挑战,我们提出了一种新的集成传感,计算和语义通信(ISCSC)框架。 PDF p.1
为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
本文提出什么:为了克服这些挑战,我们提出了一种新的集成传感,计算和语义通信(ISCSC)框架。 PDF p.1
方案为何可能有效:为了弥合有关ISAC和语义通信在医疗系统中的集成的研究差距,我们提出了一个新的框架,有效地集成这些技术,使先进的医疗应用。 PDF p.2
作者希望证明什么:仿真结果表明,与传统的联合感知和通信方法相比,ISCSC框架实现了更优的感知精度、提高的语义传输效率和增强的隐私保护。 PDF p.1
方法与端到端信息流
为了克服这些挑战,本文提出了一个新的集成感知、计算和语义通信(ISCSC)框架;为了弥补医疗系统中ISAC和语义通信集成的研究空白,本文提出了一个新的框架,有效地集成了这些技术,以实现先进的医疗应用;为了弥补医疗系统中ISAC和语义通信集成的研究空白,本文提出了一个新的框架。我们提出了一种新的框架,有效地集成这些技术,使先进的医疗保健应用。 PDF p.1PDF p.2
输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 Toward Efficient and Privacy-Aware eHealth Systems: An Integrated Sensing, Computing, and Semantic Communication Approach:为了克服这些挑战,本文提出了一个新的集成感知、计算和语义通信(ISCSC)框架;为了弥补医疗系统中ISAC和语义通信集成的研究空白,本文提出了一个新的框架,有效地集成了这些技术,以实现先进的医疗应用;为了弥补医疗系统中ISAC和语义通信集成的研究空白,本文提出了一个新的框架。我们提出了一种新的框架,有效地集成这些技术,使先进的医疗保健应用。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Toward Efficient and Privacy-Aware eHealth Systems: An Integrated Sensing, Computing, and Semantic Communication Approach 的主传输单位属于“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.11
架构/方法图|来源:《Toward Efficient and Privacy-Aware eHealth Systems: An Integrated Sensing, Computing, and Semantic Communication Approach》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Toward Efficient and Privacy-Aware eHealth Systems: An Integrated Sensing, Computing, and Semantic Communication Approach》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成
Vision Transformer-Based Semantic Communications With Importance-Aware Quantization
现有进展:语义通信通过无线信道传输与任务相关的语义特征,提供了比传统通信显著的性能增益。 PDF p.1
仍然存在的问题:然而,大多数现有的研究依赖于神经类型编码器和解码器的端到端(E2E)训练,以确保这些语义特征的有效传输。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:为了在不依赖于E2E训练的情况下实现语义通信,提出了一种基于视觉Transformer(ViT)的重要性量化(IAQ)的无线图像语义通信系统。 PDF p.1
方案为何可能有效:然后,设计了一种最优增量分配方法和一种低复杂度的注水方法来求解该问题。 PDF p.1
作者希望证明什么:在单视点图像分类、多视点图像分类和单目标检测任务上的仿真结果表明,在无差错和真实通信场景下,该框架的性能均优于传统的图像压缩方法。 PDF p.1
方法与端到端信息流
为了实现不依赖于E2E训练的语义通信,提出了一种基于视觉变换器(ViT)的重要性感知量化(IAQ)的无线图像语义通信系统,并设计了一种最优增量分配方法和一种低复杂度的注水方法来解决该问题,为实现免训练的实用数字语义通信迈出了一步,提出了一种基于ViT的语义通信系统,该系统采用重要度量化(IAQ)技术实现图像的无线传输。 PDF p.1PDF p.2
作者分析了单 bit error 对不同 bit 位和 patch 的失真贡献,并在加权量化误差问题中同时考虑量化误差与通信错误;接收端从受损 bit sequence 反量化图像,再执行单视图或多视图分类。 信道处理归类为“类别 4:量化误差与通信 bit error 共同进入 bit 分配优化”。 PDF p.2PDF p.8
语义 decoder 实际面对的是:可能含 bit error 的量化图像/patch,反量化后输入接收端 ViT。 PDF p.2PDF p.8
是否真正处理离散变量出错:是。bit error 的位置及其对 patch 失真的影响被显式写入重要性感知 bit 分配,数字错误直接影响优化目标与最终分类性能。
架构/方法图|来源:《Vision Transformer-Based Semantic Communications With Importance-Aware Quantization》,原 PDF p.10,Fig. 6 Comparison of the classification accuracy and communication overhead of various quantization approaches under different channel error levels for a multi-view image classification task on the MIRO dataset 核对论文关键实验结果图/表|来源:《Vision Transformer-Based Semantic Communications With Importance-Aware Quantization》,原 PDF p.10,Fig. 6 Comparison of the classification accuracy and communication overhead of various quantization approaches under different channel error levels for a multi-view image classification task on the MIRO dataset 核对论文
核心纳入2026语音/音频传输或识别
A Coarse-to-Fine Multi-Scale Fusion Receiver for Semantic Communication Against Semantic Jamming
架构/方法图|来源:《A Coarse-to-Fine Multi-Scale Fusion Receiver for Semantic Communication Against Semantic Jamming》,原 PDF p.3,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Coarse-to-Fine Multi-Scale Fusion Receiver for Semantic Communication Against Semantic Jamming》,原 PDF p.8,Fig. 5 To achieve stronger refinement RPC-Block×(2) for denser constellations, higher-order modulations employ a larger number of RPC-Blocks 核对论文
核心纳入2026语义信息度量与理论
A Robust Digital Semantic Communication Framework via Channel-wise Partitioning and Non-uniform Quantization
现有进展:语义通信通过专注于任务相关信息来提高传输效率,但在基于分组的协议下仍然很脆弱,其中单个分组丢失会丢弃整个高维特征向量。 PDF p.1
仍然存在的问题:然而,为了任何其他目的使用该材料的许可必须通过向pubs-permissions@ieee.org.mit任务相关的语义表示发送请求从IEEE获得,从而将通信目标从符号准确性转移到语义级信息传递。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
本文提出什么:在此基础上,我们提出了一个非均匀量化的框架与信道的重要性重组灵活的速率适应不同的带宽约束下。 PDF p.1
方案为何可能有效:通过联合集成信道的分区和自适应量化,我们开发了一个实用的数字语义通信框架,使语义特征结构与分组传输。 PDF p.1
作者希望证明什么:在分组丢失和噪声信道条件下的大量实验证实了优雅的降级行为,并且所提出的非均匀量化方案在具有更灵活的速率自适应的拟合均匀量化趋势上实现了约0.5-2 dB的PSNR改善。 PDF p.1
方法与端到端信息流
在此基础上,我们提出了一个非均匀量化的信道重要性重构框架,用于在不同带宽约束下灵活的速率自适应。通过联合集成信道划分和自适应量化,我们开发了一个实用的数字语义通信框架,将语义特征结构与分组传输相结合。通过将表示学习与重要性自适应解耦,所提出的策略能够实现非均匀量化,同时保持传输鲁棒性和重构质量。 PDF p.1PDF p.2
输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 A Robust Digital Semantic Communication Framework via Channel-wise Partitioning and Non-uniform Quantization:在此基础上,我们提出了一个非均匀量化的信道重要性重构框架,用于在不同带宽约束下灵活的速率自适应。通过联合集成信道划分和自适应量化,我们开发了一个实用的数字语义通信框架,将语义特征结构与分组传输相结合。通过将表示学习与重要性自适应解耦,所提出的策略能够实现非均匀量化,同时保持传输鲁棒性和重构质量。
在此基础上,我们提出了一个非均匀量化框架,在不同的带宽约束下进行灵活的速率自适应。一个关键的经验观察是,端到端的优化自然地驱动学习的特征分布,以抵消强加的信道加权,保持跨信道的有效量化范围平衡,并防止通过直接端到端优化实现非均匀量化。 表示判定:A Robust Digital Semantic Communication Framework via Channel-wise Partitioning and Non-uniform Quantization 的主传输单位属于“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.9
架构/方法图|来源:《A Robust Digital Semantic Communication Framework via Channel-wise Partitioning and Non-uniform Quantization》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Robust Digital Semantic Communication Framework via Channel-wise Partitioning and Non-uniform Quantization》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026语音/音频传输或识别
A Robust Quantized Speech Semantic Communication System Based on ASR Perception Loss and Deep Channel Estimation
现有进展:基于深度学习的语义通信代表了一种新的范式,通过专注于语义信息的精确交换和重构,具有显著的提高传输效率的潜力。 PDF p.1
仍然存在的问题:然而,现有的方法往往难以减轻复杂信道环境中的信息丢失。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
本文提出什么:为了解决语音传输中的语义失真和严重的信道损伤,我们提出了一个鲁棒的,基于量化的语义通信框架。 PDF p.1
方案为何可能有效:受这项工作的启发,在资源受限的情况下,高语音清晰度和语义保真度的实际应用中,需要在低信噪比(SNR)的信道,我们建立在他们的高效语义编解码器通过引入一种新的感知损失函数和设计一个信道编解码器,从而形成一个数字传输架构,支持端到端的学习。 PDF p.2
作者希望证明什么:值得注意的是,该方法在瑞利(Rayleigh)信道下以0-dB信噪比(SNR)实现了大约22%的性能改进,同时保持了优异的传输效率。 PDF p.1
方法与端到端信息流
为了解决语音传输中的语义失真和严重的信道损伤问题,本文提出了一种鲁棒的基于量化的语义通信框架,并在此基础上提出了一种基于量化的语义通信框架,在此基础上,我们提出了一种新的感知损失函数,并设计了一种信道编码器,摘要针对资源受限的低信噪比信道要求高语音清晰度和语义保真度的实际应用,提出了一种新的感知损失函数,并设计了一种信道编解码器,从而形成了一种支持端到端学习的数字传输体系结构。 PDF p.1PDF p.2
信道与工作点AWGN、Rayleigh、Rician、fading channel、SNR of 0 dB
数据集为LibriSpeech、TIMIT;实验小节中明确出现的比较对象包括DeepSC、DeepSC-S;指标包括WER、STOI、MOS、PER;信道/链路条件包括AWGN、Rayleigh、Rician、fading channel;正文可定位的代表性工作点有SNR of 0 dB。 PDF p.9
值得注意的是,该方法实现了约22%的性能改善瑞利信道在0 dB的信噪比(SNR),同时保持卓越的传输效率。结果明显表明,所提出的方法始终优于所有基准在这些不同的条件下。 PDF p.1PDF p.8
架构/方法图|来源:《A Robust Quantized Speech Semantic Communication System Based on ASR Perception Loss and Deep Channel Estimation》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《A Robust Quantized Speech Semantic Communication System Based on ASR Perception Loss and Deep Channel Estimation》,原 PDF p.9,Fig. 4 STOI score versus SNR under (a) AWGN channels, (b) Rician channels, and (c) Rayleigh channels for different approaches 核对论文
核心纳入2026通用语义通信系统
Adaptive Reliable Semantic Transmission Strategy for Mobile Multi-User Multi-Tasking
实验小节中明确出现的比较对象包括DeepSC、HM;指标包括MSE、accuracy、latency;信道/链路条件包括AWGN、Rician、fading channel;正文可定位的代表性工作点有SNR = 3 dB。 PDF p.11
理论分析和实验结果表明,本文提出的方法有效地实现了移动的多用户多任务场景下的自适应语义传输,显著提高了系统的资源利用率和通信可靠性;引入迁移学习的模型在不同信道数下均方误差较低,尤其是在高语义压缩率下,与无TL模型相比,TL模型能更有效地降低MSE,提高语义信息的传输质量。 PDF p.1PDF p.12
架构/方法图|来源:《Adaptive Reliable Semantic Transmission Strategy for Mobile Multi-User Multi-Tasking》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Adaptive Reliable Semantic Transmission Strategy for Mobile Multi-User Multi-Tasking》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成
Adaptive Symbol and Power Loading for OFDM-Based Underwater Wireless Optical Semantic Communications
现有进展:水下无线光通信(UWOC)是支撑水下物联网(IoUT)信息传输的关键技术。 PDF p.1
仍然存在的问题:然而,现有的水下无线光语义通信(UWOSC)系统忽略了实际光电器件所施加的带宽限制,这阻碍了高速语义信息传输。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:本文首次将正交频分复用(OFDM)调制技术引入到超宽带超宽带通信系统中,设计了一种基于OFDM的具有符号和功率负载(SPL)的超宽带超宽带通信系统。 PDF p.1
方案为何可能有效:此外,我们设计了一个自适应的符号和功率加载(SPL)计划,其中包括一个熵模型驱动的符号重排策略和功率分配网络,分配子载波和功率的语义重要性和信道状态信息(CSI)指导。 PDF p.2
作者希望证明什么:这些结果表明,所提出的系统具有在IoUT中实现高速语义通信的强大潜力。 PDF p.1
方法与端到端信息流
本文首次将正交频分复用(OFDM)调制技术引入UWOSC系统,设计了一种基于OFDM的符号和功率加载(SPL)的UWOSC系统,并设计了一种自适应的符号和功率加载(SPL)方案,该方案由熵模型驱动的符号重排策略和功率分配网络组成,本文首次将OFDM调制引入UWOSC系统,旨在缓解UWOSC系统固有的带宽限制。 PDF p.1PDF p.2
架构/方法图|来源:《Adaptive Symbol and Power Loading for OFDM-Based Underwater Wireless Optical Semantic Communications》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Adaptive Symbol and Power Loading for OFDM-Based Underwater Wireless Optical Semantic Communications》,原 PDF p.10,Fig. 6 PSNR performance comparison of different schemes under varying CRs 核对论文
核心纳入2026语义感知资源分配与网络优化
Airtalking: Aerial D2D for Multi-UAV Systems Based on Semantic Communication
仍然存在的问题:然而,由于空中环境中有限的直接通信和能源限制,多个UAV之间的有效合作仍然具有挑战性。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:为了克服这些局限性,本文提出了一种语义感知的蜂窝D2D通信架构,命名为Airtalking,它集成了语义编码和解码,使高效的无人机到无人机(U2U)的数据交换。 PDF p.1
方案为何可能有效:我们设计算法来平衡延迟和能量消耗,并在不同的飞行条件下模拟不同的调度策略。 PDF p.1
作者希望证明什么:结果表明,所提出的空中U2U框架能够提高通信的稳定性和效率,证明了在实际多无人机系统中部署语义通信的可行性。 PDF p.1
方法与端到端信息流
为了克服这些局限性,本文提出了一种基于语义感知的蜂窝D2D通信体系结构Airtalking,该体系结构集成了语义编码和解码,实现了高效的U2U数据交换,并设计了相应的算法来平衡时延和能耗,在不同的飞行条件下采用不同的调度策略进行仿真。机器需要三个核心组件:编码器、解码器和共享知识库。 PDF p.1PDF p.2
架构/方法图|来源:《Airtalking: Aerial D2D for Multi-UAV Systems Based on Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Airtalking: Aerial D2D for Multi-UAV Systems Based on Semantic Communication》,原 PDF p.8,Fig. 3 (a)–(e) Number of finished requests, (f)–(j) energy consumption on flight (including moving and hovering), and (k)–(o) nonflight (including all other costs on nonflight modules, semantic processing, and communication) per finished request in Joules 核对论文
核心纳入2026视频传输、生成或控制
Bidirectional Motion-Enhanced Semantic Communication for Wireless Video Transmission
现有进展:随着超高清(UHD)视频的日益增长,对有效的视频传输方案以缓解网络拥塞的需求正在增长。 PDF p.1
仍然存在的问题:但是,视频流量的快速膨胀使得带宽资源的高效利用越来越困难。 PDF p.1
为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
本文提出什么:本文提出了一种基于双向运动增强语义通信(SemCom)的视频传输系统。 PDF p.1
方案为何可能有效:我们还介绍了用于评估系统性能的指标。 PDF p.3
作者希望证明什么:在瑞利慢衰落信道下,当采用相同的压缩比时,该方法的PSNR平均增益为0.637dB,MS-SSIM平均增益为0.0038。 PDF p.1
方法与端到端信息流
在本文中,我们提出了一个双向的运动增强的语义通信(SemCom)系统的高效和鲁棒的视频传输。我们也提出了用于评估系统的性能指标。 PDF p.1PDF p.3
输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 Bidirectional Motion-Enhanced Semantic Communication for Wireless Video Transmission:在本文中,我们提出了一个双向的运动增强的语义通信(SemCom)系统的高效和鲁棒的视频传输。我们也提出了用于评估系统的性能指标。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:连续神经 JSCC latent / 实复信道符号
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“连续神经 JSCC latent / 实复信道符号”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:Bidirectional Motion-Enhanced Semantic Communication for Wireless Video Transmission 的主传输单位属于“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2PDF p.9
架构/方法图|来源:《Bidirectional Motion-Enhanced Semantic Communication for Wireless Video Transmission》,原 PDF p.5,Fig. 3 Block diagram of the proposed video SemCom system 核对论文关键实验结果图/表|来源:《Bidirectional Motion-Enhanced Semantic Communication for Wireless Video Transmission》,原 PDF p.10,Fig. 12 Performance comparison of different approaches over a slow Rayleigh fading channel for bandwidth compression ratio ρ = 0.031 核对论文
核心纳入2026任务导向推理
Contrastive Learning and Adversarial Disentanglement for Privacy-Aware Task-Oriented Semantic Communication
论文主旨:然而,现有方法难以完全分离任务相关和任务无关信息,导致隐私问题和次优性能。 针对这一问题,提出了一种基于信息瓶颈的方法--CLAD(contrative learning and adversarial distanglement)。 核心证据目标:大量实验表明,CLAD在语义提取、任务性能、隐私保护和IRI等方面优于最新的基准,是一种可靠、高效和可信的6G-IoT服务构建模块。
Motivation|Introduction 怎样导出本文方案
现有进展:这在支持6G的物联网(6G-IoT)场景中尤为重要,因为在这些场景中,带宽限制、延迟要求和数据隐私至关重要。 PDF p.1
仍然存在的问题:然而,现有方法难以完全分离任务相关和任务无关信息,导致隐私问题和次优性能。 PDF p.1
为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
本文提出什么:针对这一问题,提出了一种基于信息瓶颈的方法--CLAD(contrative learning and adversarial distanglement)。 PDF p.1
方案为何可能有效:该指标比较了各种面向任务的通信方法中编码特征的信息量和最小量,提供了对系统行为的更深入见解,并能够更严格地比较它们的性能; ·我们在不同的信道条件下评估了我们提出的面向任务的通信系统。 PDF p.2
作者希望证明什么:大量实验表明,CLAD在语义提取、任务性能、隐私保护和IRI等方面优于最新的基准,是一种可靠、高效和可信的6G-IoT服务构建模块。 PDF p.1
方法与端到端信息流
针对这一问题,本文提出了一种基于信息瓶颈的启发式方法--CLAD(对比学习和对抗性解纠缠)。该度量比较了各种面向任务的通信方法中的编码特征的信息量和最小量,从而提供了对系统行为的更深入的了解,并且能够更严格地比较它们的性能;·我们在不同的信道条件下评估我们提出的面向任务的通信系统,该度量比较了各种面向任务的通信方法中编码特征的信息量和最小量,提供对系统行为的更深入的洞察,并能够更严格地比较它们的性能; ·我们在不同的信道条件下评估我们提出的面向任务的通信系统。 PDF p.1PDF p.2
数据集为CIFAR-10、MNIST;实验小节中明确出现的比较对象包括DeepJSCC、JSCC、ResNet;指标包括accuracy、classification accuracy、latency;信道/链路条件包括AWGN;正文可定位的代表性工作点有SNR of 12 dB、SNR = 12 dB、SNR = 12dB。 PDF p.9
大量的实验表明,CLAD在语义提取、任务性能、隐私保护和IRI方面优于最先进的基线,使其成为负责任、高效和可信的6G-IoT服务的有前途的构建块。通过对这三个基线的基准测试,我们表明CLAD更有效地提取任务相关特征,抑制任务无关信息,提高下游分类性能,并提供更强的隐私保障。 PDF p.1PDF p.11
架构/方法图|来源:《Contrastive Learning and Adversarial Disentanglement for Privacy-Aware Task-Oriented Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Contrastive Learning and Adversarial Disentanglement for Privacy-Aware Task-Oriented Semantic Communication》,原 PDF p.9,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成
Feature Importance-Aware Deep Joint Source-Channel Coding for Computationally Efficient and Adjustable Image Transmission
现有进展:基于深度学习的联合信源信道编码(deepJSCC)的最新进展显著提高了通信性能,但其不断增长的计算成本阻碍了实际部署。 PDF p.1
仍然存在的问题:然而,物联网设备的快速增长增加了可用带宽的压力。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:针对该问题,该文提出了一种基于特征重要性感知的deepJSCC(FAJSCC)图像传输模型,该模型具有计算效率高、可调整性强的特点。 PDF p.1
方案为何可能有效:此外,由于我们提出的选择性特征增强框架,FAJSCC的发射机和接收机可以并且在什么条件下? PDF p.3
作者希望证明什么:实验结果表明,FAJSCC算法在各种信道条件下均能获得更优的图像传输性能,且计算复杂度较低。 PDF p.1
方法与端到端信息流
为了解决这些问题,我们提出了一个计算效率高且可调整的特征重要性感知deepJSCC(FAJSCC)图像传输模型。此外,由于我们提出的选择性特征增强框架,FAJSCC的发送器和接收端可以在什么条件下?在发射机和接收机处节省的一部分复杂度,我们建议重新投入计算以增加中间特征特征重要性感知deepJSCC(FAJSCC)框架信道的大小,从而得到更丰富的表示。 PDF p.1PDF p.2PDF p.3
输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Feature Importance-Aware Deep Joint Source-Channel Coding for Computationally Efficient and Adjustable Image Transmission:为了解决这些问题,我们提出了一个计算效率高且可调整的特征重要性感知deepJSCC(FAJSCC)图像传输模型。此外,由于我们提出的选择性特征增强框架,FAJSCC的发送器和接收端可以在什么条件下?在发射机和接收机处节省的一部分复杂度,我们建议重新投入计算以增加中间特征特征重要性感知deepJSCC(FAJSCC)框架信道的大小,从而得到更丰富的表示。
架构/方法图|来源:《Feature Importance-Aware Deep Joint Source-Channel Coding for Computationally Efficient and Adjustable Image Transmission》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《Feature Importance-Aware Deep Joint Source-Channel Coding for Computationally Efficient and Adjustable Image Transmission》,原 PDF p.13,Fig. 11 PSNR RESULTS of models under the fast Rayleigh fading channel with estimated fading coefficients for DIV2K dataset 核对论文
核心纳入2026语义感知资源分配与网络优化
Low-altitude Multi-UAV-assisted Data Collection and Semantic Forwarding for Post-Disaster Relief
现有进展:针对这些问题,提出了一种支持大语言模型的交替优化方法(LLM-AOA),该方法通过定制的优化策略对决策变量的不同子集进行优化,有效地处理了复杂的搜索空间和变量维数。 PDF p.1
仍然存在的问题:然而,传统的方法面临着无人机与远程基站之间脆弱的长距离链路、海量数据和机载无人机资源有限所带来的数据瓶颈等挑战。 PDF p.1
为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:针对这些问题,提出了一种支持大语言模型的交替优化方法(LLM-AOA),该方法通过定制的优化策略对决策变量的不同子集进行优化,有效地处理了复杂的搜索空间和变量维数。 PDF p.1
方案为何可能有效:提出了一种数据收集和语义转发多目标优化问题(DCSFMOP),该问题在最小化无人机能耗的同时,联合最大化用户和语义传输速率。 PDF p.1
作者希望证明什么:在同等能耗水平下,LLM-AOA在传输速率和语义速率上分别比传统AOA提高了约26.8%和22.9%。 PDF p.14
方法与端到端信息流
为了克服上述缺陷,本文提出了一种支持大语言模型的交替优化方法(LLM-AOA)。该方法通过定制的优化策略对决策变量的不同子集进行优化,有效地处理了复杂的搜索空间和变量维数,并建立了一个数据收集和语义转发的多目标优化问题(DCSFMOP)在最小化无人机能耗的同时,联合最大化用户和语义传输速率。数据收集和语义转发多目标优化问题:我们提出了一个优化问题,其目标是最大化所有被服务用户的总传输速率,最大化所有簇的总语义传输速率,并通过联合优化UAV聚类、位置、激励电流权重以及每个聚类中每个词使用的语义符号的数量来最小化所有UAV的飞行能耗。 PDF p.1PDF p.2
架构/方法图|来源:《Low-altitude Multi-UAV-assisted Data Collection and Semantic Forwarding for Post-Disaster Relief》,原 PDF p.14,Fig. 4 Solution distributions obtained by the proposed LLM-AOA and other benchmarks 核对论文关键实验结果图/表|来源:《Low-altitude Multi-UAV-assisted Data Collection and Semantic Forwarding for Post-Disaster Relief》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
相关但非核心2026语义信息度量与理论
On the Rate-Distortion-Complexity Tradeoff for Semantic Communication
现有进展:虽然基于深度学习(DL)的解决方案在从广泛的源中提取隐式语义信息方面显示出了有前途的结果,但现有工作往往忽视了基于DL的编码器和解码器的模型训练和推理中固有的高计算复杂度。 PDF p.1
仍然存在的问题:其中一个关键的挑战是如何有效地表示和提取任何给定源信号的语义。 PDF p.1
为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
本文提出什么:为了弥补这一缺陷,本文提出了一种率失真复杂度(RDC)框架,该框架扩展了经典的率失真理论,引入了语义距离的约束,包括传统的逐位失真度量和基于统计差异的发散度量,以及基于最小描述长度和信息瓶颈理论的复杂度度量。 PDF p.1
方案为何可能有效:除了理论分析之外,我们的实验研究还建立了这种信息理论复杂性度量与实际计算成本之间的具体联系,证明了其在资源受限系统中指导编码器设计的直接实用性。 PDF p.2
作者希望证明什么:我们的理论结果表明,可实现的速率,语义距离和模型的复杂性之间的一个基本的三方权衡。 PDF p.1
方法与端到端信息流
为了弥补这一缺陷,本文提出了一种率失真复杂度(RDC)框架,该框架扩展了经典的率失真理论,引入了语义距离的约束,包括传统的按位失真度量和基于统计差异的发散度量,以及基于最小描述长度和信息瓶颈理论的复杂度度量。我们的实验研究建立了这种信息论复杂性度量和实际计算成本之间的具体联系,证明了它对指导资源受限系统中的编码器设计的直接效用。 PDF p.1PDF p.2
输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 On the Rate-Distortion-Complexity Tradeoff for Semantic Communication:为了弥补这一缺陷,本文提出了一种率失真复杂度(RDC)框架,该框架扩展了经典的率失真理论,引入了语义距离的约束,包括传统的按位失真度量和基于统计差异的发散度量,以及基于最小描述长度和信息瓶颈理论的复杂度度量。我们的实验研究建立了这种信息论复杂性度量和实际计算成本之间的具体联系,证明了它对指导资源受限系统中的编码器设计的直接效用。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。
数字化方案与真实传输开销
是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型
表示判断:上层理论/资源变量;论文不单独定义可发送语义格式
论文没有给出可复核的 VQ/codebook/index-to-bit 接口。系统模型中的传输表示属于“上层理论/资源变量;论文不单独定义可发送语义格式”;网络 latent 的浮点维度不能直接当作固定 bit。 表示判定:On the Rate-Distortion-Complexity Tradeoff for Semantic Communication 的主传输单位属于“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2
论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2PDF p.14
架构/方法图|来源:《On the Rate-Distortion-Complexity Tradeoff for Semantic Communication》,原 PDF p.2,该页包含论文的主要方法/架构图。 核对论文关键实验结果图/表|来源:《On the Rate-Distortion-Complexity Tradeoff for Semantic Communication》,原 PDF p.13,Fig. 9 (a) The classification accuracy of the proposed VRDC METHOD under varying complexity; (b) The comparison between the classification accuracy of the DeepJSCC [46] approach and that of the VRDC METHOD 核对论文
核心纳入2026语义感知资源分配与网络优化
Rate-Splitting Multiple Access-Enabled Probabilistic Semantic Communication in UAV Networks
现有进展:提出了一种无人机下行语义通信框架,该框架采用概率知识图(PKG)对用户设备(UE)语义进行建模,并将语义信息分解为共享组件和私有组件。 PDF p.1
仍然存在的问题:然而,在动态无人机通信,保持知识的一致性是困难的。 PDF p.1
为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
本文提出什么:利用速率分裂多址接入(RSMA)在处理这种语义结构中的能力,开发了PKG辅助的RSMA传输方案,以在严重的能量约束和快速变化的UAV信道下有效地传递多用户语义信息。 PDF p.1
方案为何可能有效:提出了一种无人机下行语义通信框架,该框架采用概率知识图(PKG)对用户设备(UE)语义进行建模,并将语义信息分解为共享组件和私有组件。 PDF p.1
作者希望证明什么:广泛的仿真结果验证了该框架实现了更优的能源效率,增强的语义保存,并始终优于传统的RSMA,非正交多址(NOMA),空分多址(SDMA)计划在各种网络参数的基准测试的性能。 PDF p.1
方法与端到端信息流
利用速率分裂多址接入(RSMA)在处理语义结构方面的能力,提出了一种PKG辅助的RSMA传输方案,以在严重的能量约束和快速变化的无人机信道下有效地传递多用户语义信息。其中,概率知识图(PKG)被用于建模用户设备(UE)语义,并将语义信息分解为共享和私有组件。为了解决上述挑战,我们开发了基于PKG的无人机语义通信框架,其实现从空中移动的基站(BS)到地面用户设备(UE)的下行链路传输。 PDF p.1PDF p.2
架构/方法图|来源:《Rate-Splitting Multiple Access-Enabled Probabilistic Semantic Communication in UAV Networks》,原 PDF p.3,Fig. 2 Block diagram of RSMA-enabled probabilistic semantic communications 核对论文关键实验结果图/表|来源:《Rate-Splitting Multiple Access-Enabled Probabilistic Semantic Communication in UAV Networks》,原 PDF p.18,Fig. 6 SIMULATION RESULTS of power allocation and beamforming design subproblem 核对论文
核心纳入2026图像传输、压缩或生成
Unequal Error Protection for Digital Semantic Communication with Channel Coding
现有进展:本文研究了数字语义通信中的不等错误保护(UEP),其中语义上重要的比特比不太重要的比特需要更高的可靠性。 PDF p.1
仍然存在的问题:然而,由于神经编码器通常产生连续值输出,因此这些方法通常依赖于模拟传输,这缺乏与现代数字通信系统的兼容性,并且在速率控制方面具有有限的灵活性。 PDF p.1
为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
本文提出什么:为了表征这种异质性,我们引入了一种新的视角,将学习到的语义位的位翻转概率作为目标错误保护级别,从而直接将语义重要性与位级可靠性联系起来。 PDF p.1
方案为何可能有效:这个公式表明,所需的保护级别的语义位可能会有几个数量级的不同,使短块编码比传统的长块设计更有利。 PDF p.1
作者希望证明什么:在图像传输任务上的仿真结果表明,与传统的等保护方案相比,该方案在任务性能和传输效率上都有很大的提高。 PDF p.1
方法与端到端信息流
为了描述这种异质性,我们引入了一种新的视角,将语义位的学习位翻转概率作为目标错误保护级别,从而将语义重要性直接与位级可靠性联系起来。这种提法揭示了语义位所需的保护级别可能相差几个数量级,使得短块编码比传统的长块设计更具优势。我们开发了两个UEP框架,其最小化总块长度,同时确保每个语义位的实际位翻转概率不超过其对应的目标值。 PDF p.1PDF p.2
量化 bit 经过 repetition、Polar 或 LDPC 编码、数字调制和 0 dB Rayleigh block fading;接收端完成均衡、联合解调/译码并恢复 semantic bits。训练得到的逐 bit 目标翻转概率直接约束各组码长或码率,因此 bit error 的影响进入端到端设计。 信道处理归类为“类别 4:逐 bit 目标翻转概率驱动信道编码与联合训练”。 PDF p.8
语义 decoder 实际面对的是:信道译码后仍由目标 bit-flip probability 约束的恢复 bit,再反量化为语义 latent。 PDF p.8
是否真正处理离散变量出错:是。该文把每个 semantic bit 可容忍的 bit-flip probability 作为优化约束,并据此分配 repetition 次数、Polar/LDPC 块长和码率,直接处理位错误的异质语义代价。
实验设置与主要结论
数据集/场景CIFAR-10、CIFAR-100、MNIST
BaselineJSCC、LDPC、Polar
评价指标PSNR、SSIM、PER
信道与工作点Rayleigh、fading channel、block fading
数据集为CIFAR-10、CIFAR-100、MNIST;实验小节中明确出现的比较对象包括JSCC、LDPC、Polar;指标包括PSNR、SSIM、PER;信道/链路条件包括Rayleigh、fading channel、block fading。 PDF p.9
在图像传输任务上的仿真结果表明,与传统的等保护方案相比,Block-UEP在任务性能和传输效率上都有显著提高,而且在保持相同块长度的情况下,其PSNR优于传统的等速率方案(LDPC和Polar)。 PDF p.1PDF p.10
架构/方法图|来源:《Unequal Error Protection for Digital Semantic Communication with Channel Coding》,原 PDF p.12,Fig. 10 PSNR and total blocklength the proposed block-level UEP framework with various λ values using the MNIST dataset (K = 3136) 核对论文关键实验结果图/表|来源:《Unequal Error Protection for Digital Semantic Communication with Channel Coding》,原 PDF p.10,Fig. 3 Comparison of PSNR versus total blocklength for various channel coding frameworks using the CIFAR-10 dataset with λ = 10-4 (K = 12288) 核对论文