TCCN · 2023—2026

IEEE TCCN 语义通信论文全景调研(2023—至今)

本页是对原专题的整体重建。所有 100 篇纳入论文均重新从本地 PDF 以正确双栏阅读顺序抽取并核对;Introduction、方法、数字化接口、信道作用点和实验结论经过二次中文综合,不再显示栏间交错的原始英文片段。

100PDF 全文重读
91核心纳入
9边界相关
6显式处理离散错误
公开网页版本:受版权保护的 IEEE PDF 不上传;论文按钮指向 DOI/IEEE 页面,证据图和页码用于本地研究复核。 内容更新于 2026-08-28,分析版本 journal_fulltext_reread_v4_2026-08-28。

阅读口径与质量控制

纳入范围

语义/任务通信、DeepJSCC、数字调制与码本、生成式与多用户认知网络。核心/相关标签表示与语义通信问题的接近程度,不评价论文质量。正式年份以期刊卷年为准。

重新阅读流程

  1. 逐篇校验 manifest 与本地 PDF;
  2. 使用 Poppler 正常阅读顺序重新抽取全文,避免双栏交错;
  3. 从 Introduction、方法、数字化/速率、信道与实验段落选择页码证据;
  4. 以干净书目摘要为叙事锚点,生成中文综合,原始抽取文本不进入页面;
  5. 单独判断 decoder 收到什么,以及论文是否处理残余 bit/index/packet error。

任务分布

  • 图像传输、压缩或生成:37 篇
  • 任务导向推理:19 篇
  • 语义感知资源分配与网络优化:8 篇
  • 语义信息度量与理论:6 篇
  • 视频传输、生成或控制:6 篇
  • 通用语义通信系统:5 篇
  • 语音/音频传输或识别:5 篇
  • 点云/三维场景传输:5 篇
  • 文本传输或语言任务:3 篇
  • 综述、架构与研究路线:3 篇
  • 多模态检索与任务通信:2 篇
  • 边缘学习与任务通信:1 篇

信道处理分布

  • 类别 0:38 篇
  • 类别 1:10 篇
  • 类别 2:5 篇
  • 类别 3:22 篇
  • 类别 4:6 篇
  • 类别 5:19 篇

可追溯文件:逐篇二次综合 JSONL · 全文重读审计 · 横向比较 CSV。旧 structured_analysis/evidence 只保留为抽取审计层,不再作为网页展示层。

100 篇横向比较

重点看“表示”和“信道处理”两列:有数字 bitstream 不等于处理了误码;连续 DeepJSCC 的抗噪声也不能外推到 VQ index 跳变。

年层级完整标题任务传输表示信道处理离散错误判断
2023核心Deep Joint Source-Channel Coding for Image Transmission With Visual Protection图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2023核心Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation通用语义通信系统连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2023核心Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2023核心Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication语义信息度量与理论语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2023核心Semantics-Native Communication via Contextual Reasoning通用语义通信系统语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2024核心Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications任务导向推理上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2024相关Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing语义感知资源分配与网络优化上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2024核心Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems任务导向推理显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是:作者以任务鲁棒概率而非零 BER 为调制选择约束,并在恶劣信道下显式设计重传与合并。
2024核心DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication图像传输、压缩或生成有限星座/标准数字波形接口类别 2:语义特征映射为调制符号或编码包未形成可复核的 bit/index/token 错误闭环。
2024核心Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization任务导向推理连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2024核心How to Evaluate Semantic Communications for Images With ViTScore Metric?语义信息度量与理论上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2024核心LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission文本传输或语言任务语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2024核心SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2024核心SCAN: Semantic Communication With Adaptive Channel Feedback图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2024核心Speech Semantic Communication Based on Swin Transformer语音/音频传输或识别语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems语义感知资源分配与网络优化语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025核心A Theory for Semantic Channel Coding With Many-to-One Source语义信息度量与理论上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications语音/音频传输或识别语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心Conceptual Learning and Causal Reasoning for Semantic Communication任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2025核心Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2025核心Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2025核心Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。
2025核心EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission语音/音频传输或识别语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025核心Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications通用语义通信系统语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture任务导向推理上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks视频传输、生成或控制连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复未形成可复核的 bit/index/token 错误闭环。
2025相关Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications综述、架构与研究路线上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025相关Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications综述、架构与研究路线上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks语义信息度量与理论上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是:训练显式建模 bit flip 与 erasure,并利用解调不确定性提高数字 JSCC encoder/decoder 对信道和调制阶数变化的鲁棒性。
2025核心Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach多模态检索与任务通信语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025相关R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy语义感知资源分配与网络优化上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications语义信息度量与理论连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025核心Semantic Image Encoding and Communication for Earth Observation With LEO Satellites图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025相关Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer文本传输或语言任务语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2025核心Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复未形成可复核的 bit/index/token 错误闭环。
2025核心Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications语义感知资源分配与网络优化上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2025核心SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference图像传输、压缩或生成有限星座/标准数字波形接口类别 2:语义特征映射为调制符号或编码包不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025核心SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding图像传输、压缩或生成有限星座/标准数字波形接口类别 2:语义特征映射为调制符号或编码包不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2025核心Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach任务导向推理显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints点云/三维场景传输连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026相关6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models语音/音频传输或识别语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication任务导向推理连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026相关A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担是(相关谱系):端到端训练显式注入 packet erasure,并学习 packet-level source-network coding;它不是以 semantic payload 为主张的核心 SemCom 论文。
2026核心A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity语义感知资源分配与网络优化上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video视频传输、生成或控制连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission视频传输、生成或控制连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission点云/三维场景传输语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation点云/三维场景传输连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication视频传输、生成或控制连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复是:训练/测试显式施加高比例 packet erasure,并用语义交织、loss mask 与 3D CNN 恢复缺失信息。
2026核心Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources任务导向推理上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence图像传输、压缩或生成有限星座/标准数字波形接口类别 2:语义特征映射为调制符号或编码包未形成可复核的 bit/index/token 错误闭环。
2026核心D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。
2026核心DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms点云/三维场景传输连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复未形成可复核的 bit/index/token 错误闭环。
2026核心GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs任务导向推理连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Generative Semantic Communication: Diffusion Models Beyond Bit Recovery图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication任务导向推理显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems语音/音频传输或识别语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics视频传输、生成或控制上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs图像传输、压缩或生成上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion语义感知资源分配与网络优化显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems任务导向推理上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心Large-Scale Model-Enabled Semantic Communication via Robust Knowledge Distillation and Lightweight Architecture Search图像传输、压缩或生成上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks点云/三维场景传输语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Multi-Stage Semantic Communication for Low-Latency Edge Inference任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心On the Effectiveness of Task-Oriented Digital Semantic Communication System任务导向推理显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications任务导向推理语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Personalized Federated Learning for GAI-Assisted Semantic Communications边缘学习与任务通信语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly任务导向推理显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象未形成可复核的 bit/index/token 错误闭环。
2026核心Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。
2026核心Region-of-Interest Oriented Image Semantic Communication图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Resource Allocation for Semantic Communication in NTN Downlinks语义感知资源分配与网络优化上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication图像传输、压缩或生成语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Semantic Communication for Cooperative Perception Using HARQ任务导向推理语义特征包/调制符号与 HARQ 冗余版本类别 5:语义感知 HARQ/重传与任务判据耦合是:语义错误检测器决定是否触发 HARQ,并在低 SNR 下以感知精度和吞吐量共同评估重传收益。
2026核心Semantic Communication for Machines: A Joint Transmission and Understanding Design文本传输或语言任务语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026相关Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions综述、架构与研究路线上层理论/资源变量;论文不单独定义可发送语义格式类别 5:沿用底层链路或抽象速率—效用模型未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。
2026核心SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion图像传输、压缩或生成显式数字语义表示:bit、离散 token 或码本 index类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象未形成可复核的 bit/index/token 错误闭环。
2026核心ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission视频传输、生成或控制有限星座/标准数字波形接口类别 2:语义特征映射为调制符号或编码包部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。
2026核心Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach语义信息度量与理论语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders图像传输、压缩或生成连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心Topic Enhanced Semantic Communication System for Reliable Semantic Recovery通用语义通信系统语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026核心Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework多模态检索与任务通信语义 feature/latent;量化到 bitstream 的接口未完整报告类别 0:信道作用点不足,或由外部传统链路抽象承担未形成可复核的 bit/index/token 错误闭环。
2026相关Uplink-Assisted Joint Channel Estimation and CSI Feedback: An Approach Based on Deep Joint Source-Channel Coding通用语义通信系统连续神经 JSCC latent / 实复信道符号类别 3:连续语义变量直接经过有噪声信道并端到端恢复不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。
2026核心VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission语义感知资源分配与网络优化显式数字语义表示:bit、离散 token 或码本 index类别 4:离散 bit/index/packet error 被显式建模或联合训练是:codebook index 被转换为 bit/QAM 符号并经过 3GPP EPA 多径信道;正文报告 BER/index propagation error,并以 CSI refinement 和信道含噪 Stage-3 训练降低端到端失真。
核心纳入2023图像传输、压缩或生成

Deep Joint Source-Channel Coding for Image Transmission With Visual Protection

DOI / IEEE 页面

作者Jialong Xu; Bo Ai; Wei Chen; Ning Wang; Miguel Rodrigues

出版信息Vol. 9 · No. 6 · pp. 1399-1411

DOI / IEEE ID10.1109/tccn.2023.3306851 / 10225310

通信位置通信安全与隐私

一句话主旨:DJPSCC 面向图像传输、压缩或生成,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:联合信源信道编码(JSCC)由于深度学习(DL)的引入而取得了巨大成功。 PDF p.1
  2. 仍然存在的问题:然而,与传统的SSCC方案相比,现有的安全通信机制(例如,加密-解密机制)难以与DJSCC相耦合,这阻碍了这一新兴技术的实际应用。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为此,我们提出了一种新的方法,称为基于DL的联合保护和信源信道编码(DJPSCC)的图像,可以成功地保护视觉内容的原始图像,而不会显着牺牲图像重建性能。 PDF p.1
  6. 方案为何可能有效:设计思想是利用神经网络进行视觉保护,将普通图像转换为视觉保护图像,同时考虑到图像与DJSCC的交互。 PDF p.1
  7. 作者希望证明什么:与现有的应用于DJSCC传输的源保护方法相比,DJPSCC方法实现了更好的重构性能。 PDF p.1

方法与端到端信息流

为此,本文提出了一种新的图像保护方法,即基于DL的联合保护和信源信道编码(DJPSCC),该方法可以在不显著牺牲图像重建性能的情况下成功地保护原始图像的视觉内容,其设计思想是利用神经网络进行视觉保护,其考虑到其与DJSCC的相互作用而将普通图像转换为视觉上受保护的图像。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 DJPSCC:为此,本文提出了一种新的图像保护方法,即基于DL的联合保护和信源信道编码(DJPSCC),该方法可以在不显著牺牲图像重建性能的情况下成功地保护原始图像的视觉内容,其设计思想是利用神经网络进行视觉保护,其考虑到其与DJSCC的相互作用而将普通图像转换为视觉上受保护的图像。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

连续 learned latent / channel symbol(DeepJSCC) 独立判断:DJPSCC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

带宽比R被定义为k/n,其中n是源大小(即,图像大小),k是信道带宽(即,信道输入大小)。 PDF p.4

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.8

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、ImageNet、CIFAR-10

BaselineJPEG、ResNet、ADJSCC、JSCC、SSCC、ETC

评价指标PSNR、SSIM、accuracy、classification accuracy

信道与工作点wireless channel、SNR = 10 dB、SNR=10 dB

数据集为Kodak、ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括JPEG、ResNet、ADJSCC、JSCC、SSCC、ETC;指标包括PSNR、SSIM、accuracy、classification accuracy;信道/链路条件包括wireless channel;正文可定位的代表性工作点有SNR = 10 dB、SNR=10 dB。 PDF p.8

与现有的应用于DJSCC传输的源保护方法相比,DJPSCC方法实现了更好的重构性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Deep Joint Source-Channel Coding for Image Transmission With Visual Protection 架构/方法图
架构/方法图|来源:《Deep Joint Source-Channel Coding for Image Transmission With Visual Protection》,原 PDF p.4,Fig. 3 The system model of the proposed DJPSCC method。 核对论文
Deep Joint Source-Channel Coding for Image Transmission With Visual Protection 关键实验结果图/表
关键实验结果图/表|来源:《Deep Joint Source-Channel Coding for Image Transmission With Visual Protection》,原 PDF p.7,Fig. 9 compares the reconstruction performance of the comparison. DJPSCC method with that of the aforementioned methods for 核对论文
核心纳入2023通用语义通信系统

Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation

DOI / IEEE 页面

作者Yishen Li; Xuechen Chen; Xiaoheng Deng

出版信息Vol. 9 · No. 6 · pp. 1424-1437

DOI / IEEE ID10.1109/tccn.2023.3294754 / 10180059

通信位置多用户接入、广播或中继

一句话主旨:VDA 面向通用语义通信系统,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:随着分布式学习和边缘计算的发展,服务器必须经常接收来自多个终端设备的信息,因此,多接入信道(MAC)上分布式信源的信源信道编码的重要性变得越来越重要。 PDF p.1
  2. 仍然存在的问题:但是,它需要知道所有源维的完整联合分布。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:提出了一种基于高斯MAC的多变量高斯信源深度联合信源信道编码(JSCC)设计方法。 PDF p.1
  6. 方案为何可能有效:为了解决这个问题,我们使用一个VAE来构造JSCC系统,并通过变分分析在损失函数中引入附加的分布约束。 PDF p.2
  7. 作者希望证明什么:分析了VDA-JSCC算法在高CSNR下性能下降的原因,提出了用专家混合算法代替VDA-JSCC算法的编码器,以提高其在高CSNR下的性能。 PDF p.1

方法与端到端信息流

针对高斯MAC上的多变量高斯信源,提出了一种深度联合信源信道编码(JSCC)设计方法,该方法利用变分分析方法构造JSCC系统,并在损失函数中引入额外的分布约束。 PDF p.1 PDF p.2

输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 VDA:针对高斯MAC上的多变量高斯信源,提出了一种深度联合信源信道编码(JSCC)设计方法,该方法利用变分分析方法构造JSCC系统,并在损失函数中引入额外的分布约束。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:VDA 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineVAE、JSCC、CLIP

评价指标全文未稳定定位

信道与工作点AWGN、Rayleigh、fading channel、SNR = 20 dB、SNR = 10 dB、SNR = 30 dB、SNR = 25 dB

实验小节中明确出现的比较对象包括VAE、JSCC、CLIP;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 20 dB、SNR = 10 dB、SNR = 30 dB、SNR = 25 dB。 PDF p.9

分析了VDA-JSCC算法在高CSNR下性能下降的原因,提出了用专家混合算法代替VDA-JSCC算法的编码器,以提高其在高CSNR下的性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation 架构/方法图
架构/方法图|来源:《Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation》,原 PDF p.5,Fig. 4 Overview of VDA-JSCC structure。 核对论文
Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation 关键实验结果图/表
关键实验结果图/表|来源:《Joint Source-Channel Coding for a Multivariate Gaussian Over a Gaussian MAC Using Variational Domain Adaptation》,原 PDF p.10,Fig. 13 SDR performance comparison for different JSCC schemes with ρx = 0.5 and N = 2。 核对论文
核心纳入2023任务导向推理

Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference

DOI / IEEE 页面

作者Jiechen Chen; Nicolas Skatchkovsky; Osvaldo Simeone

出版信息Vol. 9 · No. 2 · pp. 252-265

DOI / IEEE ID10.1109/tccn.2023.3236940 / 10016643

通信位置任务导向联合信源信道设计

一句话主旨:Neuromorphic Wireless Cognition 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:神经形态计算是一种新兴的计算范式,它从批量处理转向在线、事件驱动的流数据处理。 PDF p.1
  2. 仍然存在的问题:神经形态芯片,当与基于尖峰的传感器相结合时,可以通过仅在尖峰定时记录相关事件时消耗能量以及通过对环境中变化的条件提供低延迟响应来固有地适应数据分布的“语义”。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:本文提出了一种端到端的设计,神经形态的无线物联网系统,集成了基于尖峰的传感,处理和通信。 PDF p.1
  6. 方案为何可能有效:本文重点介绍了一种基于边缘的物联网系统,其中数据由移动的传感器以流式方式收集和预处理,以便在另一个边缘设备上连续进行推理。 PDF p.2
  7. 作者希望证明什么:所提出的系统显着改善传统的基于帧的数字解决方案,以及替代非自适应训练方法,在时间精度和能耗指标。 PDF p.1

方法与端到端信息流

本文提出了一种基于神经形态的无线物联网系统的端到端设计,该系统集成了基于尖峰信号的传感、处理和通信。本文重点介绍了一种基于边缘的物联网系统,在该系统中,数据由移动的传感器以流式方式收集和预处理,以便在另一个边缘设备上连续进行推理。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Neuromorphic Wireless Cognition:本文提出了一种基于神经形态的无线物联网系统的端到端设计,该系统集成了基于尖峰信号的传感、处理和通信。本文重点介绍了一种基于边缘的物联网系统,在该系统中,数据由移动的传感器以流式方式收集和预处理,以便在另一个边缘设备上连续进行推理。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Neuromorphic Wireless Cognition 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景MNIST

BaselineLDPC、VAE、VQ-VAE

评价指标accuracy、recall、latency、PER

信道与工作点Rayleigh、fading channel、SNR = 10 dB

数据集为MNIST;实验小节中明确出现的比较对象包括LDPC、VAE、VQ-VAE;指标包括accuracy、recall、latency、PER;信道/链路条件包括Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 10 dB。 PDF p.9

所提出的系统显着改善传统的基于帧的数字解决方案,以及替代非自适应训练方法,在时间精度和能耗指标。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference 架构/方法图
架构/方法图|来源:《Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference》,原 PDF p.3,Fig. 3 A block diagram illustrating the main operations involved in the implementation of the proposed NeuroComm system (IR stands for impulse radio)。 核对论文
Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference 关键实验结果图/表
关键实验结果图/表|来源:《Neuromorphic Wireless Cognition: Event-Driven Semantic Communications for Remote Inference》,原 PDF p.11,Fig. 10 Test accuracy versus Lb for NeuroComm (K = 1, μ = 1, samples. SNR = 10 dB)。 核对论文
核心纳入2023语义信息度量与理论

Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication

DOI / IEEE 页面

作者Weizhi Li; Haotai Liang; Chen Dong; Xiaodong Xu; Ping Zhang; Kaijun Liu

出版信息Vol. 9 · No. 6 · pp. 1438-1453

DOI / IEEE ID10.1109/tccn.2023.3306852 / 10225385

通信位置多用户接入、广播或中继

一句话主旨:MUD 面向语义信息度量与理论,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:此外,它在各种仿真设置和不匹配的测试场景下表现出很高的鲁棒性。 PDF p.1
  2. 仍然存在的问题:目前的语义通信工作主要依赖于连续的全分辨率特征的传输,这给计算资源有限的移动的设备带来了沉重的负担,并且难以在真实世界的数字系统中实现。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:多用户语义通信理论是其重要的研究内容之一,可以进一步提高其在实际网络环境中的应用。 PDF p.1
  6. 方案为何可能有效:拟议的NOMASC系统的示意图,其中许多智能语义用户位于一个单元中并配对成不同的组。 PDF p.2
  7. 作者希望证明什么:仿真结果表明,该系统在非正交多用户信号传输中具有良好的性能,尤其是在中低信噪比时,性能优于其他方法。 PDF p.1

方法与端到端信息流

它的一个关键方面是多用户语义通信理论,这可以进一步提高其在实际网络环境中的应用。拟议的NOMASC系统的示意图,其中许多智能语义用户位于一个单元中,并配对成不同的组。 PDF p.1 PDF p.2

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 MUD:它的一个关键方面是多用户语义通信理论,这可以进一步提高其在实际网络环境中的应用。拟议的NOMASC系统的示意图,其中许多智能语义用户位于一个单元中,并配对成不同的组。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

为了避免对硬件的高要求,在语义编码器的末端采用非对称量化器来离散化连续的全分辨率语义特征。 独立判断:MUD 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

在瑞利衰落信道下的传输性能,除了信道类型不同外,仿真设置与AWGN情况相同,基于学习的方法表现出“悬崖效应”,但下降幅度较平缓。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.10

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景MNIST、Europarl

BaselineDeepJSCC、JPEG、LDPC、Turbo、QAM、NOMASC、JSCC、Huffman

评价指标PSNR、SSIM、MSE、mAP、accuracy、MACs、BLEU、PER

信道与工作点AWGN、Rayleigh、NOMA、channel estimation、fading channel

数据集为MNIST、Europarl;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、LDPC、Turbo、QAM、NOMASC、JSCC、Huffman;指标包括PSNR、SSIM、MSE、mAP、accuracy、MACs、BLEU、PER;信道/链路条件包括AWGN、Rayleigh、NOMA、channel estimation、fading channel。 PDF p.10

仿真结果表明,该系统在非正交多用户信号传输中具有良好的性能,尤其是在中低信噪比时,性能优于其他方法。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication 架构/方法图
架构/方法图|来源:《Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication》,原 PDF p.12,Fig. 8 Robustness of the model to a variety of conditions。 核对论文
Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Non-Orthogonal Multiple Access Enhanced Multi-User Semantic Communication》,原 PDF p.10,Fig. 6 Transmission performance under the Rayleigh fading channel, the simulation setting is the same as the AWGN case except for the channel type。 核对论文
核心纳入2023通用语义通信系统

Semantics-Native Communication via Contextual Reasoning

DOI / IEEE 页面

作者Hyowoon Seo; Jihong Park; Mehdi Bennis; Mérouane Debbah

出版信息Vol. 9 · No. 3 · pp. 604-617

DOI / IEEE ID10.1109/tccn.2023.3250206 / 10054510

通信位置联合信源信道编码(JSCC)

一句话主旨:SNC 面向通用语义通信系统,把问题放在“联合信源信道编码(JSCC)”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:最近,机器学习(ML)通过恢复比特的语义在提高通信效率方面显示出其有效性。 PDF p.1
  2. 仍然存在的问题:然而,现有的SC研究通常假设每个听者的解码过程只是其发言者的编码过程的镜像。 PDF p.1
  3. 为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:为此,受语言学和信息论的启发,我们提出了一种新的随机语义本机通信(SNC)模型,扬声器映射到语义概念,然后到符号的实体感兴趣的(例如,抽象的想法,物理现象和对象),从而在语义表示(SR)。 PDF p.1
  6. 方案为何可能有效:受人类交流的启发,我们考虑了一个点对点的SNC场景,其中扬声器有一个意图,指的是一个实体,提取其语义概念,并将这些概念映射到符号,通过传统的香农通信信道传达给目标听众。 PDF p.1
  7. 作者希望证明什么:仿真结果证实,基于上下文推理的SNC通过在上下文推理前量化实体-概念-符号映射,可以显著减少比特长度,并对不完美的Agent状态提供鲁棒的解决方案。 PDF p.1

方法与端到端信息流

为此,受语言学和信息论的启发,我们提出了一种新的随机语义-本机通信(SNC)模型,其中说话者映射感兴趣的实体将抽象概念、物理现象和物体等抽象概念转化为语义概念,再转化为符号,从而形成语义表征(SR)。我们考虑点对点SNC场景,其中说话者具有指代实体的意图,提取其语义概念,并将这些概念映射成通过传统香农通信信道传达给目标收听者的符号。 PDF p.1

输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 SNC:为此,受语言学和信息论的启发,我们提出了一种新的随机语义-本机通信(SNC)模型,其中说话者映射感兴趣的实体将抽象概念、物理现象和物体等抽象概念转化为语义概念,再转化为符号,从而形成语义表征(SR)。我们考虑点对点SNC场景,其中说话者具有指代实体的意图,提取其语义概念,并将这些概念映射成通过传统香农通信信道传达给目标收听者的符号。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

仿真结果证实,基于上下文推理的SNC通过在上下文推理前量化实体-概念-符号映射,可以显著减少比特长度,并对不完美的Agent状态提供鲁棒的解决方案。 独立判断:SNC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.9

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineARQ

评价指标accuracy、latency、PER

信道与工作点erasure、BEC、erasure channel

实验小节中明确出现的比较对象包括ARQ;指标包括accuracy、latency、PER;信道/链路条件包括erasure、BEC、erasure channel。 PDF p.9

仿真结果证实,基于上下文推理的SNC通过在上下文推理前量化实体-概念-符号映射,可以显著减少比特长度,并对不完美的Agent状态提供鲁棒的解决方案。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“联合信源信道编码(JSCC)”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantics-Native Communication via Contextual Reasoning 架构/方法图
架构/方法图|来源:《Semantics-Native Communication via Contextual Reasoning》,原 PDF p.10,Fig. 5 Reliability γ with respect to parameters α and β ranging 0.9 to 2 in System 2 SNC, for different self-SNC iteration depth r = 10, 20 and 100。 核对论文
Semantics-Native Communication via Contextual Reasoning 关键实验结果图/表
关键实验结果图/表|来源:《Semantics-Native Communication via Contextual Reasoning》,原 PDF p.11,Fig. 7 SR length achieving reliability γ = 1 in System 1 and System 2 SNC, under noiseless and noisy (pe = 0.1, 0.2 binary erasure) channels, for different self-SNC iteration steps r = 10, 20 and 100。 核对论文
核心纳入2024任务导向推理

Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications

DOI / IEEE 页面

作者Chuanhong Liu; Caili Guo; Yang Yang; Nan Jiang

出版信息Vol. 10 · No. 3 · pp. 769-782

DOI / IEEE ID10.1109/tccn.2023.3346481 / 10375768

通信位置资源分配与跨层优化

一句话主旨:ASC 面向任务导向推理,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:面向任务的通信是一种新的模式,旨在为完成智能任务提供有效的连接,而不是接收每一个发送的比特。 PDF p.1
  2. 仍然存在的问题:然而,在延迟不容忍系统中容纳多个用户构成了挑战。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:本文提出了面向任务的端到端语义传输的通信架构,其中提取的语义压缩所提出的自适应语义压缩(ASC)方法。 PDF p.1
  6. 方案为何可能有效:具体来说,我们提出了一个压缩比和资源分配(CRRA)算法,该算法将问题分为两个子问题,并迭代求解。 PDF p.1
  7. 作者希望证明什么:此外,数值结果清楚地表明,所提出的CRRA和CRRAUS算法导致实质性的改善,在成功的收益相比,基线。 PDF p.1

方法与端到端信息流

提出了一种面向任务的端到端语义传输通信体系结构,采用自适应语义压缩(ASC)方法对提取的语义进行压缩,并提出了一种压缩比和资源分配(CRRA)算法,将问题分解为两个子问题进行迭代求解。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 ASC:提出了一种面向任务的端到端语义传输通信体系结构,采用自适应语义压缩(ASC)方法对提取的语义进行压缩,并提出了一种压缩比和资源分配(CRRA)算法,将问题分解为两个子问题进行迭代求解。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:ASC 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景STL-10

BaselineJPEG、LDPC、TCM、ResNet、ASC

评价指标accuracy、classification accuracy

信道与工作点channel estimation、imperfect CSI、SNR = -5 dB

数据集为STL-10;实验小节中明确出现的比较对象包括JPEG、LDPC、TCM、ResNet、ASC;指标包括accuracy、classification accuracy;信道/链路条件包括channel estimation、imperfect CSI;正文可定位的代表性工作点有SNR = -5 dB。 PDF p.9

此外,数值结果清楚地表明,所提出的CRRA和CRRAUS算法导致实质性的改善,在成功的收益相比,基线。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications 架构/方法图
架构/方法图|来源:《Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications》,原 PDF p.4,Fig. 2 The framework of proposed task-oriented semantic communication system. Semantic compression is bypassed during training。 核对论文
Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications 关键实验结果图/表
关键实验结果图/表|来源:《Adaptable Semantic Compression and Resource Allocation for Task-Oriented Communications》,原 PDF p.10,Fig. 3 Classification accuracy versus channel SNR under different commu- 核对论文
相关但非核心2024语义感知资源分配与网络优化

Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing

DOI / IEEE 页面

作者Wenjing Xiao; Yixue Hao; Junbin Liang; Long Hu; Salman A. AlQahtani; Min Chen

出版信息Vol. 10 · No. 6 · pp. 2357-2369

DOI / IEEE ID10.1109/tccn.2024.3400820 / 10530425

通信位置资源分配与跨层优化

一句话主旨:Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing 面向语义感知资源分配与网络优化,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:边缘计算(EC)和5G无线通信技术的快速发展为深度神经网络(DNN)驱动的智能应用开辟了新的机遇。 PDF p.1
  2. 仍然存在的问题:然而,视觉推理服务中涉及的实时和密集的数据传输对无线网络施加了显著的通信负担。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:具体而言,我们提出了一个压缩比和网络带宽的协同优化模型,以产生可靠的压缩卸载和资源分配方案。 PDF p.1
  6. 方案为何可能有效:具体而言,我们提出了一个压缩比和网络带宽的协同优化模型,以产生可靠的压缩卸载和资源分配方案。 PDF p.1
  7. 作者希望证明什么:实验结果表明,我们提出的卸载模型和压缩策略优于其他算法,实现了显着的通信改善和性能增益。 PDF p.1

方法与端到端信息流

针对上述问题,本文研究了面向边缘计算的通用视觉服务策略,提出了一种基于自适应压缩卸载的通信高效的边缘推理部署体系结构。 PDF p.1 PDF p.2

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing:针对上述问题,本文研究了面向边缘计算的通用视觉服务策略,提出了一种基于自适应压缩卸载的通信高效的边缘推理部署体系结构。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景ImageNet

BaselineJPEG、MobileNet

评价指标mAP、accuracy、classification accuracy

信道与工作点全文未稳定定位

数据集为ImageNet;实验小节中明确出现的比较对象包括JPEG、MobileNet;指标包括mAP、accuracy、classification accuracy。 PDF p.8

实验结果表明,我们提出的卸载模型和压缩策略优于其他算法,实现了显着的通信改善和性能增益。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 该文属于边界谱系,不能用它代表端到端语义通信主线。

Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing 架构/方法图
架构/方法图|来源:《Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing》,原 PDF p.7,Fig. 2 The calculation process of attention weight matrixes for the spatial feature importance evaluation network。 核对论文
Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing 关键实验结果图/表
关键实验结果图/表|来源:《Adaptive Compression Offloading and Resource Allocation for Edge Vision Computing》,原 PDF p.10,Fig. 7 shows the to the strategy shown in 核对论文
核心纳入2024任务导向推理

Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems

DOI / IEEE 页面

作者Huiguo Gao; Guanding Yu; Yunlong Cai

出版信息Vol. 10 · No. 1 · pp. 150-163

DOI / IEEE ID10.1109/tccn.2023.3315386 / 10251411

通信位置数字语义编码与物理层接口

一句话主旨:Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems 面向任务导向推理,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:尽管上述语义通信系统在特定信道条件下表现出了优异的性能,但仍需要越来越深入的研究来进一步提高时变信道上无线传输的频谱效率。 PDF p.1
  2. 仍然存在的问题:然而,在面向任务的语义通信系统中,由于神经网络的纠错能力,不完美的传输仍然可以导致语义任务的良好推理性能。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:针对这一问题,本文提出了一种新的自适应调制和重传方案,以在保证语义任务性能的同时最大化频谱效率。 PDF p.1
  6. 方案为何可能有效:具体来说,我们首先引入语义通信系统中的鲁棒性验证问题来分析神经网络推理的鲁棒性。 PDF p.1
  7. 作者希望证明什么:这是因为附加的纠错编码可以在编码系统中比在未编码系统中实现低得多的BER。 PDF p.11

方法与端到端信息流

在本文中,我们提出了新的自适应调制和重传方案,以最大限度地提高频谱效率,同时保证语义任务的性能。具体来说,我们首先引入语义通信系统的鲁棒性验证问题,分析神经网络推理的鲁棒性。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems:在本文中,我们提出了新的自适应调制和重传方案,以最大限度地提高频谱效率,同时保证语义任务的性能。具体来说,我们首先引入语义通信系统的鲁棒性验证问题,分析神经网络推理的鲁棒性。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

这里量化数K的选择遵循保证可接受的计算复杂度和存储容量的原则,同时量化损失可以忽略不计。 独立判断:Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.3

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

具体来说,我们利用瑞利衰落和信道增益建模为一个复杂的随机高斯向量。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.8

语义 decoder 实际面对的是:自适应调制后的可能有误语义数据,或经重传合并/信道译码后的语义变量。 PDF p.8

是否真正处理离散变量出错:是:作者以任务鲁棒概率而非零 BER 为调制选择约束,并在恶劣信道下显式设计重传与合并。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineLDPC、Huffman

评价指标accuracy、classification accuracy、BER、PER

信道与工作点Rayleigh、channel estimation、SNR = 0dB、SNR = 20dB

实验小节中明确出现的比较对象包括LDPC、Huffman;指标包括accuracy、classification accuracy、BER、PER;信道/链路条件包括Rayleigh、channel estimation;正文可定位的代表性工作点有SNR = 0dB、SNR = 20dB。 PDF p.9

这是因为附加的纠错编码可以在编码系统中比在未编码系统中实现低得多的BER。 PDF p.11

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:主要局限取决于训练/测试分布、信道假设和系统开销是否完整公开。

Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems 架构/方法图
架构/方法图|来源:《Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems》,原 PDF p.12,Fig. 8 Average transmission rates of the proposed adaptive MCS and coded 核对论文
Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems 关键实验结果图/表
关键实验结果图/表|来源:《Adaptive Modulation and Retransmission Scheme for Semantic Communication Systems》,原 PDF p.8,Fig. 5 shows the detailed structure of NNs at has an excellent performance。 核对论文
核心纳入2024图像传输、压缩或生成

DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication

DOI / IEEE 页面

作者Wenyu Zhang; Kaiyuan Bai; Sherali Zeadally; Haijun Zhang; Hua Shao; Hui Ma; Victor C. M. Leung

出版信息Vol. 10 · No. 2 · pp. 387-402

DOI / IEEE ID10.1109/tccn.2023.3326302 / 10288558

通信位置多用户接入、广播或中继

一句话主旨:DeepMA 面向图像传输、压缩或生成,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“有限星座/标准数字波形接口”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信是一种利用深度学习模型实现端到端(E2E)通信过程的新范式,最近的研究表明,与传统通信方案相比,语义通信在低信噪比(SNR)条件下能够实现更好的抗噪声能力。 PDF p.1
  2. 仍然存在的问题:为了实现语义通信中的多址接入,通过训练具有联合信源信道编码(JSCC)和正交信号调制(OFDM)能力的语义通信模型,提出了一种基于深度学习的多址接入(DeepMA)方法。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了实现语义通信中的多址接入,通过训练具有联合信源信道编码(JSCC)和正交信号调制(OFDM)能力的语义通信模型,提出了一种基于深度学习的多址接入(DeepMA)方法。 PDF p.1
  6. 方案为何可能有效:基于上述原因,我们必须开发一种特定的、低成本的同频多址语义通信方法。 PDF p.2
  7. 作者希望证明什么:实验结果表明,DeepMA能够实现高效、灵活和隐私保护的信道复用过程,与传统的多址接入方案相比,该方案具有相当的带宽效率。 PDF p.1

方法与端到端信息流

为了实现语义通信中的多址接入,我们提出了一种基于深度学习的多址接入方法(DeepMA),即通过训练具有联合信源信道编码(JSCC)和正交信号调制(OFDM)能力的语义通信模型来实现语义通信中的多址接入,为此,我们必须开发一种特定的、低成本的语义通信同频多址接入方法。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 DeepMA:为了实现语义通信中的多址接入,我们提出了一种基于深度学习的多址接入方法(DeepMA),即通过训练具有联合信源信道编码(JSCC)和正交信号调制(OFDM)能力的语义通信模型来实现语义通信中的多址接入,为此,我们必须开发一种特定的、低成本的语义通信同频多址接入方法。
实际发送实际发送对象是有限星座符号、OFDM/OTFS 资源或受保护数据包。
信道信道作用方式按“类别 2:语义特征映射为调制符号或编码包”解释。
接收端接收端从均衡或 soft demodulation 后的符号,再恢复语义表示开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:有限星座/标准数字波形接口

学习式语义 feature;数字接口需由正文具体实现判定 独立判断:DeepMA 的主传输单位应归为“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.13

ImageNet的图像大小可以不同,因此我们使用center-crop操作将输入图像大小设置为128 × 128。 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 2:语义特征映射为调制符号或编码包

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 2:语义特征映射为调制符号或编码包”解释信道作用点。 本调研据此归为“类别 2:语义特征映射为调制符号或编码包”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景Kodak、ImageNet、CIFAR10、CIFAR100

BaselineJPEG、JPEG2000、BPG、LDPC、DeepMA、ADJSCC、JSCC、OFDM

评价指标PSNR、MSE、recall、PER

信道与工作点AWGN、Rayleigh、wireless channel、OFDM、fading channel

数据集为Kodak、ImageNet、CIFAR10、CIFAR100;实验小节中明确出现的比较对象包括JPEG、JPEG2000、BPG、LDPC、DeepMA、ADJSCC、JSCC、OFDM;指标包括PSNR、MSE、recall、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、OFDM、fading channel。 PDF p.10

实验结果表明,DeepMA能够实现高效、灵活和隐私保护的信道复用过程,与传统的多址接入方案相比,该方案具有相当的带宽效率。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication 架构/方法图
架构/方法图|来源:《DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication》,原 PDF p.4,Fig. 1 shows the basic framework of DeepMA, wherein Therefore, we has only one transmitter, but multiple the deep coding and modulation (DCM) process processes receivers。 核对论文
DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《DeepMA: End-to-End Deep Multiple Access for Wireless Image Transmission in Semantic Communication》,原 PDF p.12,Fig. 7 Comparison of the PSNR performances of DeepMA and ADJSCC on CIFAR100 data in the AWGN channel case。 核对论文
核心纳入2024任务导向推理

Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization

DOI / IEEE 页面

作者Yining Wang; Shujun Han; Xiaodong Xu; Haotai Liang; Rui Meng; Chen Dong; Ping Zhang

出版信息Vol. 10 · No. 4 · pp. 1175-1189

DOI / IEEE ID10.1109/tccn.2024.3375496 / 10466397

通信位置任务导向联合信源信道设计

一句话主旨:I-JSCC 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:针对不同数据类型的任务,设计了一种面向任务的语义通信系统,该系统将语义级信息和效能级性能相结合。 PDF p.1
  2. 仍然存在的问题:尽管语义通信在一定程度上提高了频谱利用率,但在面向任务的语义通信中,不加选择地传输语义信息仍会造成无线资源的浪费。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:为此,本文提出了一种面向任务语义通信的重要性感知的联合信源信道编码(I-JSCC)框架。 PDF p.1
  6. 方案为何可能有效:提出了一种重要性感知的语义资源分配问题,通过联合优化信道分配和特征选择向量,最大化所有用户的总TOSSE。 PDF p.1
  7. 作者希望证明什么:设计了一种联合语义信道传输机制(JSCT),通过选择性地传输任务重要性特征来降低通信开销。 PDF p.1

方法与端到端信息流

本文提出了一种面向任务的语义通信的重要性感知联合信源信道编码(I-JSCC)框架,通过联合优化信道分配和特征选择向量,建立了一个重要性感知语义资源分配问题,以最大化所有用户的总TOSSE。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 I-JSCC:本文提出了一种面向任务的语义通信的重要性感知联合信源信道编码(I-JSCC)框架,通过联合优化信道分配和特征选择向量,建立了一个重要性感知语义资源分配问题,以最大化所有用户的总TOSSE。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:I-JSCC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景CIFAR10、CIFAR100

BaselineResNet、PPO、JSCC、CLIP、OFDM

评价指标accuracy、QoE、latency、TOSSE

信道与工作点Rayleigh、wireless channel、OFDM

数据集为CIFAR10、CIFAR100;实验小节中明确出现的比较对象包括ResNet、PPO、JSCC、CLIP、OFDM;指标包括accuracy、QoE、latency、TOSSE;信道/链路条件包括Rayleigh、wireless channel、OFDM。 PDF p.9

设计了一种联合语义信道传输机制(JSCT),通过选择性地传输任务重要性特征来降低通信开销。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization 架构/方法图
架构/方法图|来源:《Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization》,原 PDF p.4,Fig. 1 The structure of importance-aware task-oriented semantic communication framework based on I-JSCC model。 核对论文
Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization 关键实验结果图/表
关键实验结果图/表|来源:《Feature Importance-Aware Task-Oriented Semantic Transmission and Optimization》,原 PDF p.12,Fig. 8 Comparison of the total TOSSE among K-PPO and baseline selection. algorithms under (a) different channel number; (b) different transmit power。 核对论文
核心纳入2024语义信息度量与理论

How to Evaluate Semantic Communications for Images With ViTScore Metric?

DOI / IEEE 页面

作者Tingting Zhu; Bo Peng; Jifan Liang; Tingchen Han; Hai Wan; Jingqiao Fu; Junjie Chen

出版信息Vol. 10 · No. 5 · pp. 1744-1758

DOI / IEEE ID10.1109/tccn.2024.3392803 / 10507167

通信位置语义信息理论与性能度量

一句话主旨:ViTScore 面向语义信息度量与理论,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(Semantic Communication,SC)被认为是下一代通信的一个新的范式转变,其主要关注的是从精确的比特传输转向有效的语义信息交换。 PDF p.1
  2. 仍然存在的问题:然而,现有的图像语义相似性度量方法并不适用于图像语义相似性的评价。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:为了解决这个问题,灵感来自BERTScore在NLP社区,我们提出了一种新的度量图像语义相似性,命名为视觉Transformer分数(ViTScore)。 PDF p.1
  6. 方案为何可能有效:我们利用基于GAN的SC系统模型,这将在第IV-D节中详细描述。 PDF p.2
  7. 作者希望证明什么:特别是,ViTScore在评估语义攻击引起的图像语义变化方面优于其他3个典型指标,例如使用生成对抗网络(GANs)进行图像逆。 PDF p.1

方法与端到端信息流

为了解决这一问题,我们在自然语言处理领域的BERTScore的启发下,提出了一种新的图像语义相似性度量方法--视觉Transformer评分(ViTScore),该方法采用了一种基于GAN-based的SC SYSTEM模型。 PDF p.1 PDF p.2

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 ViTScore:为了解决这一问题,我们在自然语言处理领域的BERTScore的启发下,提出了一种新的图像语义相似性度量方法--视觉Transformer评分(ViTScore),该方法采用了一种基于GAN-based的SC SYSTEM模型。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:ViTScore 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景Kodak、DIV2K、COCO、ImageNet、CelebA、Set5、Set14、Urban100

BaselineDeepJSCC、NTSCC、JPEG、JPEG2000、BPG、LDPC、ViT、GAN、VAE、VQ-VAE、ADJSCC、JSCC

评价指标PSNR、SSIM、MS-SSIM、LPIPS、mAP、accuracy、recall、BLEU、BERTScore、ViTScore

信道与工作点AWGN、Rayleigh、fading channel、SNR = 15dB

数据集为Kodak、DIV2K、COCO、ImageNet、CelebA、Set5、Set14、Urban100;实验小节中明确出现的比较对象包括DeepJSCC、NTSCC、JPEG、JPEG2000、BPG、LDPC、ViT、GAN、VAE、VQ-VAE、ADJSCC、JSCC;指标包括PSNR、SSIM、MS-SSIM、LPIPS、mAP、accuracy、recall、BLEU、BERTScore、ViTScore;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 15dB。 PDF p.9

特别是,ViTScore在评估语义攻击引起的图像语义变化方面优于其他3个典型指标,例如使用生成对抗网络(GANs)进行图像逆。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

How to Evaluate Semantic Communications for Images With ViTScore Metric? 架构/方法图
架构/方法图|来源:《How to Evaluate Semantic Communications for Images With ViTScore Metric?》,原 PDF p.7,Fig. 4 Intuitively, the semantic similarity between (c) and (d) is higher than that of for reference. The first pair of images (a) and (b) in 核对论文
How to Evaluate Semantic Communications for Images With ViTScore Metric? 关键实验结果图/表
关键实验结果图/表|来源:《How to Evaluate Semantic Communications for Images With ViTScore Metric?》,原 PDF p.4,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2024文本传输或语言任务

LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission

DOI / IEEE 页面

作者Yaru Zhao; Yi Yue; Shoulu Hou; Bo Cheng; Yakun Huang

出版信息Vol. 10 · No. 6 · pp. 2005-2018

DOI / IEEE ID10.1109/tccn.2024.3401712 / 10531769

通信位置生成式语义信源编码

一句话主旨:LaMoSC 面向文本传输或语言任务,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:这种方法已经被广泛地用于图像和视频传输,并显示出有希望的结果。 PDF p.1
  2. 仍然存在的问题:然而,仅仅依赖于通过这些方法从图像导出的单峰视觉特性可能导致在低信噪比(SNR)条件下解码的不准确性。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
  5. 本文提出什么:本文介绍了LaMoSC,一个语义通信系统驱动的大型语言模型(LLM),使用多模态特征来重建原始视觉信息,从而提高传输质量。 PDF p.1
  6. 方案为何可能有效:本文提出了一种大语言模型(LLM)驱动的语义通信系统LaMoSC,以提高重构的可靠性和传输质量,特别是在低信噪比的情况下。 PDF p.2
  7. 作者希望证明什么:LaMoSC在低SNR条件下(如4 dB)的性能分别优于Deep-JSCC和多级语义感知通信系统(MLSC)5.5%和2.6%。 PDF p.1

方法与端到端信息流

本文介绍了一种大语言模型(LLM)驱动的语义通信系统LaMoSC,该系统利用多模态特征来重构原始视觉信息,从而提高传输质量,并提出了一种大语言模型(LLM)驱动的语义通信系统LaMoSC,以提高重构的可靠性和传输质量,特别是在低信噪比条件下。 PDF p.1 PDF p.2

输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 LaMoSC:本文介绍了一种大语言模型(LLM)驱动的语义通信系统LaMoSC,该系统利用多模态特征来重构原始视觉信息,从而提高传输质量,并提出了一种大语言模型(LLM)驱动的语义通信系统LaMoSC,以提高重构的可靠性和传输质量,特别是在低信噪比条件下。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:LaMoSC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10、ADE20K

BaselineDeepJSCC、JPEG、BPG、ViT、JSCC、BERT、BLIP

评价指标PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、accuracy、latency、semantic similarity

信道与工作点全文未稳定定位

数据集为ImageNet、CIFAR-10、ADE20K;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、BPG、ViT、JSCC、BERT、BLIP;指标包括PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、accuracy、latency、semantic similarity。 PDF p.9

LaMoSC在低SNR条件下(如4 dB)的性能分别优于Deep-JSCC和多级语义感知通信系统(MLSC)5.5%和2.6%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission 架构/方法图
架构/方法图|来源:《LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission》,原 PDF p.5,Fig. 2 System overview of proposed LaMoSC。 核对论文
LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission 关键实验结果图/表
关键实验结果图/表|来源:《LaMoSC: Large Language Model-Driven Semantic Communication System for Visual Transmission》,原 PDF p.10,Fig. 6 Comparisons with various SNR values in terms of (a) PSNR, (b) MS-SSIM, and (c) LPIPS on CIFAR-10。 核对论文
核心纳入2024图像传输、压缩或生成

SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding

DOI / IEEE 页面

作者Haoyuan Pan; Shuai Yang; Tse-Tin Chan; Zhaorui Wang; Victor C. M. Leung; Jianqiang Li

出版信息Vol. 10 · No. 4 · pp. 1160-1174

DOI / IEEE ID10.1109/tccn.2024.3375506 / 10466358

通信位置多用户接入、广播或中继

一句话主旨:SC-PNC 面向图像传输、压缩或生成,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:本文提出了第一个框架语义通信(SC)授权的物理层网络编码(PNC),简称为SC-PNC。 PDF p.1
  2. 仍然存在的问题:随着智能设备数量的指数增长,这些智能设备之间的无线通信产生了前所未有的数据量,使得无线频谱资源成为实现有效信息交换的重要瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这些问题,本文设计了SC-PNC,它利用语义通信绕过需要在目的地的位完美的消息恢复。 PDF p.1
  6. 方案为何可能有效:具体地,设计了SC-PNC TriRN架构,其中每个节点仅在两个时隙中接收来自其他两个节点的信息。 PDF p.1
  7. 作者希望证明什么:以图像传输为例,实验结果表明,SC-PNC在不同信道条件和相对相位偏移下,均能获得稳定的高质量图像重建,优于传统的位定向图像重建算法。 PDF p.1

方法与端到端信息流

为了解决这些问题,本文设计了SC-PNC,它利用语义通信,以绕过在目的地的比特完美的消息恢复的需要。具体来说,SC-PNC TriRN架构的设计,其中每个节点接收来自其他两个节点的信息,只有两个时隙。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SC-PNC:为了解决这些问题,本文设计了SC-PNC,它利用语义通信,以绕过在目的地的比特完美的消息恢复的需要。具体来说,SC-PNC TriRN架构的设计,其中每个节点接收来自其他两个节点的信息,只有两个时隙。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

学习式语义 feature;数字接口需由正文具体实现判定 独立判断:SC-PNC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

SC-PNC TWRN的信道带宽比被设置为Psc = 1/3。 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

图10(a)和(B)分别绘制了在AWGN信道和瑞利衰落信道下不同方案的分类精度。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.13

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.13

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景MNIST

BaselineViT

评价指标PSNR、MSE、accuracy、recall、latency、classification accuracy、BER、PER

信道与工作点AWGN、Rayleigh、wireless channel、fading channel

数据集为MNIST;实验小节中明确出现的比较对象包括ViT;指标包括PSNR、MSE、accuracy、recall、latency、classification accuracy、BER、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、fading channel。 PDF p.9

以图像传输为例,实验结果表明,SC-PNC在不同信道条件和相对相位偏移下,均能获得稳定的高质量图像重建,优于传统的位定向图像重建算法。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding 架构/方法图
架构/方法图|来源:《SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding》,原 PDF p.13,Fig. 10 Classification accuracy performance of different schemes in (a) AWGN channels (zero relative phase offsets) and (b) Rayleigh fading channels with different channel bandwidth ratios。 核对论文
SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding 关键实验结果图/表
关键实验结果图/表|来源:《SC-PNC: Semantic Communication-Empowered Physical-Layer Network Coding》,原 PDF p.11,Fig. 7 PSNR performance of Conv-PNC, D-PNC, and our proposed SC-PNC TWRN under different SNRs when the relative phase offsets are (a) 0◦ , (b) 45◦ , and (c) 90◦ in AWGN channels, where SC-PNC TWRN transmits with a bandwidth ratio of ρsc = 1/3。 核对论文
核心纳入2024图像传输、压缩或生成

SCAN: Semantic Communication With Adaptive Channel Feedback

DOI / IEEE 页面

作者Guangyi Zhang; Qiyu Hu; Yunlong Cai; Guanding Yu

出版信息Vol. 10 · No. 5 · pp. 1759-1773

DOI / IEEE ID10.1109/tccn.2024.3394867 / 10510413

通信位置自适应联合信源信道编码

一句话主旨:SCAN 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:为了实现SCAN,我们首先通过在模型设计中利用信道状态信息(CSI)和噪声方差来开发一种用于多输入多输出(MIMO)信道的深度学习语义通信系统(DeepSC-MIMO)。 PDF p.1
  2. 仍然存在的问题:因此,无法保证每个图像的可靠传输,给语义通信系统带来了很大的不确定性。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为此,语义通信作为一种新的通信范式,已被视为6G通信中有前途的技术。 PDF p.1
  6. 方案为何可能有效:为了实现SCAN,我们首先通过在模型设计中利用信道状态信息(CSI)和噪声方差来开发一种用于多输入多输出(MIMO)信道的深度学习语义通信系统(DeepSC-MIMO)。 PDF p.1
  7. 作者希望证明什么:实验结果表明,所提方案可以显著地提高图像传输的可靠性,同时极大地降低了反馈开销。 PDF p.1

方法与端到端信息流

为此,语义通信作为一种新的通信范式,被认为是6G通信中的一种有前途的技术。为了实现SCAN,我们首先开发了一种支持深度学习的多输入多输出(MIMO)信道语义通信系统(DeepSC-MIMO),该系统在模型设计中利用了信道状态信息(CSI)和噪声方差。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SCAN:为此,语义通信作为一种新的通信范式,被认为是6G通信中的一种有前途的技术。为了实现SCAN,我们首先开发了一种支持深度学习的多输入多输出(MIMO)信道语义通信系统(DeepSC-MIMO),该系统在模型设计中利用了信道状态信息(CSI)和噪声方差。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SCAN 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

我们使用CIFAR 10数据集,其中包括50,000张大小为32 × 32 × 3的彩色图像(训练数据集)和10,000张图像(测试数据集)。 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

传输过程被建模为信道层,并且接收到的符号可以表示为m i = H(zi ; Hi,ni),其中ni表示AWGN的噪声样本。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.6

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.6

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CIFAR10

BaselineDeepSC、ADJSCC、JSCC、OFDM

评价指标PSNR、MSE、mAP、accuracy、latency、NMSE、BER

信道与工作点AWGN、MIMO、OFDM、fading channel、SNR = 6dB、SNR from -16 dB

数据集为CIFAR10;实验小节中明确出现的比较对象包括DeepSC、ADJSCC、JSCC、OFDM;指标包括PSNR、MSE、mAP、accuracy、latency、NMSE、BER;信道/链路条件包括AWGN、MIMO、OFDM、fading channel;正文可定位的代表性工作点有SNR = 6dB、SNR from -16 dB。 PDF p.3

实验结果表明,所提方案可以显著地提高图像传输的可靠性,同时极大地降低了反馈开销。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SCAN: Semantic Communication With Adaptive Channel Feedback 架构/方法图
架构/方法图|来源:《SCAN: Semantic Communication With Adaptive Channel Feedback》,原 PDF p.8,Fig. 5 Framework of the proposed performance evaluator。 核对论文
SCAN: Semantic Communication With Adaptive Channel Feedback 关键实验结果图/表
关键实验结果图/表|来源:《SCAN: Semantic Communication With Adaptive Channel Feedback》,原 PDF p.11,Fig. 7 Performance versus SNR comparison of DeepSC-MIMO and DJSCC under different CBR values。 核对论文
核心纳入2024语音/音频传输或识别

Speech Semantic Communication Based on Swin Transformer

DOI / IEEE 页面

作者Ziliang Zhou; Shilian Zheng; Jie Chen; Zhijin Zhao; Xiaoniu Yang

出版信息Vol. 10 · No. 3 · pp. 756-768

DOI / IEEE ID10.1109/tccn.2023.3345858 / 10371327

通信位置联合信源信道编码(JSCC)

一句话主旨:DeepSC-TS 面向语音/音频传输或识别,把问题放在“联合信源信道编码(JSCC)”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:实验结果表明,该算法能够有效地实现高质量的语音传输。 PDF p.3
  2. 仍然存在的问题:但其对不同信道环境的适应性有限,编码过程在提取语义信息时增加了语音信号的传输数据量。 PDF p.3
  3. 为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.3
  4. 为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.3
  5. 本文提出什么:提出了一种基于Transformer的端到端语音语义通信系统DeepSC-TS。 PDF p.1
  6. 方案为何可能有效:提出了语音语义通信系统的总体结构,其中Eα(·)和Dβ(·)分别表示语义编码器和语义解码器,C(·)表示物理信道,^ s表示接收端恢复的信号。 PDF p.4
  7. 作者希望证明什么:仿真结果表明,我们提出的DeepSC-TS在不同的信道环境中表现出出色的性能,它比现有的语音语义通信系统表现得更好。 PDF p.1

方法与端到端信息流

本文提出了一种基于Transformer的端到端语音语义通信系统DeepSC-TS,给出了该系统的总体结构,其中Eα(·)和Dβ(·)分别表示语义编码器和语义解码器,C(·)表示物理信道,^ s表示接收端恢复的信号。 PDF p.1 PDF p.4

输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 DeepSC-TS:本文提出了一种基于Transformer的端到端语音语义通信系统DeepSC-TS,给出了该系统的总体结构,其中Eα(·)和Dβ(·)分别表示语义编码器和语义解码器,C(·)表示物理信道,^ s表示接收端恢复的信号。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:DeepSC-TS 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.4

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.4 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

然后,我们讨论了在噪声(AWGN)、频率偏移和信道衰落(瑞利衰落)的影响下DeepSC-TS的仿真结果。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineTurbo、QAM、Swin Transformer、DeepSC、DeepSC-S

评价指标MSE、FLOPs、PESQ

信道与工作点AWGN、Rayleigh、fading channel、SNR = 1 dB、SNR = -12 dB、SNR = -8 dB、SNR = -3 dB、SNR = 3 dB、SNR = 6 dB、SNR = 8 dB

实验小节中明确出现的比较对象包括Turbo、QAM、Swin Transformer、DeepSC、DeepSC-S;指标包括MSE、FLOPs、PESQ;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 1 dB、SNR = -12 dB、SNR = -8 dB、SNR = -3 dB、SNR = 3 dB、SNR = 6 dB、SNR = 8 dB。 PDF p.8

仿真结果表明,我们提出的DeepSC-TS在不同的信道环境中表现出出色的性能,它比现有的语音语义通信系统表现得更好。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“联合信源信道编码(JSCC)”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Speech Semantic Communication Based on Swin Transformer 架构/方法图
架构/方法图|来源:《Speech Semantic Communication Based on Swin Transformer》,原 PDF p.4,Fig. 2 The overall structure of the proposed speech semantic communication system。 核对论文
Speech Semantic Communication Based on Swin Transformer 关键实验结果图/表
关键实验结果图/表|来源:《Speech Semantic Communication Based on Swin Transformer》,原 PDF p.9,Fig. 5 Performance of AWGN channel under different training SNR. (a) SDR metric, (b) PESQ metric, (c) MSE metric。 核对论文
核心纳入2025语义感知资源分配与网络优化

A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems

DOI / IEEE 页面

作者Hamid Amiriara; Mahtab Mirmohseni; Ahmed Elzanaty; Yi Ma; Rahim Tafazolli

出版信息Vol. 11 · No. 5 · pp. 2955-2969

DOI / IEEE ID10.1109/tccn.2025.3589577 / 11082318

通信位置通信安全与隐私

一句话主旨:PLS 面向语义感知资源分配与网络优化,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:在本文中,我们提出了一个物理层安全(PLS)框架的智能反射面(IRS)辅助集成传感和语义通信(ISASC)系统,多天线双功能语义基站(BS)服务于多个语义通信用户(SCU)和监视潜在的恶意传感目标(MST)在窃听者(EVE)的存在。 PDF p.1
  2. 仍然存在的问题:但是,集成这些技术会带来重大的安全挑战。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:在本文中,我们提出了一个物理层安全(PLS)框架的智能反射面(IRS)辅助集成传感和语义通信(ISASC)系统,多天线双功能语义基站(BS)服务于多个语义通信用户(SCU)和监视潜在的恶意传感目标(MST)在窃听者(EVE)的存在。 PDF p.1
  6. 方案为何可能有效:·提出了一个安全感知的IASC系统,该系统通过将AN和DSS结合作为PLS技术,来降低EVE和MST的安全风险。 PDF p.2
  7. 作者希望证明什么:具体地说,与通常采用的最大比传输(MRT)方法相比,所提出的方法将感知精度提高了5 dB。 PDF p.1

方法与端到端信息流

该文提出了一种智能反射面(IRS)辅助的集成感知和语义通信(IASC)系统的物理层安全(PLS)框架,其中多天线双功能语义基站(BS)服务于多个语义通信用户(SCU),并在存在窃听者(EVE)的情况下监控潜在的恶意感知目标(MST),本文的主要贡献可以概括为:·提出了一个安全感知的IASC系统,该系统通过将AN和DSS结合作为PLS技术来降低来自EVE和MST威胁的安全风险。 PDF p.1 PDF p.2

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 PLS:该文提出了一种智能反射面(IRS)辅助的集成感知和语义通信(IASC)系统的物理层安全(PLS)框架,其中多天线双功能语义基站(BS)服务于多个语义通信用户(SCU),并在存在窃听者(EVE)的情况下监控潜在的恶意感知目标(MST),本文的主要贡献可以概括为:·提出了一个安全感知的IASC系统,该系统通过将AN和DSS结合作为PLS技术来降低来自EVE和MST威胁的安全风险。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

连续 learned latent / channel symbol(DeepJSCC) 独立判断:PLS 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.3

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.3

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.3

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineBPG、DeepSC

评价指标accuracy、semantic similarity、PER

信道与工作点Rayleigh、Rician、IRS、SINR、MIMO、channel estimation

实验小节中明确出现的比较对象包括BPG、DeepSC;指标包括accuracy、semantic similarity、PER;信道/链路条件包括Rayleigh、Rician、IRS、SINR、MIMO、channel estimation。 PDF p.3

具体地说,与通常采用的最大比传输(MRT)方法相比,所提出的方法将感知精度提高了5 dB。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems 架构/方法图
架构/方法图|来源:《A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems》,原 PDF p.11,Fig. 3 Convergence behaviour of the proposed algorithm。 核对论文
A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems 关键实验结果图/表
关键实验结果图/表|来源:《A Physical Layer Security Framework for IRS-Assisted Integrated Sensing and Semantic Communication Systems》,原 PDF p.4,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025语义信息度量与理论

A Theory for Semantic Channel Coding With Many-to-One Source

DOI / IEEE 页面

作者Shuai Ma; Chuanhui Zhang; Huayan Qi; Hang Li; Yue Bi; Guangming Shi; Naofal Al-Dhahir

出版信息Vol. 11 · No. 6 · pp. 3618-3627

DOI / IEEE ID10.1109/tccn.2025.3544275 / 10897796

通信位置语义信息理论与性能度量

一句话主旨:A Theory for Semantic Channel Coding With Many-to-One Source 面向语义信息度量与理论,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信作为6G的潜在关键技术之一,目前仍处于起步阶段,存在许多问题,如语义熵定义、语义信道编码理论等。 PDF p.1
  2. 仍然存在的问题:为解决该问题,我们研究了语义信息测度和语义信道编码定理。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:具体地说,我们提出了一个语义熵定义,即在知识库中随机变量符号语义解释的不确定性,在给定的条件下,它可以转化为已有的语义熵定义。 PDF p.1
  6. 方案为何可能有效:具体地说,我们提出了一个语义熵定义,即在知识库中随机变量符号语义解释的不确定性,在给定的条件下,它可以转化为已有的语义熵定义。 PDF p.1
  7. 作者希望证明什么:最后,数值仿真验证了语义熵和语义信道编码定理的有效性。 PDF p.1

方法与端到端信息流

具体地说,我们提出了一个语义熵定义,即在知识库中随机变量符号语义解释的不确定性,在给定的条件下,它可以转化为现有的语义熵定义。在Shannon信息熵的帮助下,我们提出了一个更一般的语义熵的定义,并证明了一个典型的语义信道编码定理语义通信。 PDF p.1 PDF p.2

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 A Theory for Semantic Channel Coding With Many-to-One Source:具体地说,我们提出了一个语义熵定义,即在知识库中随机变量符号语义解释的不确定性,在给定的条件下,它可以转化为现有的语义熵定义。在Shannon信息熵的帮助下,我们提出了一个更一般的语义熵的定义,并证明了一个典型的语义信道编码定理语义通信。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:A Theory for Semantic Channel Coding With Many-to-One Source 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.6

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.6

语义 decoder 实际面对的是:非零 bit error rate 下的 many-to-one 语义信道输出(理论模型)。 PDF p.2 PDF p.6

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景CIFAR10、MNIST

BaselineResNet

评价指标accuracy、classification accuracy、PER

信道与工作点全文未稳定定位

数据集为CIFAR10、MNIST;实验小节中明确出现的比较对象包括ResNet;指标包括accuracy、classification accuracy、PER。 PDF p.6

最后,数值仿真验证了语义熵和语义信道编码定理的有效性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:主要局限取决于训练/测试分布、信道假设和系统开销是否完整公开。

A Theory for Semantic Channel Coding With Many-to-One Source 架构/方法图
架构/方法图|来源:《A Theory for Semantic Channel Coding With Many-to-One Source》,原 PDF p.7,Fig. 3 A task-oriented semantic communication system。 核对论文
A Theory for Semantic Channel Coding With Many-to-One Source 关键实验结果图/表
关键实验结果图/表|来源:《A Theory for Semantic Channel Coding With Many-to-One Source》,原 PDF p.8,Fig. 4 Performance of the MNIST N-classification task。 核对论文
核心纳入2025语音/音频传输或识别

Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications

DOI / IEEE 页面

作者Van-Tam Hoang; Van-Linh Nguyen; Rong-Guey Chang; Po-Ching Lin; Ren-Hung Hwang; Trung Q. Duong

出版信息Vol. 11 · No. 2 · pp. 1024-1040

DOI / IEEE ID10.1109/tccn.2025.3528891 / 10839056

通信位置通信安全与隐私

一句话主旨:SEMCOM 面向语音/音频传输或识别,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(SEMCOM)是一种新型通信模型,它利用神经网络或深度学习技术来传达数据的语义和上下文推理,而不是像传统传输模型那样传输完整的原始比特。 PDF p.1
  2. 仍然存在的问题:然而,这些过程非常容易受到对抗性攻击,因为没有加密的共享背景知识的性质和神经网络模型的脆弱性。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
  5. 本文提出什么:本文提出了两种针对SEMCOM的新的有针对性和无针对性的对抗性攻击,即信道反转攻击和朴素攻击。 PDF p.1
  6. 方案为何可能有效:所提出的方法选择性地传输对于预期传输任务重要的语义特征,并且在各种传输环境中,例如,视线(LoS)和非视线(NLoS)中,穿透若干扰动模式的效率。 PDF p.2
  7. 作者希望证明什么:因此,增强对抗训练和去除损失函数中的残差值是提高基于SECOMs的系统的复原力的直接解决方案。 PDF p.1

方法与端到端信息流

该文提出了两种针对SEMCOM的有针对性和无针对性的攻击方法,即信道反转攻击和朴素攻击,该方法选择性地传输对预定传输任务重要的语义特征,并在不同的传输环境下,如视线(LoS)和非视线(NLoS),穿透了几种扰动模式的有效性。 PDF p.1 PDF p.2

输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 SEMCOM:该文提出了两种针对SEMCOM的有针对性和无针对性的攻击方法,即信道反转攻击和朴素攻击,该方法选择性地传输对预定传输任务重要的语义特征,并在不同的传输环境下,如视线(LoS)和非视线(NLoS),穿透了几种扰动模式的有效性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SEMCOM 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

AWGN信道上针对性攻击的SDR分数与非针对性攻击相比降低到1.35倍。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.12

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.12

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselinePolar、VAE

评价指标MSE、accuracy、latency、PESQ

信道与工作点AWGN、Rayleigh、Rician、wireless channel、SNR = 8 dB、SNR = 0 dB、SNR = 20dB、SNR = 8dB

实验小节中明确出现的比较对象包括Polar、VAE;指标包括MSE、accuracy、latency、PESQ;信道/链路条件包括AWGN、Rayleigh、Rician、wireless channel;正文可定位的代表性工作点有SNR = 8 dB、SNR = 0 dB、SNR = 20dB、SNR = 8dB。 PDF p.10

因此,增强对抗训练和去除损失函数中的残差值是提高基于SECOMs的系统的复原力的直接解决方案。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications 架构/方法图
架构/方法图|来源:《Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications》,原 PDF p.5,Fig. 3 The overview of our proposed attacks on SEMCOM, where the meaning of input signals is altered due to adversarial attacks。 核对论文
Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Adversarial Attacks Against Shared Knowledge Interpretation in Semantic Communications》,原 PDF p.5,Fig. 3 The overview of our proposed attacks on SEMCOM, where the meaning of input signals is altered due to adversarial attacks。 核对论文
核心纳入2025任务导向推理

Conceptual Learning and Causal Reasoning for Semantic Communication

DOI / IEEE 页面

作者Dylan Wheeler; Balasubramaniam Natarajan

出版信息Vol. 11 · No. 6 · pp. 3669-3683

DOI / IEEE ID10.1109/tccn.2025.3543834 / 10896765

通信位置任务导向联合信源信道设计

一句话主旨:Conceptual Learning and Causal Reasoning for Semantic Communication 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信是一种向以意义为导向的交流的范式转变,这在很大程度上是由人工智能技术实现的。 PDF p.1
  2. 仍然存在的问题:然而,以自动化的方式学习这些概念空间是一个主要的挑战。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:为解决这些问题,本文提出了概念空间语义通信的两个主要创新。 PDF p.1
  6. 方案为何可能有效:概念空间提供可解释的低维语义变量,因果图把这些变量与任务目标连接起来,使接收端能够利用结构知识补偿信道造成的语义偏移。 PDF p.2
  7. 作者希望证明什么:仿真结果表明,该方法与传统通信技术相比,分类精度提高了40%,与传统方法相比,分类率降低了99%。 PDF p.1

方法与端到端信息流

发送端以 VAE 学习可解释的概念空间,并显式建模概念维度与任务变量之间的因果关系;接收端在受损语义变量上执行因果推理,恢复任务相关概念而非逐样本复刻。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Conceptual Learning and Causal Reasoning for Semantic Communication:发送端以 VAE 学习可解释的概念空间,并显式建模概念维度与任务变量之间的因果关系;接收端在受损语义变量上执行因果推理,恢复任务相关概念而非逐样本复刻。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Conceptual Learning and Causal Reasoning for Semantic Communication 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineQAM、VAE、BERT

评价指标mAP、accuracy、semantic similarity、classification accuracy、PER

信道与工作点AWGN、Rayleigh、fading channel、SNR of -20dB

实验小节中明确出现的比较对象包括QAM、VAE、BERT;指标包括mAP、accuracy、semantic similarity、classification accuracy、PER;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR of -20dB。 PDF p.9

仿真结果表明,该方法与传统通信技术相比,分类精度提高了40%,与传统方法相比,分类率降低了99%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Conceptual Learning and Causal Reasoning for Semantic Communication 架构/方法图
架构/方法图|来源:《Conceptual Learning and Causal Reasoning for Semantic Communication》,原 PDF p.2,Fig. 1 Block diagram of the proposed SCCS framework with reasoning。 核对论文
Conceptual Learning and Causal Reasoning for Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Conceptual Learning and Causal Reasoning for Semantic Communication》,原 PDF p.12,Fig. 7 Task accuracy vs SNR with and without reasoning。 核对论文
核心纳入2025图像传输、压缩或生成

Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior

DOI / IEEE 页面

作者Yishen Li; Xuechen Chen; Xiaoheng Deng; Jinsong Gui

出版信息Vol. 11 · No. 1 · pp. 105-117

DOI / IEEE ID10.1109/tccn.2024.3438371 / 10623367

通信位置自适应联合信源信道编码

一句话主旨:MS-SSIM 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:研究了分布式双视场景中信源为相关图像、信道独立的深度联合信源信道编码(JSCC)。 PDF p.1
  2. 仍然存在的问题:然而,现有的JSCC研究大多集中在点对点的通信场景,对多终端场景的探索有限,例如本文所考虑的分布式图像传输。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:研究了分布式双视场景中信源为相关图像、信道独立的深度联合信源信道编码(JSCC)。 PDF p.1
  6. 方案为何可能有效:此外,针对以往大多数研究对所有图像分配相同的带宽,忽略了图像间的差异性,本文设计了一种基于熵掩模的内容自适应可变速率模块。 PDF p.1
  7. 作者希望证明什么:实验结果表明,与现有的分布式JSCC算法相比,本文提出的多层信息融合模块和熵掩模模块能够有效地提高重建质量约1.0dB PSNR。 PDF p.1

方法与端到端信息流

本文研究了分布式双视角场景下的深度联合信源信道编码(JSCC),其中信源是相关图像,而信道是独立的;另外,针对以往大多数研究对所有图像分配相同的带宽,忽略了图像之间的差异,本文设计了一种基于熵掩码的内容自适应可变码率模块。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 MS-SSIM:本文研究了分布式双视角场景下的深度联合信源信道编码(JSCC),其中信源是相关图像,而信道是独立的;另外,针对以往大多数研究对所有图像分配相同的带宽,忽略了图像之间的差异,本文设计了一种基于熵掩码的内容自适应可变码率模块。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:MS-SSIM 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.8

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景KITTI

BaselineJPEG、JPEG2000、BPG、ViT、JSCC

评价指标PSNR、SSIM、MS-SSIM、MSE、mAP、FLOPs、PER

信道与工作点AWGN、SNR = 5 dB、SNR of 28.12 dB、SNR = 10 dB、compression ratio of 0.065

数据集为KITTI;实验小节中明确出现的比较对象包括JPEG、JPEG2000、BPG、ViT、JSCC;指标包括PSNR、SSIM、MS-SSIM、MSE、mAP、FLOPs、PER;信道/链路条件包括AWGN;正文可定位的代表性工作点有SNR = 5 dB、SNR of 28.12 dB、SNR = 10 dB、compression ratio of 0.065。 PDF p.8

实验结果表明,与现有的分布式JSCC算法相比,本文提出的多层信息融合模块和熵掩模模块能够有效地提高重建质量约1.0dB PSNR。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior 架构/方法图
架构/方法图|来源:《Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior》,原 PDF p.4,Fig. 2 Overview of the distributed content adaptive joint source-channel coding scheme with hyperprior model. The adaptive rate control is composed of entropy mask fe and hyperprior model. The information feature fusion module is integrated into the decoder gd 。 核对论文
Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior 关键实验结果图/表
关键实验结果图/表|来源:《Content Adaptive Distributed Joint Source-Channel Coding for Image Transmission With Hyperprior》,原 PDF p.9,Fig. 10 The PSNR comparison for different schemes in fixed CR = 0.065 with different CSNR。 核对论文
核心纳入2025图像传输、压缩或生成

Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications

DOI / IEEE 页面

作者Joonho Seon; Seongwoo Lee; Soo Hyun Kim; Young Ghyu Sun; Hyowoon Seo; Dong In Kim; Jin Young Kim

出版信息Vol. 11 · No. 6 · pp. 3655-3668

DOI / IEEE ID10.1109/tccn.2025.3549782 / 10919137

通信位置任务导向联合信源信道设计

一句话主旨:DRL 面向图像传输、压缩或生成,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:在第六代(6G)无线通信系统中,语义通信(SC)的目的是提高数据传输速率和处理效率。 PDF p.1
  2. 仍然存在的问题:然而,这些系统通常具有缺乏考虑动态压缩和非线性信道效应的局限性。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为此,提出了两种动态压缩策略,并对每种策略中的有利情况进行了评估。 PDF p.1
  6. 方案为何可能有效:第二节概述了提议的系统模型。 PDF p.3
  7. 作者希望证明什么:仿真结果表明,在衰落信道条件下,与现有方法相比,所提出的SC系统可分别降低约40%的计算复杂度和提高约20%的平均性能。 PDF p.1

方法与端到端信息流

为此,提出了两种动态压缩策略,并对每种策略的有利情况进行了评估。第二节概述了所提出的系统模型。 PDF p.1 PDF p.3

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 DRL:为此,提出了两种动态压缩策略,并对每种策略的有利情况进行了评估。第二节概述了所提出的系统模型。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:DRL 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

在各种信道条件下进行了仿真,包括AWGN,瑞利和莱斯信道。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.10

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineDeepJSCC、JPEG、LDPC、Turbo、QAM、VAE、SwinJSCC、JSCC

评价指标PSNR、accuracy、FLOPs、classification accuracy、PER

信道与工作点AWGN、Rayleigh、Rician、fading channel

实验小节中明确出现的比较对象包括DeepJSCC、JPEG、LDPC、Turbo、QAM、VAE、SwinJSCC、JSCC;指标包括PSNR、accuracy、FLOPs、classification accuracy、PER;信道/链路条件包括AWGN、Rayleigh、Rician、fading channel。 PDF p.9

仿真结果表明,在衰落信道条件下,与现有方法相比,所提出的SC系统可分别降低约40%的计算复杂度和提高约20%的平均性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications 架构/方法图
架构/方法图|来源:《Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications》,原 PDF p.4,Fig. 1 Schematics of the DRL-SC system: (a) First strategy (dimensionality reduction in feature space) at the transmitter, (b) Second strategy (segment selection in the data domain) at the transmitter, (c) DRL-SC receiver。 核对论文
Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Deep Reinforced Feature Compression and Channel Equalization for Semantic Communications》,原 PDF p.11,Fig. 13 Task performance comparison with different K-factors。 核对论文
核心纳入2025图像传输、压缩或生成

Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission

DOI / IEEE 页面

作者Yunqi Feng; Zhendong Shan; Hesheng Shen; Xiufang Shi; Qianqian Yang; Jiming Chen

出版信息Vol. 11 · No. 5 · pp. 3361-3370

DOI / IEEE ID10.1109/tccn.2025.3533008 / 10851324

通信位置数字语义编码与物理层接口

一句话主旨:DiSeLCE 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:与传统的基于比特的方案相比,基于语义通信(SemCom)的图像传输方案由于其固有的抗信道噪声的鲁棒性而实现了传输数据量的显著减少,同时在有限数据的条件下保持了优异的图像质量。 PDF p.1
  2. 仍然存在的问题:然而,大多数现有的SemCom系统基于模拟通信范例,允许在信道上传输任意复数值。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:本文针对数字通信系统的局限性,提出了一种基于可学习信道估计器(DiSeLCE)的端到端数字SemCom系统。 PDF p.1
  6. 方案为何可能有效:受上述讨论的启发,本文介绍了一种用于OFDM传输的具有可学习信道估计器(DiSeLCE)的数字SemCom系统。 PDF p.2
  7. 作者希望证明什么:实验结果表明,DiSeLCE算法在频率选择性衰落信道下具有良好的性能,即使在低信噪比(SNR)条件下也能实现高效的图像传输。 PDF p.1

方法与端到端信息流

本文针对数字通信系统的局限性,提出了一种基于可学习信道估计器(DiSeLCE)的端到端数字SemCom系统,并在此基础上,提出了一种基于可学习信道估计器的数字SemCom系统。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 DiSeLCE:本文针对数字通信系统的局限性,提出了一种基于可学习信道估计器(DiSeLCE)的端到端数字SemCom系统,并在此基础上,提出了一种基于可学习信道估计器的数字SemCom系统。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

此外,我们采用了软到硬量化方法,有效地减轻了由于量化映射模型梯度的不连续性。 独立判断:DiSeLCE 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.6

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

我们将语义特征F作为查询,而星座图中具有不同调制方案(例如,16 QAM、64 QAM)的星座点作为键和值。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 这些传统信道编码/调制条目若只属于 baseline,不改变所提语义接收机默认可靠输入的分类。 PDF p.5

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.5

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景Kodak

BaselineResNet、JSCC、OFDM

评价指标PSNR、SSIM、MSE、mAP、accuracy、PER

信道与工作点OFDM、channel estimation、fading channel

数据集为Kodak;实验小节中明确出现的比较对象包括ResNet、JSCC、OFDM;指标包括PSNR、SSIM、MSE、mAP、accuracy、PER;信道/链路条件包括OFDM、channel estimation、fading channel。 PDF p.6

实验结果表明,DiSeLCE算法在频率选择性衰落信道下具有良好的性能,即使在低信噪比(SNR)条件下也能实现高效的图像传输。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission 架构/方法图
架构/方法图|来源:《Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission》,原 PDF p.3,Fig. 1 The proposed digital SemCom system for image transmission, where the blue arrow represents the forward process and the red arrow represents the gradient backward propagation。 核对论文
Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission 关键实验结果图/表
关键实验结果图/表|来源:《Digital Semantic Communication System With a Learnable Channel Estimator for OFDM Transmission》,原 PDF p.7,Fig. 5 (a) PSNR and (b) SSIM performance comparison versus various 核对论文
核心纳入2025图像传输、压缩或生成

Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization

DOI / IEEE 页面

作者Lei Guo; Wei Chen; Yuxuan Sun; Bo Ai

出版信息Vol. 11 · No. 4 · pp. 2499-2511

DOI / IEEE ID10.1109/tccn.2024.3510586 / 10772628

通信位置数字语义编码与物理层接口

一句话主旨:Digital-SC 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信是一种智能通信范式,旨在通过深度学习技术来传输语义领域中的有用信息。 PDF p.1
  2. 仍然存在的问题:然而,在频谱资源有限的情况下,要满足这些应用的严格服务要求,例如大规模连接、实时数据传输和处理等,是极具挑战性的。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为此,提出了一种数字语义通信系统,该系统由一个部署在资源受限设备上的编码网络和一个部署在边缘的解码网络组成。 PDF p.1
  6. 方案为何可能有效:为此,提出了一种数字语义通信系统,该系统由一个部署在资源受限设备上的编码网络和一个部署在边缘的解码网络组成。 PDF p.1
  7. 作者希望证明什么:我们还引入了一个语义学习损失(SLL)功能,以减少语义错误。 PDF p.1

方法与端到端信息流

在本文中,我们提出了一个数字语义通信系统,它包括一个部署在资源有限的设备上的编码网络和一个部署在边缘的解码网络。此外,为了使一个更灵活和自适应的量化过程,所提出的非线性量化函数自适应地学习量化间隔的数据分布,反映星座图上的点的密度。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Digital-SC:在本文中,我们提出了一个数字语义通信系统,它包括一个部署在资源有限的设备上的编码网络和一个部署在边缘的解码网络。此外,为了使一个更灵活和自适应的量化过程,所提出的非线性量化函数自适应地学习量化间隔的数据分布,反映星座图上的点的密度。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从可能出错或缺失的离散 bit/token/index(或其 soft estimate)开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

为了获得更好的数字传输的语义表示,提出了一种新的非线性量化模块,有效地与可训练的量化水平的语义特征。 独立判断:Digital-SC 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

因此,我们将无噪声信道下的网络和AWGN信道下的网络之间的“软”信息中的差距纳入SLL中。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.7

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.7

是否真正处理离散变量出错:是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10

BaselineBPG、QAM、ResNet、JSCC、BERT

评价指标accuracy、FLOPs、classification accuracy、BER

信道与工作点AWGN、wireless channel、BSC、at 6dB SNR、at 3dB SNR、at 12dB SNR、BER = 0.1、BER = 0.01

数据集为ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括BPG、QAM、ResNet、JSCC、BERT;指标包括accuracy、FLOPs、classification accuracy、BER;信道/链路条件包括AWGN、wireless channel、BSC;正文可定位的代表性工作点有at 6dB SNR、at 3dB SNR、at 12dB SNR、BER = 0.1、BER = 0.01。 PDF p.8

我们还引入了一个语义学习损失(SLL)功能,以减少语义错误。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:错误模型仍主要来自仿真;码本规模、包头/FEC、真实调制和 burst error 是否与训练分布一致,需要原型或真实链路验证。

Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization 架构/方法图
架构/方法图|来源:《Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization》,原 PDF p.5,Fig. 3 The architecture of the TRB. nication system. The feature map in gray is pruned, and the white one is retained。 核对论文
Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization 关键实验结果图/表
关键实验结果图/表|来源:《Digital-SC: Digital Semantic Communication With Adaptive Network Split and Learned Non-Linear Quantization》,原 PDF p.11,Fig. 10 Comparison between our method and the other digital semantic communication in image reconstruction tasks under 16-QAM。 核对论文
核心纳入2025语音/音频传输或识别

EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission

DOI / IEEE 页面

作者Kaiwen Tan; Haitao Zhao; Yichi Zhang; Kuo Cao; Peng Luo; Yuyuan Zhang; Jibo Wei

出版信息Vol. 11 · No. 6 · pp. 3684-3697

DOI / IEEE ID10.1109/tccn.2025.3543387 / 10891727

通信位置任务导向联合信源信道设计

一句话主旨:EESC-S 面向语音/音频传输或识别,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:近年来,基于深度学习的语义通信技术在提高语义信息传输效率方面的研究取得了丰硕的成果。 PDF p.1
  2. 仍然存在的问题:语音传输是语义通信的重要应用,而语音中所包含的情感对于准确理解说话人(即发送者)是非常重要的。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
  5. 本文提出什么:本文提出了一种基于情感信息辅助的语音语义通信框架。 PDF p.1
  6. 方案为何可能有效:具体地说,情感-语义融合机制被设计成增强接收机处的内容和情感之间的相关性。 PDF p.1
  7. 作者希望证明什么:实验以悬臂梁系统为分析对象,与传统框架进行对比分析,实验结果表明,该框架能够显著提高语音传输性能。 PDF p.1

方法与端到端信息流

本文提出了一种基于情感信息的语音语义通信框架,设计了情感-语义融合机制,以增强接收端语音内容与情感之间的相关性。 PDF p.1

输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 EESC-S:本文提出了一种基于情感信息的语音语义通信框架,设计了情感-语义融合机制,以增强接收端语音内容与情感之间的相关性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:EESC-S 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景LibriSpeech

BaselineDeepJSCC、LDPC、Turbo、QAM、Swin Transformer、DeepSC、DeepSC-S、JSCC、OFDM

评价指标MSE、mAP、accuracy、precision、FLOPs、PESQ、SER、PER

信道与工作点AWGN、Rayleigh、Rician、wireless channel、MIMO、OFDM、fading channel

数据集为LibriSpeech;实验小节中明确出现的比较对象包括DeepJSCC、LDPC、Turbo、QAM、Swin Transformer、DeepSC、DeepSC-S、JSCC、OFDM;指标包括MSE、mAP、accuracy、precision、FLOPs、PESQ、SER、PER;信道/链路条件包括AWGN、Rayleigh、Rician、wireless channel、MIMO、OFDM、fading channel。 PDF p.9

实验以悬臂梁系统为分析对象,与传统框架进行对比分析,实验结果表明,该框架能够显著提高语音传输性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission 架构/方法图
架构/方法图|来源:《EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission》,原 PDF p.5,Fig. 2 The structure of the proposed multi-scale CBAM block. min Ltotal = λLemotion + (1 - λ)Lsemantic . (13) where λ is the coefficient to balance Lsemantic and Lemotion 。 核对论文
EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission 关键实验结果图/表
关键实验结果图/表|来源:《EESC-S: An Emotion-Enhanced Semantic Communication Framework for Speech Transmission》,原 PDF p.9,Fig. 8 The feature map visualization of the emotion representation in SER network。 核对论文
核心纳入2025通用语义通信系统

Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications

DOI / IEEE 页面

作者Yinchao Yang; Jingxuan Zhou; Zhaohui Yang; Mohammad R. Shikh-Bahaei

出版信息Vol. 11 · No. 5 · pp. 3062-3078

DOI / IEEE ID10.1109/tccn.2025.3592294 / 11096081

通信位置通信安全与隐私

一句话主旨:NF-ISCSC 面向通用语义通信系统,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:该框架考虑了多个通信用户和由一系列散射点组成的扩展目标的影响。 PDF p.1
  2. 仍然存在的问题:然而,语义通信对信道条件的敏感性强调了对自适应解决方案的需求。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:为此,流体天线(FA)提出,以协助NF-ISCSC系统,提供动态适应性的信道变化。 PDF p.1
  6. 方案为何可能有效:提出了一个联合优化问题,在考虑感知性能、计算约束和功率预算的同时,最大化数据速率。 PDF p.1
  7. 作者希望证明什么:新算法不仅减少了计算复杂度,同时能保持较高的性能。 PDF p.9

方法与端到端信息流

为此,流体天线(FA)被提出来协助NF-ISCSC系统,提供动态适应性的信道variation.A的联合优化问题,制定最大限度地提高数据速率,同时占传感性能,计算约束,和功率预算。 PDF p.1

输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 NF-ISCSC:为此,流体天线(FA)被提出来协助NF-ISCSC系统,提供动态适应性的信道variation.A的联合优化问题,制定最大限度地提高数据速率,同时占传感性能,计算约束,和功率预算。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

学习式语义 feature;数字接口需由正文具体实现判定 独立判断:NF-ISCSC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

当最大延迟为0.1 s,计算能力为1.1 × 102 cycles/bit时,语义保密率最高,但随着数据量的增加,语义保密率逐渐下降。 PDF p.14

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标MSE、accuracy、recall、latency、PER

信道与工作点Rayleigh

指标包括MSE、accuracy、recall、latency、PER;信道/链路条件包括Rayleigh。 PDF p.10

新算法不仅减少了计算复杂度,同时能保持较高的性能。 PDF p.9

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications 架构/方法图
架构/方法图|来源:《Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications》,原 PDF p.6,Fig. 3 Semantic communication flow in the FA-enabled NF-ISCSC system。 核对论文
Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications 关键实验结果图/表
关键实验结果图/表|来源:《Fluid Antenna-Enabled Near-Field Integrated Sensing, Computing, and Semantic Communication for Emerging Applications》,原 PDF p.13,Fig. 8 Semantic secrecy rate against number of antennas。 核对论文
核心纳入2025任务导向推理

GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture

DOI / IEEE 页面

作者Pengfei Ren; Jingjing Wang; Xiangwang Hou; Jianrui Chen; Chunxiao Jiang

出版信息Vol. 11 · No. 2 · pp. 700-711

DOI / IEEE ID10.1109/tccn.2024.3520132 / 10807235

通信位置语义信息理论与性能度量

一句话主旨:M-JSCC 面向任务导向推理,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:得益于非对称架构,解码器不再依赖于编码器,这使得它可以根据具体需求进行切换,以更好地适应不同的面向任务的场景。 PDF p.1
  2. 仍然存在的问题:然而,目前的SC系统主要依赖于基于卷积神经网络的对称架构,这不仅严重限制了网络的容量,而且导致编码器和解码器之间的高度耦合。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:在本文中,我们提出了一个非对称的端到端SC架构的基础上GAI,命名为掩蔽联合信源信道编码(M-JSCC)。 PDF p.1
  6. 方案为何可能有效:在M-JSCC中,我们更多地关注于编码器的设计,优先考虑语义信息的提取,而较少强调解码器。 PDF p.2
  7. 作者希望证明什么:在模型训练过程中,我们引入了一种掩蔽机制,提高了M-JSCC提取语义信息的性能,并增强了在各种信道条件下的鲁棒性。 PDF p.1

方法与端到端信息流

本文提出了一种基于GAI的非对称端到端SC结构,称为掩码联合信源信道编码(M-JSCC),M-JSCC主要关注编码器的设计,优先考虑语义信息的提取,而不太关注解码器。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 M-JSCC:本文提出了一种基于GAI的非对称端到端SC结构,称为掩码联合信源信道编码(M-JSCC),M-JSCC主要关注编码器的设计,优先考虑语义信息的提取,而不太关注解码器。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

连续 learned latent / channel symbol(DeepJSCC) 独立判断:M-JSCC 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.7

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.7

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.7

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景Kodak、DIV2K、ImageNet、CIFAR-10

BaselineDeepJSCC、WITT、JPEG、BPG、LDPC、Swin Transformer、JSCC

评价指标PSNR、SSIM、MS-SSIM、MSE、Top-1、Top-5、accuracy、latency、classification accuracy

信道与工作点AWGN、Rayleigh、SNR = 12 dB

数据集为Kodak、DIV2K、ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括DeepJSCC、WITT、JPEG、BPG、LDPC、Swin Transformer、JSCC;指标包括PSNR、SSIM、MS-SSIM、MSE、Top-1、Top-5、accuracy、latency、classification accuracy;信道/链路条件包括AWGN、Rayleigh;正文可定位的代表性工作点有SNR = 12 dB。 PDF p.7

在模型训练过程中,我们引入了一种掩蔽机制,提高了M-JSCC提取语义信息的性能,并增强了在各种信道条件下的鲁棒性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture 架构/方法图
架构/方法图|来源:《GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture》,原 PDF p.5,Fig. 2 The overall architecture of our M-JSCC for semantic-based image transmission。 核对论文
GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture 关键实验结果图/表
关键实验结果图/表|来源:《GAI-Enhanced Robust Semantic Communication With Asymmetric Architecture》,原 PDF p.9,Fig. 6 The results of experiment on the ImageNet dataset。 核对论文
核心纳入2025视频传输、生成或控制

Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks

DOI / IEEE 页面

作者Jiaxiang Wang; Yinchao Yang; Zhaohui Yang; Chongwen Huang; Mingzhe Chen; Zhaoyang Zhang; Mohammad Shikh-Bahaei

出版信息Vol. 11 · No. 2 · pp. 791-804

DOI / IEEE ID10.1109/tccn.2025.3529692 / 10841377

通信位置生成式语义信源编码

一句话主旨:SFMA 面向视频传输、生成或控制,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:本文研究了一种新的生成式人工智能(GAI)授权的多用户语义通信系统称为语义特征多址(SFMA)的视频传输,它包括一个基站(BS)和成对的用户。 PDF p.1
  2. 仍然存在的问题:然而,实现语义通信面临着一些挑战,如有效的语义信息提取,鲁棒性错误,跨设备的互操作性,并在多用户环境中管理语义干扰。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:因此,我们引入一个权重参数的SINR方程,以更好地代表系统的性能。 PDF p.1
  6. 方案为何可能有效:本文研究了一种新的生成式人工智能(GAI)授权的多用户语义通信系统称为语义特征多址(SFMA)的视频传输,它包括一个基站(BS)和成对的用户。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,我们的方法提高了传输速率高达24.8%,45.8%,和66.1%相比,固定功率非正交多址接入(F-NOMA),正交联合信源信道编码(O-JSCC),正交频分多址接入(OFDMA)计划,分别。 PDF p.1

方法与端到端信息流

因此,我们引入一个权重参数的SINR方程,以更好地代表系统的performance. This本文研究了一种新的生成人工智能(GAI)授权的多用户语义通信系统称为语义特征多址(SFMA)的视频传输,其中包括一个基站(BS)和成对的用户。 PDF p.1

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 SFMA:因此,我们引入一个权重参数的SINR方程,以更好地代表系统的performance. This本文研究了一种新的生成人工智能(GAI)授权的多用户语义通信系统称为语义特征多址(SFMA)的视频传输,其中包括一个基站(BS)和成对的用户。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SFMA 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

表征可用信道资源的压缩比被定义为γ = B/n,并且B是指信道带宽。 PDF p.4

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CIFAR-10

BaselineJSCC、OFDM

评价指标PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、accuracy、PER

信道与工作点AWGN、NOMA、SINR、MIMO、OFDM

数据集为CIFAR-10;实验小节中明确出现的比较对象包括JSCC、OFDM;指标包括PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、accuracy、PER;信道/链路条件包括AWGN、NOMA、SINR、MIMO、OFDM。 PDF p.9

仿真结果表明,我们的方法提高了传输速率高达24.8%,45.8%,和66.1%相比,固定功率非正交多址接入(F-NOMA),正交联合信源信道编码(O-JSCC),正交频分多址接入(OFDMA)计划,分别。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks 架构/方法图
架构/方法图|来源:《Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks》,原 PDF p.3,Fig. 2 The framework of GAI-enabled semantic video transmission in the SFMA system。 核对论文
Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks 关键实验结果图/表
关键实验结果图/表|来源:《Generative AI Empowered Semantic Feature Multiple Access (SFMA) Over Wireless Networks》,原 PDF p.11,Fig. 10 Performance comparison of LPIPS versus different SNR levels for improved channel conditional。 核对论文
相关但非核心2025综述、架构与研究路线

Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications

DOI / IEEE 页面

作者Xiaoqi Qin; Mengying Sun; Jincheng Dai; P. Ma; Yuecheng Cao; Jingjing Zhang; Jiacheng Wang; Xiaodong Xu; Ping Zhang; Dusit Niyato

出版信息Vol. 11 · No. 4 · pp. 2056-2077

DOI / IEEE ID10.1109/tccn.2025.3567613 / 10990238

通信位置语义信息理论与性能度量

一句话主旨:GenAI 面向综述、架构与研究路线,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:我们研究关键技术,如语义通信和GenAI启用的传输和网络的开创性应用程序,允许实时理解和执行高层意图,使用户意图与无线网络的集成。 PDF p.1
  2. 仍然存在的问题:现有的体验质量(QoE)建模方法通常受到用户意图和网络调整之间的弱相关性的影响。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:本文介绍了交互式无线网络中的一种创新范式,利用大语言模型(LLM)和生成式人工智能(GenAI)动态调整网络配置和传输策略与用户意图。 PDF p.1
  6. 方案为何可能有效:我们为支持GenAI的QoE建模方法提供了一个路线图,该方法在用户需求和网络配置之间创建了强耦合和直接映射。 PDF p.4
  7. 作者希望证明什么:曾获江苏省人民政府哲学社会科学优秀成果奖一等奖。 PDF p.22

方法与端到端信息流

本文介绍了交互式无线网络中的一种创新范式,利用大语言模型(LLM)和生成人工智能(GenAI)动态地将网络配置和传输策略与用户意图相匹配,并为基于GenAI的QoE建模方法提供了路线图,该方法在用户需求和网络配置之间创建了强耦合和直接映射。 PDF p.1 PDF p.4

输入输入是综述、架构与研究路线所需的已有语义通信系统、模型和网络机制。
发送端发送端采用 GenAI:本文介绍了交互式无线网络中的一种创新范式,利用大语言模型(LLM)和生成人工智能(GenAI)动态地将网络配置和传输策略与用户意图相匹配,并为基于GenAI的QoE建模方法提供了路线图,该方法在用户需求和网络配置之间创建了强耦合和直接映射。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类体系、架构总结与研究方向。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:GenAI 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.13

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.13

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.13

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标全文未稳定定位

信道与工作点AWGN、Rayleigh、wireless channel、channel estimation

该文属于综述/架构论文,不设置单一训练数据集、实验 baseline 或统一 SNR 工作点;页面中的技术名称按被综述对象处理,不冒充作者实验。 PDF p.13

曾获江苏省人民政府哲学社会科学优秀成果奖一等奖。 PDF p.22

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。 该文属于边界谱系,不能用它代表端到端语义通信主线。

Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications 架构/方法图
架构/方法图|来源:《Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications》,原 PDF p.2,Fig. 1 In addition, the abbreviations commonly used the completion of tasks aligned with these intentions. The throughout this survey are listed in 核对论文
Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications 关键实验结果图/表
关键实验结果图/表|来源:《Generative AI Meets Wireless Networking: An Interactive Paradigm for Intent-Driven Communications》,原 PDF p.3,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025图像传输、压缩或生成

Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks

DOI / IEEE 页面

作者Dongqing Liu; Yongwen Liu; Lei Zhang; Abdelhakim Hafid; Lyes Khoukhi; Mingyuan Li; Yutao Liu; Yadong Dong

出版信息Vol. 11 · No. 3 · pp. 1708-1722

DOI / IEEE ID10.1109/tccn.2025.3556751 / 10947007

通信位置生成式语义信源编码

一句话主旨:AI-Driven 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:最近的研究已经证明了RSMA在频谱效率、能量效率和可靠性方面的优势,特别是在管理TC 2025 IEEE方面。 PDF p.1
  2. 仍然存在的问题:然而,NOMA的固有局限性,包括在不完美的信道状态信息(CSI)和严格的用户信道条件要求下的大量性能下降,促使RSMA的发展。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:本文提出了一种集成速率分割多址接入(RSMA),语义通信和生成式AI的框架,用于优化下一代无线网络。 PDF p.1
  6. 方案为何可能有效:我们的框架包括一个多目标的性能评估,同时考虑传统的指标和语义准确性在多用户RSMA环境。 PDF p.1
  7. 作者希望证明什么:大量的仿真结果表明,我们提出的框架优于现有的方法在系统吞吐量,能源效率和语义保真度在各种网络场景和用户分布。 PDF p.1

方法与端到端信息流

本文提出了一个综合速率分割多址接入(RSMA)、语义通信和生成式人工智能的框架,用于优化下一代无线网络,该框架包括一个多目标性能评估,该评估在多用户RSMA环境中同时考虑了传统指标和语义准确性。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 AI-Driven:本文提出了一个综合速率分割多址接入(RSMA)、语义通信和生成式人工智能的框架,用于优化下一代无线网络,该框架包括一个多目标性能评估,该评估在多用户RSMA环境中同时考虑了传统指标和语义准确性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:AI-Driven 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景COCO、ImageNet、Cityscapes

BaselineResNet、DeepLab、PPO、SAC

评价指标bitrate、accuracy、PER

信道与工作点NOMA、SNR from 0 dB

数据集为COCO、ImageNet、Cityscapes;实验小节中明确出现的比较对象包括ResNet、DeepLab、PPO、SAC;指标包括bitrate、accuracy、PER;信道/链路条件包括NOMA;正文可定位的代表性工作点有SNR from 0 dB。 PDF p.9

大量的仿真结果表明,我们提出的框架优于现有的方法在系统吞吐量,能源效率和语义保真度在各种网络场景和用户分布。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks 架构/方法图
架构/方法图|来源:《Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks》,原 PDF p.12,Fig. 4 Sum rate comparison of RSMA, NOMA, and OMA schemes versus performance. SNR。 核对论文
Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks 关键实验结果图/表
关键实验结果图/表|来源:《Generative AI-Driven Incentive Mechanism for Semantic Communications in RSMA Networks》,原 PDF p.12,Fig. 4 Sum rate comparison of RSMA, NOMA, and OMA schemes versus performance. SNR。 核对论文
相关但非核心2025综述、架构与研究路线

Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications

DOI / IEEE 页面

作者Chengsi Liang; Hongyang Du; Yao Sun; Dusit Niyato; Jiawen Kang; Dezong Zhao; Muhammad Ali Imran

出版信息Vol. 11 · No. 1 · pp. 27-47

DOI / IEEE ID10.1109/tccn.2024.3435524 / 10614204

通信位置语义信息理论与性能度量

一句话主旨:AIGC 面向综述、架构与研究路线,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:生成式人工智能(GAI)已经成为一个迅速发展的领域,在智能和自动创建多样化内容方面表现出巨大的潜力。 PDF p.1
  2. 仍然存在的问题:语义通信(SemCom)已被认为是一个革命性的通信方案,以解决这一挑战,通过传达消息的含义,而不是比特再现。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:随后,我们提出了创新的生成水平和知识管理策略,在拟议的网络,包括知识的建设,更新和共享,确保准确和及时的基于知识的推理。 PDF p.1
  6. 方案为何可能有效:组织和我们在本文中的主要贡献可以概括为:·第二部分-我们主要提出了一个GAI驱动的SemCom框架,用于AIGC交付。 PDF p.3
  7. 作者希望证明什么:我们可以观察到,GAI驱动的SemCom系统的更优的性能在SNR从10到35 dB变化的情况下尤为明显,SSIM值迅速提高,在有利条件下展示了其卓越的性能。 PDF p.12

方法与端到端信息流

该文是架构/综述工作:它提出 GAI 驱动的语义通信网络分层框架,并按知识构建、更新、共享、生成式推理和资源编排组织现有技术,而不是给出单一可复现 codec。 PDF p.1 PDF p.3

输入输入是综述、架构与研究路线所需的已有语义通信系统、模型和网络机制。
发送端发送端采用 AIGC:该文是架构/综述工作:它提出 GAI 驱动的语义通信网络分层框架,并按知识构建、更新、共享、生成式推理和资源编排组织现有技术,而不是给出单一可复现 codec。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类体系、架构总结与研究方向。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:AIGC 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.13

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.13

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.13

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标全文未稳定定位

信道与工作点AWGN、Rayleigh、wireless channel、packet loss、HARQ、fading channel

该文属于综述/架构论文,不设置单一训练数据集、实验 baseline 或统一 SNR 工作点;页面中的技术名称按被综述对象处理,不冒充作者实验。 PDF p.13

我们可以观察到,GAI驱动的SemCom系统的更优的性能在SNR从10到35 dB变化的情况下尤为明显,SSIM值迅速提高,在有利条件下展示了其卓越的性能。 PDF p.12

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 该文属于边界谱系,不能用它代表端到端语义通信主线。

Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications 架构/方法图
架构/方法图|来源:《Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications》,原 PDF p.6,Fig. 2 Two types of GAI models for information creation: unimodal and multimodal. Unimodal GAI models specialize in processing a single type of data, while multimodal GAI models integrate and interpret multiple data types。 核对论文
Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications 关键实验结果图/表
关键实验结果图/表|来源:《Generative AI-Driven Semantic Communication Networks: Architecture, Technologies, and Applications》,原 PDF p.7,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2025语义信息度量与理论

Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks

DOI / IEEE 页面

作者Yuyi Sun; Fangyuan Xing; Zhenwei Guo; Huimin Chen; Shibo He

出版信息Vol. 11 · No. 6 · pp. 3698-3710

DOI / IEEE ID10.1109/tccn.2025.3544282 / 10897808

通信位置语义信息理论与性能度量

一句话主旨:SemCom 面向语义信息度量与理论,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(SemCom)是一种以信息熵代替原始数据进行信息传输的有效方法,它可以提高信息传输的效率和鲁棒性。 PDF p.1
  2. 仍然存在的问题:然而,SemCom在工业网络中的适应性仍有待探索。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:SemCom最近对物联网(IoT)的研究引起了更多的关注。 PDF p.1
  6. 方案为何可能有效:具体而言,为了满足工业网络中各种节点的不同需求,构建了一种面向SemCom的异构网关规划架构。 PDF p.1
  7. 作者希望证明什么:实验结果表明,H-DQN算法的性能优于其他算法,部署的网关数量少,运算时间节省50%以上。 PDF p.1

方法与端到端信息流

SemCom是近年来物联网研究的热点,为了满足工业网络中不同节点的不同需求,本文构建了一种异构的SemCom网关规划架构。 PDF p.1

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 SemCom:SemCom是近年来物联网研究的热点,为了满足工业网络中不同节点的不同需求,本文构建了一种异构的SemCom网关规划架构。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SemCom 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineDQN

评价指标SSIM、mAP、throughput

信道与工作点SINR

实验小节中明确出现的比较对象包括DQN;指标包括SSIM、mAP、throughput;信道/链路条件包括SINR。 PDF p.8

实验结果表明,H-DQN算法的性能优于其他算法,部署的网关数量少,运算时间节省50%以上。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks 架构/方法图
架构/方法图|来源:《Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks》,原 PDF p.5,Fig. 2 The architecture of SemCom in industrial networks。 核对论文
Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks 关键实验结果图/表
关键实验结果图/表|来源:《Heterogeneous Gateway Planning for Semantic Communication in Industrial Networks》,原 PDF p.10,Fig. 4 SSIMs and the SNRs under different compression ratios (CR: compression ratio)。 核对论文
核心纳入2025图像传输、压缩或生成

Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications

DOI / IEEE 页面

作者Joohyuk Park; Yongjeong Oh; Seonjung Kim; Yo-Seb Jeon

出版信息Vol. 11 · No. 1 · pp. 75-89

DOI / IEEE ID10.1109/tccn.2024.3422496 / 10584091

通信位置数字语义编码与物理层接口

一句话主旨:Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:本文介绍了一个新的信道自适应数字语义通信的联合信源信道编码算法。 PDF p.1
  2. 仍然存在的问题:为了解决这一问题,我们首先提出了一种新的解调方法,该方法通过评估解调输出的不确定性来提高数字语义通信系统的鲁棒性。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为此,我们使用二进制对称擦除信道来建模编码器的输出和解码器的输入之间的关系,然后从不同的分布中采样这些信道的参数。 PDF p.1
  6. 方案为何可能有效:提出的方法包括三个新的组成部分:(i)鲁棒解调方法,(ii)鲁棒训练策略,和(iii)信道自适应调制技术。 PDF p.2
  7. 作者希望证明什么:我们还开发了一种用于推理阶段的信道自适应调制技术,以便在保持任务性能的同时减少通信延迟。 PDF p.1

方法与端到端信息流

为此,我们使用二进制对称擦除信道的编码器的输出和解码器的输入之间的关系建模,然后从不同的distribution. The所提出的方法包括三个新的组件采样这些信道的参数:(i)一个强大的解调方法,(ii)一个强大的训练策略,和(iii)一个信道自适应调制技术。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications:为此,我们使用二进制对称擦除信道的编码器的输出和解码器的输入之间的关系建模,然后从不同的distribution. The所提出的方法包括三个新的组件采样这些信道的参数:(i)一个强大的解调方法,(ii)一个强大的训练策略,和(iii)一个信道自适应调制技术。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从可能出错或缺失的离散 bit/token/index(或其 soft estimate)开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

当执行梯度反向传播时,我们排除了JSCC编码器之后的量化过程,因为该过程涉及不可微采样。 独立判断:Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.8

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

为此,我们使用二进制对称擦除信道来建模编码器的输出和解码器的输入之间的关系,然后从不同的分布中采样这些信道的参数。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.1

语义 decoder 实际面对的是:由 Binary Symmetric Erasure Channel 采样得到的受损 binary latent / demodulation output。 PDF p.1

是否真正处理离散变量出错:是:训练显式建模 bit flip 与 erasure,并利用解调不确定性提高数字 JSCC encoder/decoder 对信道和调制阶数变化的鲁棒性。

实验设置与主要结论

数据集/场景CIFAR-10、CIFAR-100、MNIST、Fashion-MNIST

BaselineDeepJSCC、JPEG、LDPC、QAM、JSCC

评价指标PSNR、MSE、mAP、accuracy、precision、latency、classification accuracy、BER

信道与工作点erasure、BSC、erasure channel、SNR = 5 dB、SNR = 1 dB

数据集为CIFAR-10、CIFAR-100、MNIST、Fashion-MNIST;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、LDPC、QAM、JSCC;指标包括PSNR、MSE、mAP、accuracy、precision、latency、classification accuracy、BER;信道/链路条件包括erasure、BSC、erasure channel;正文可定位的代表性工作点有SNR = 5 dB、SNR = 1 dB。 PDF p.9

我们还开发了一种用于推理阶段的信道自适应调制技术,以便在保持任务性能的同时减少通信延迟。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:主要局限取决于训练/测试分布、信道假设和系统开销是否完整公开。

Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications 架构/方法图
架构/方法图|来源:《Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications》,原 PDF p.11,Fig. 4 Comparison of the classification accuracies of various JSCC and non-JSCC approaches with 4-QAM for image classification tasks using the MNIST, Fashion-MNIST, and CIFAR-10 datasets。 核对论文
Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Joint Source-Channel Coding for Channel-Adaptive Digital Semantic Communications》,原 PDF p.12,Fig. 6 Comparison of the PSNRs and mAPs of various approaches with 4-QAM for the image reconstruction and retrieval tasks using the CIFAR-10 and CIFAR-100 datasets。 核对论文
核心纳入2025任务导向推理

Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization

DOI / IEEE 页面

作者Zhiyi Tian; Weiqi Wang; Chenhan Zhang; Shui Yu

出版信息Vol. 11 · No. 5 · pp. 3371-3383

DOI / IEEE ID10.1109/tccn.2025.3531461 / 10845211

通信位置任务导向联合信源信道设计

一句话主旨:MESC 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:提出了一种基于模型的面向任务的SemCom(MESC)模型,该模型通过参与者之间共享训练好的模型来建立SemCom。 PDF p.1
  2. 仍然存在的问题:然而,这一前提条件偏离了现实,因为建立共享数据集的成本是巨大的。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:提出了一种基于模型的面向任务的SemCom(MESC)模型,该模型通过参与者之间共享训练好的模型来建立SemCom。 PDF p.1
  6. 方案为何可能有效:具体地,我们假设每个通信参与者拥有一个非IID私有数据集。 PDF p.1
  7. 作者希望证明什么:大量实验结果表明,MESC的性能优于SemCom基准测试和传统编码方法,达到了最佳的通信性能。 PDF p.1

方法与端到端信息流

我们提出了一个模型使能的面向任务的SemCom(MESC),它通过在参与者之间共享训练好的模型来建立SemCom。具体地说,我们假设每个通信参与者拥有一个非IID的私有数据集。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 MESC:我们提出了一个模型使能的面向任务的SemCom(MESC),它通过在参与者之间共享训练好的模型来建立SemCom。具体地说,我们假设每个通信参与者拥有一个非IID的私有数据集。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:MESC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

作为比较,在衰落信道中,我们使用的神经网络架构在直接训练SVHN数据集时达到了94.80%的分类准确率,而我们的通信任务的准确率为91.02%。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CelebA、MNIST

BaselineDeepJSCC、JPEG、LDPC、GAN、ResNet、JSCC

评价指标PSNR、accuracy、FLOPs、classification accuracy

信道与工作点AWGN、Rayleigh、fading channel

数据集为CelebA、MNIST;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、LDPC、GAN、ResNet、JSCC;指标包括PSNR、accuracy、FLOPs、classification accuracy;信道/链路条件包括AWGN、Rayleigh、fading channel。 PDF p.8

大量实验结果表明,MESC的性能优于SemCom基准测试和传统编码方法,达到了最佳的通信性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization 架构/方法图
架构/方法图|来源:《Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization》,原 PDF p.2,Fig. 1 The architecture of proposed model-enabled semantic communication。 核对论文
Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization 关键实验结果图/表
关键实验结果图/表|来源:《Model-Enabled Task-Oriented Semantic Communications Through Knowledge Synchronization》,原 PDF p.10,Fig. 8 The PCA results of Deep JSCC and our method. The figure illustrates the results of reducing the semantic encodings encoded by different encoders to 2 dimensions. The results indicate that the semantic encoding of our method is more structured。 核对论文
核心纳入2025多模态检索与任务通信

Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach

DOI / IEEE 页面

作者Jian Liu; Ming Xiao; Jinbo Wen; Jiawen Kang; Ruichen Zhang; Tao Zhang; Dusit Niyato; Weiting Zhang; Ying Liu

出版信息Vol. 11 · No. 5 · pp. 3346-3360

DOI / IEEE ID10.1109/tccn.2025.3529747 / 10841385

通信位置生成式语义信源编码

一句话主旨:GDM 面向多模态检索与任务通信,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:此外,创成式人工智能(GAI)的最新进展通过其强大的创成能力进一步提高了SemCom的效率。 PDF p.1
  2. 仍然存在的问题:但用户仍需要从移动的AIGC服务提供商处下载大量AIGC输出,这使通信资源紧张,并增加了传输故障的风险。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:本文提出一种基于生成扩散模型(Generative Diffusion Model,GDM)的多模态SemCom(GM-SemCom)框架,利用该框架可以有效地解决多模态SemCom的建模问题。 PDF p.1
  6. 方案为何可能有效:此外,为了确保在我们提出的框架内的MASP和用户之间的高质量的AIGC服务,我们制定了一个Stackelberg游戏模型与MASP作为领导者和多个用户作为追随者。 PDF p.2
  7. 作者希望证明什么:数值实验结果表明,与传统的深度强化学习算法相比,该算法收敛速度更快,更接近Stackelberg均衡。 PDF p.1

方法与端到端信息流

本文提出了一个基于生成扩散模型(GDM)的多模态SemCom(GM-SemCom)框架,并建立了一个以MASP为领导者、多个用户为追随者的Stackelberg博弈模型,以保证框架内MASP和用户之间的高质量AIGC服务。 PDF p.1 PDF p.2

输入输入是多模态检索与任务通信所需的图像、文本或其他模态的任务特征。
发送端发送端采用 GDM:本文提出了一个基于生成扩散模型(GDM)的多模态SemCom(GM-SemCom)框架,并建立了一个以MASP为领导者、多个用户为追随者的Stackelberg博弈模型,以保证框架内MASP和用户之间的高质量AIGC服务。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为跨模态检索、匹配或联合推理结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:GDM 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CelebA、FFHQ

BaselineJPEG、JPEG2000、VAE、PPO、SAC、SSCC、GPT、OFDM

评价指标PSNR、SSIM、FID、MSE、mAP、accuracy、QoE、latency、energy efficiency

信道与工作点OFDM、SNR = 2 dB、SNR = 5 dB

数据集为CelebA、FFHQ;实验小节中明确出现的比较对象包括JPEG、JPEG2000、VAE、PPO、SAC、SSCC、GPT、OFDM;指标包括PSNR、SSIM、FID、MSE、mAP、accuracy、QoE、latency、energy efficiency;信道/链路条件包括OFDM;正文可定位的代表性工作点有SNR = 2 dB、SNR = 5 dB。 PDF p.9

数值实验结果表明,与传统的深度强化学习算法相比,该算法收敛速度更快,更接近Stackelberg均衡。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach 架构/方法图
架构/方法图|来源:《Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach》,原 PDF p.5,Fig. 2 The architecture of GDM-based multi-modal SemCom。 核对论文
Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach 关键实验结果图/表
关键实验结果图/表|来源:《Optimizing Resource Allocation for Multi-Modal Semantic Communication in Mobile AIGC Networks: A Diffusion-Based Game Approach》,原 PDF p.10,Fig. 3 Performance comparison of the proposed method with other compression algorithms in a channel with SNR = 2 dB。 核对论文
核心纳入2025图像传输、压缩或生成

Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE

DOI / IEEE 页面

作者Guangyi Zhang; Hanlei Li; Yunlong Cai; Qiyu Hu; Guanding Yu; Zhijin Qin

出版信息Vol. 11 · No. 6 · pp. 3640-3654

DOI / IEEE ID10.1109/tccn.2025.3546935 / 10907944

通信位置自适应联合信源信道编码

一句话主旨:PLIT 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:我们提出了一个新的框架称为渐进式学习图像传输(PLIT),利用分层变分自动编码器(VAE)催化语义通信。 PDF p.1
  2. 仍然存在的问题:PLIT通过自底向上和自顶向下路径采用自回归生成来创建传输图像的几个特征表示,有效地捕获上下文信息。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:我们提出了一个新的框架称为渐进式学习图像传输(PLIT),利用分层变分自动编码器(VAE)催化语义通信。 PDF p.1
  6. 方案为何可能有效:具体而言,PLIT可以将每个表示转换为不同数量的信道符号,由指示每个表示的熵的分层VAE的学习先验指导。 PDF p.1
  7. 作者希望证明什么:大量的实验表明,我们提出的方法优于现有的基准方法的率失真性能,并保持对信道噪声的鲁棒性能。 PDF p.1

方法与端到端信息流

我们提出了一种名为渐进学习图像传输(PLIT)的新框架,该框架利用分层变分自动编码器(VAE)来催化语义通信。具体来说,PLIT可以在分层VAE学习的先验信息的指导下,将每个表示转换为不同数量的信道符号,这些先验信息指示每个表示的熵。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 PLIT:我们提出了一种名为渐进学习图像传输(PLIT)的新框架,该框架利用分层变分自动编码器(VAE)来催化语义通信。具体来说,PLIT可以在分层VAE学习的先验信息的指导下,将每个表示转换为不同数量的信道符号,这些先验信息指示每个表示的熵。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:PLIT 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

为了保持一致性,所有方案的CBR都固定为0.0625。 PDF p.12

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

在AWGN信道和Rayleigh衰落信道下,分别在1、2和4个相位下,PSNR性能与SNR性能的比较。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.10

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.10

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、DIV2K、ImageNet

BaselineDeepJSCC、NTSCC、JPEG、JPEG2000、BPG、LDPC、Swin Transformer、VAE、ResNet、SwinJSCC、JSCC

评价指标PSNR、SSIM、MS-SSIM、LPIPS、MSE、latency

信道与工作点AWGN、Rayleigh、fading channel、SNR = 10 dB、SNR of 10 dB

数据集为Kodak、DIV2K、ImageNet;实验小节中明确出现的比较对象包括DeepJSCC、NTSCC、JPEG、JPEG2000、BPG、LDPC、Swin Transformer、VAE、ResNet、SwinJSCC、JSCC;指标包括PSNR、SSIM、MS-SSIM、LPIPS、MSE、latency;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 10 dB、SNR of 10 dB。 PDF p.9

大量的实验表明,我们提出的方法优于现有的基准方法的率失真性能,并保持对信道噪声的鲁棒性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE 架构/方法图
架构/方法图|来源:《Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE》,原 PDF p.10,Fig. 10 Comparisons of PSNR performance for PLIT models trained with different λ。 核对论文
Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE 关键实验结果图/表
关键实验结果图/表|来源:《Progressive Learned Image Transmission for Semantic Communication Using Hierarchical VAE》,原 PDF p.10,Fig. 9 PSNR performance comparison versus SNR under AWGN channels and Rayleigh fading channels。 核对论文
相关但非核心2025语义感知资源分配与网络优化

R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy

DOI / IEEE 页面

作者Arun Kumar Sangaiah; Jayakrishnan Anandakrishnan; Aniruth Reddy Devarapelly; Muhammad Luqman Arif Bin Mohamad; Gui-Bin Bian; Mohammed J. F. Alenazi; Salman A. AlQahtani

出版信息Vol. 11 · No. 2 · pp. 1197-1209

DOI / IEEE ID10.1109/tccn.2024.3452053 / 10659213

通信位置资源分配与跨层优化

一句话主旨:R-UAV-Net 面向语义感知资源分配与网络优化,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:近年来,由于水稻叶部病害的流行,水稻种植面临着重大挑战。 PDF p.1
  2. 仍然存在的问题:无人机传感的一个严峻挑战是从这种高分辨率地面数据中进行资源有效的收集、传输和疾病检测。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:本研究旨在探讨水稻叶部病害的目标检测技术。 PDF p.1
  6. 方案为何可能有效:本研究通过引入图启发的编码器-解码器语义压缩(G-SC)以及增强的YOLOv 4架构来解决这些问题,用于水稻农艺学中的疾病检测。 PDF p.1
  7. 作者希望证明什么:R-UAV-Net的表现优于最先进的(SOTA)技术,平均精度(mAP)提高了0.69%,F1得分比性能最好的叶片检测模型提高了0.12。 PDF p.1

方法与端到端信息流

本研究致力于水稻叶部病害的目标检测和定位,通过引入基于图的编码解码语义压缩(G-SC)和增强型YOLOv 4体系结构,实现水稻叶部病害的目标检测。 PDF p.1

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 R-UAV-Net:本研究致力于水稻叶部病害的目标检测和定位,通过引入基于图的编码解码语义压缩(G-SC)和增强型YOLOv 4体系结构,实现水稻叶部病害的目标检测。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:R-UAV-Net 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:无误语义表示,或抽象系统变量。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineViT、ResNet、YOLO

评价指标mAP、Top-1、accuracy、precision、throughput、PER、F1-score

信道与工作点全文未稳定定位

实验小节中明确出现的比较对象包括ViT、ResNet、YOLO;指标包括mAP、Top-1、accuracy、precision、throughput、PER、F1-score。 PDF p.8

R-UAV-Net的表现优于最先进的(SOTA)技术,平均精度(mAP)提高了0.69%,F1得分比性能最好的叶片检测模型提高了0.12。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。 该文属于边界谱系,不能用它代表端到端语义通信主线。

R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy 架构/方法图
架构/方法图|来源:《R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy》,原 PDF p.6,Fig. 4 Proposed R-UAV-Net rice leaf disease detection architecture: Modified Backbone, Neck and Head consisting of EFEM, 3D-FAM, SCFEM, FSFEM, CBAM, CTAM, SEAM, and SPPF Blocks。 核对论文
R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy 关键实验结果图/表
关键实验结果图/表|来源:《R-UAV-Net: Enhanced YOLOv4 With Graph-Semantic Compression for Transformative UAV Sensing in Paddy Agronomy》,原 PDF p.9,Fig. 11 The graph analysis indicated that the SOTA models failed to produce a A. SOTA Comparison Against Proposed R-UAV-Net uniform, accep 核对论文
核心纳入2025语义信息度量与理论

Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications

DOI / IEEE 页面

作者Kailin Tan; Jincheng Dai; Zhenyu Liu; Sixian Wang; Xiaoqi Qin; Wenjun Xu; Kai Niu; Ping Zhang

出版信息Vol. 11 · No. 2 · pp. 672-686

DOI / IEEE ID10.1109/tccn.2024.3511960 / 10778256

通信位置生成式语义信源编码

一句话主旨:RDP 面向语义信息度量与理论,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:随着对高带宽效率需求的不断增长,端到端图像传输已成为智能无线通信的重要趋势。 PDF p.1
  2. 仍然存在的问题:然而,现有的方法主要是优化带宽成本和客观失真之间的折衷,常常不能提供与人类感知一致的视觉上令人愉悦的结果。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:为此,本文提出了一种新的速率-失真-感知(RDP)联合优化的联合信源-信道编码(JSCC)框架,以提高人类通信中的感知质量。 PDF p.1
  6. 方案为何可能有效:在此背景下,我们建议升级JSCC框架的优化目标,纳入“速率-失真-感知(RDP)”的三重权衡,以满足端到端通信系统对高感知质量的需求。 PDF p.2
  7. 作者希望证明什么:综合实验结果表明,本文提出的RDP-JSCC框架在感知性能上明显优于现有的传输方法,在某些情况下其失真性能也接近“VTM + LDPC”方案。 PDF p.14

方法与端到端信息流

本文提出了一种新的速率-失真-感知(RDP)联合优化的联合信源-信道编码(JSCC)框架来提高人类通信中的感知质量,在此背景下,我们提出了将JSCC框架的优化目标升级为包含“速率-失真-感知(RDP)”三重权衡,以满足端到端通信系统对高感知质量的需求。 PDF p.1 PDF p.2

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 RDP:本文提出了一种新的速率-失真-感知(RDP)联合优化的联合信源-信道编码(JSCC)框架来提高人类通信中的感知质量,在此背景下,我们提出了将JSCC框架的优化目标升级为包含“速率-失真-感知(RDP)”三重权衡,以满足端到端通信系统对高感知质量的需求。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:RDP 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

(c):CCT、DPCT(β)、NTSCC+和“VTM + LDPC”的Cityscapes数据集上相对于CBR的平均IoU,灰色虚线表示Cityscapes验证集中原始图像的mIoU。 PDF p.12

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

图像以SNR = 10 dB通过AWGN信道(第一行)和瑞利信道(第二行)传输。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.11

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.11

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、Open Images、Cityscapes、HEVC

BaselineNTSCC、BPG、VVC、HEVC、LDPC、VTM、GAN、ELIC、HiFiC、JSCC

评价指标PSNR、FID、MSE、mAP、mIoU、latency、FLOPs、IoU、PER

信道与工作点AWGN、Rayleigh、fading channel、SNR = 10dB、CBR = 0.0035、CBR = 0.009、CBR = 0.0192

数据集为Kodak、Open Images、Cityscapes、HEVC;实验小节中明确出现的比较对象包括NTSCC、BPG、VVC、HEVC、LDPC、VTM、GAN、ELIC、HiFiC、JSCC;指标包括PSNR、FID、MSE、mAP、mIoU、latency、FLOPs、IoU、PER;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 10dB、CBR = 0.0035、CBR = 0.009、CBR = 0.0192。 PDF p.9

综合实验结果表明,本文提出的RDP-JSCC框架在感知性能上明显优于现有的传输方法,在某些情况下其失真性能也接近“VTM + LDPC”方案。 PDF p.14

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications 架构/方法图
架构/方法图|来源:《Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications》,原 PDF p.3,Fig. 2 by a rate allocation vector k = [k1 , . . . , kl ], where l = w × h。 核对论文
Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Rate-Distortion-Perception Controllable Joint Source-Channel Coding for High-Fidelity Generative Semantic Communications》,原 PDF p.10,Fig. 8 The fine-grained spatial control of our DPCT over the DP trade-off. The FID (right Y-axis) and PSNR (left Y-axis) results vary with the number of 核对论文
核心纳入2025图像传输、压缩或生成

Semantic Image Encoding and Communication for Earth Observation With LEO Satellites

DOI / IEEE 页面

作者Van-Phuc Bui; Thinh Quang Dinh; Israel Leyva‐Mayorga; Shashi Raj Pandey; Eva Lagunas; Petar Popovski

出版信息Vol. 11 · No. 2 · pp. 1210-1224

DOI / IEEE ID10.1109/tccn.2024.3451724 / 10659182

通信位置联合信源信道编码(JSCC)

一句话主旨:MPs 面向图像传输、压缩或生成,把问题放在“联合信源信道编码(JSCC)”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:地球观测(EO)卫星产生的大量数据对有限速率的星地链路构成了重大挑战。 PDF p.1
  2. 仍然存在的问题:然而,一个主要问题是,使用高分辨率传感器会产生大量数据,这就需要大量的通信资源和机载数据存储能力,以便将数据传输给地面最终用户。 PDF p.1
  3. 为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:本文讨论了多光谱卫星图像变化检测的下行通信问题,用于EO目的。 PDF p.1
  6. 方案为何可能有效:我们的方法通过对每个像素进行评分并选择性地传输那些可能被改变的像素来推进这一点,即,保持选择和编码改变的像素的95%的概率。 PDF p.2
  7. 作者希望证明什么:数值计算结果表明,所提出的框架在实现高达58%的节能,同时保持高质量的数据传输基于卫星的EO应用的有效性。 PDF p.1

方法与端到端信息流

本文讨论了多光谱卫星图像变化检测的下行链路通信问题,我们的方法通过对每个像素进行评分并选择性地传输那些可能发生变化的像素,即保持95%的概率选择和编码变化的像素。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 MPs:本文讨论了多光谱卫星图像变化检测的下行链路通信问题,我们的方法通过对每个像素进行评分并选择性地传输那些可能发生变化的像素,即保持95%的概率选择和编码变化的像素。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:MPs 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标PSNR、mAP、accuracy、precision、MACs、energy efficiency、AUC

信道与工作点wireless channel

指标包括PSNR、mAP、accuracy、precision、MACs、energy efficiency、AUC;信道/链路条件包括wireless channel。 PDF p.9

数值计算结果表明,所提出的框架在实现高达58%的节能,同时保持高质量的数据传输基于卫星的EO应用的有效性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“联合信源信道编码(JSCC)”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantic Image Encoding and Communication for Earth Observation With LEO Satellites 架构/方法图
架构/方法图|来源:《Semantic Image Encoding and Communication for Earth Observation With LEO Satellites》,原 PDF p.7,Fig. 3 Cloud-SLR for cloud detection based on U-net architecture。 核对论文
Semantic Image Encoding and Communication for Earth Observation With LEO Satellites 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Image Encoding and Communication for Earth Observation With LEO Satellites》,原 PDF p.11,Fig. 6 Evolution of loss and accuracy versus training round。 核对论文
相关但非核心2025文本传输或语言任务

Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer

DOI / IEEE 页面

作者Li Zhou; Xinfeng Deng; Zhe Wang; Xiaoying Zhang; Yanjie Dong; Xiping Hu; Zhaolong Ning; Jibo Wei

出版信息Vol. 11 · No. 2 · pp. 725-737

DOI / IEEE ID10.1109/tccn.2024.3482354 / 10720863

通信位置生成式语义信源编码

一句话主旨:GMAC 面向文本传输或语言任务,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:多个Agent之间的协作需要高效的通信。 PDF p.1
  2. 仍然存在的问题:然而,多智能体系统中的观测数据通常是大量的和冗余的,并且当直接传输时对通信系统构成了实质性的挑战。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
  5. 本文提出什么:针对这一问题,提出了一种基于大语言模型(LLM)的多智能体通信方案,称为基于GPT的多智能体通信语义信息抽取(GMAC)。 PDF p.1
  6. 方案为何可能有效:在本节中,我们将对我们提出的GMAC方案进行全面的解释,该方案分为四个主要阶段。 PDF p.4
  7. 作者希望证明什么:因此,GMAC提供了一个简单而有效的方法来实现多智能体系统中的高效和经济的通信。 PDF p.1

方法与端到端信息流

针对这一问题,本文提出了一种基于大语言模型(LLM)的多Agent通信方案,即基于GPT的多Agent通信语义信息提取(GMAC)方案,并将其分为四个主要阶段进行了详细的阐述。 PDF p.1 PDF p.4

输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 GMAC:针对这一问题,本文提出了一种基于大语言模型(LLM)的多Agent通信方案,即基于GPT的多Agent通信语义信息提取(GMAC)方案,并将其分为四个主要阶段进行了详细的阐述。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:GMAC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标全文未稳定定位

信道与工作点全文未稳定定位

论文未在可稳定定位的实验段落中同时给出数据集、baseline、信道和资源工作点;应以对应结果图页为准。 PDF p.8

因此,GMAC提供了一个简单而有效的方法来实现多智能体系统中的高效和经济的通信。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。 该文属于边界谱系,不能用它代表端到端语义通信主线。

Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer 架构/方法图
架构/方法图|来源:《Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer》,原 PDF p.5,Fig. 2 Overall framework of GMAC。 核对论文
Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Information Extraction and Multi-Agent Communication Optimization Based on Generative Pre-Trained Transformer》,原 PDF p.8,Fig. 5 We observe that the win rate of GMAC remains Q-functions through communication minimization, sending relatively s 核对论文
核心纳入2025图像传输、压缩或生成

Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework

DOI / IEEE 页面

作者Kexin Zhang; Lixin Li; Wensheng Lin; Yuna Yan; Rui Li; Wenchi Cheng; Zhu Han

出版信息Vol. 11 · No. 2 · pp. 687-699

DOI / IEEE ID10.1109/tccn.2025.3526839 / 10829825

通信位置生成式语义信源编码

一句话主旨:Semantic Successive Refinement 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信是一种旨在突破香农极限的新兴技术。 PDF p.1
  2. 仍然存在的问题:传统的SC策略通常最小化原始数据和重建数据之间的信号失真,忽略感知质量,特别是在低信噪比(SNR)环境中。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这个问题,我们引入了一种新的生成式AI语义通信(GSC)系统,用于单用户场景。 PDF p.1
  6. 方案为何可能有效:在发送端,采用基于Swin Transformer的联合信源信道编码机制,有效地进行语义特征提取和压缩。 PDF p.1
  7. 作者希望证明什么:与基于CNN的DeepJSCC相比,我们的方法在加性白色高斯噪声(AWGN)信道中将峰值信噪比(PSNR)提高了17.75%,在瑞利信道中提高了20.84%。 PDF p.1

方法与端到端信息流

针对这一问题,本文提出了一种新的单用户生成式人工智能语义通信(Generative AI Semantic Communication,GSC)系统,在发送端采用基于Swin Transformer的联合信源信道编码机制,实现高效的语义特征提取和压缩。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Semantic Successive Refinement:针对这一问题,本文提出了一种新的单用户生成式人工智能语义通信(Generative AI Semantic Communication,GSC)系统,在发送端采用基于Swin Transformer的联合信源信道编码机制,实现高效的语义特征提取和压缩。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Semantic Successive Refinement 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

此外,为了验证所提方法的鲁棒性,在AWGN信道和多径瑞利衰落信道下进行了仿真实验。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CIFAR-10

BaselineDeepJSCC、WITT、JPEG、LDPC、QAM、Swin Transformer、VAE、VQ-VAE、JSCC、OFDM

评价指标PSNR、LPIPS、MSE、latency、throughput、PER

信道与工作点AWGN、Rayleigh、wireless channel、OFDM、fading channel、SNR from 0 dB、SNR = 15 dB、SNR = 0 dB

数据集为CIFAR-10;实验小节中明确出现的比较对象包括DeepJSCC、WITT、JPEG、LDPC、QAM、Swin Transformer、VAE、VQ-VAE、JSCC、OFDM;指标包括PSNR、LPIPS、MSE、latency、throughput、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、OFDM、fading channel;正文可定位的代表性工作点有SNR from 0 dB、SNR = 15 dB、SNR = 0 dB。 PDF p.8

与基于CNN的DeepJSCC相比,我们的方法在加性白色高斯噪声(AWGN)信道中将峰值信噪比(PSNR)提高了17.75%,在瑞利信道中提高了20.84%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework 架构/方法图
架构/方法图|来源:《Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework》,原 PDF p.4,Fig. 1 The overview of the proposed generative AI semantic communication system。 核对论文
Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Successive Refinement: A Generative AI-Aided Semantic Communication Framework》,原 PDF p.9,Fig. 4 PSNR (higher the better) versus the SNR over AWGN and Rayleigh channel, respectively. (a) AWGN channel. (b) Rayleigh channel. (c) MU-GSC AWGN channel. (d) MU-GSC Rayleigh channel。 核对论文
核心纳入2025语义感知资源分配与网络优化

Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications

DOI / IEEE 页面

作者Liang Xu; Jian Jiao; Tao Yang; Jianhao Huang; Ye Wang; Qinyu Zhang

出版信息Vol. 11 · No. 1 · pp. 59-74

DOI / IEEE ID10.1109/tccn.2024.3417627 / 10566865

通信位置资源分配与跨层优化

一句话主旨:SUL 面向语义感知资源分配与网络优化,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:通过将知识库支持的语义网络引入离散时间马尔可夫链,研究了时隙状态更新系统中的SUL问题。 PDF p.1
  2. 仍然存在的问题:然而,物联网设备的无情增加将导致网络拥塞E的当前版本7二月2025。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:在本文中,我们引入了一个新的度量SSUC系统,命名为语义效用损失(SUL),它捕获的年龄惩罚和语义信息的估计错误。 PDF p.1
  6. 方案为何可能有效:为了最小化SUL与传输状态更新和更新知识库所消耗的能量的加权和,我们构造了一个无限时域平均代价马尔可夫决策过程。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,优化策略的性能优于零等待和改变时采样策略。 PDF p.1

方法与端到端信息流

本文在SSUC系统中引入了一种新的度量--语义效用损失(Semantic Utility Loss,SUL),它同时包含了语义信息的年龄惩罚和估计误差,并以SUL与传输状态更新和更新知识库所消耗的能量的加权和最小为目标,构造了一个无限水平平均代价的Markov决策过程。 PDF p.1

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 SUL:本文在SSUC系统中引入了一种新的度量--语义效用损失(Semantic Utility Loss,SUL),它同时包含了语义信息的年龄惩罚和估计误差,并以SUL与传输状态更新和更新知识库所消耗的能量的加权和最小为目标,构造了一个无限水平平均代价的Markov决策过程。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SUL 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景MNIST

BaselineLDPC

评价指标accuracy、recall、latency、AoII、energy efficiency

信道与工作点AWGN、Rayleigh、packet loss、fading channel、SNR=12 dB、SNR=5 dB

数据集为MNIST;实验小节中明确出现的比较对象包括LDPC;指标包括accuracy、recall、latency、AoII、energy efficiency;信道/链路条件包括AWGN、Rayleigh、packet loss、fading channel;正文可定位的代表性工作点有SNR=12 dB、SNR=5 dB。 PDF p.10

仿真结果表明,优化策略的性能优于零等待和改变时采样策略。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications 架构/方法图
架构/方法图|来源:《Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications》,原 PDF p.11,Fig. 8 The average sum cost comparison between the proposed optimal 核对论文
Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Utility Loss of Information for Energy Efficient Semantic Status Update Communications》,原 PDF p.12,Fig. 9 shows the proposed SUL/AoII and energy cost with the instability of semantic networks. respect to the SNR in the SSUC and non-SSUC systems. As shown in 核对论文
核心纳入2025图像传输、压缩或生成

SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference

DOI / IEEE 页面

作者Haiwen Niu; Luhan Wang; Zhaoming Lu; Celimuge Wu; Xiangming Wen

出版信息Vol. 11 · No. 4 · pp. 2368-2385

DOI / IEEE ID10.1109/tccn.2024.3522140 / 10813024

通信位置自适应联合信源信道编码

一句话主旨:SACC 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“有限星座/标准数字波形接口”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:支持深度学习(DL)的语义通信为更高的数据传输效率提供了广阔的前景。 PDF p.1
  2. 仍然存在的问题:然而,大多数现有的研究集中在点对点传输与完美的信道状态信息(CSI)和固定的信道带宽比(CBR)。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
  5. 本文提出什么:在该系统中,我们设计了一个语义编码器的转换器卷积神经网络(CNN)混合块,同时捕获非本地和本地潜像特征和SINR自适应模块的基础上的信道空间软注意力机制,根据SINR条件缩放图像特征。 PDF p.1
  6. 方案为何可能有效:在该系统中,我们设计了一个语义编码器的转换器卷积神经网络(CNN)混合块,同时捕获非本地和本地潜像特征和SINR自适应模块的基础上的信道空间软注意力机制,根据SINR条件缩放图像特征。 PDF p.1
  7. 作者希望证明什么:此外,实验结果表明,在FLOP,模型大小和计算延迟的现有先进的ADJSCC和WITT具有相当的性能有很大的改善。 PDF p.1

方法与端到端信息流

在该系统中,我们设计了一个基于变换器-卷积神经网络(CNN)混合模块的语义编码器来同时捕获非局部和局部潜像特征,并设计了一个基于信道-空间软注意机制的SINR自适应模块来根据SINR条件对图像特征进行缩放。我们研究了一种SINR自适应和CBR可控的语义蜂窝通信系统,该系统考虑了ICCI和不完全CSI。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SACC:在该系统中,我们设计了一个基于变换器-卷积神经网络(CNN)混合模块的语义编码器来同时捕获非局部和局部潜像特征,并设计了一个基于信道-空间软注意机制的SINR自适应模块来根据SINR条件对图像特征进行缩放。我们研究了一种SINR自适应和CBR可控的语义蜂窝通信系统,该系统考虑了ICCI和不完全CSI。
实际发送实际发送对象是有限星座符号、OFDM/OTFS 资源或受保护数据包。
信道信道作用方式按“类别 2:语义特征映射为调制符号或编码包”解释。
接收端接收端从均衡或 soft demodulation 后的符号,再恢复语义表示开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:有限星座/标准数字波形接口

比率R = k/m被表示为CBR,确定有多少信道符号可用于每个源符号,其可以对应于可用的频谱或时间资源。 独立判断:SACC 的主传输单位应归为“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

比率R = k/m被表示为CBR,确定有多少信道符号可用于每个源符号,其可以对应于可用的频谱或时间资源。 PDF p.2

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 2:语义特征映射为调制符号或编码包

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 2:语义特征映射为调制符号或编码包”解释信道作用点。 本调研据此归为“类别 2:语义特征映射为调制符号或编码包”。 PDF p.2 PDF p.11

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.11

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、Open Images

BaselineDeepJSCC、WITT、JPEG、LDPC、QAM、TCM、ADJSCC、JSCC

评价指标PSNR、LPIPS、latency、FLOPs

信道与工作点AWGN、Rayleigh、Rician、wireless channel、SINR、channel estimation、imperfect CSI、SNR of 10dB、SNR 10dB、CBR=1/32、CBR of 1/32

数据集为Kodak、Open Images;实验小节中明确出现的比较对象包括DeepJSCC、WITT、JPEG、LDPC、QAM、TCM、ADJSCC、JSCC;指标包括PSNR、LPIPS、latency、FLOPs;信道/链路条件包括AWGN、Rayleigh、Rician、wireless channel、SINR、channel estimation、imperfect CSI;正文可定位的代表性工作点有SNR of 10dB、SNR 10dB、CBR=1/32、CBR of 1/32。 PDF p.11

此外,实验结果表明,在FLOP,模型大小和计算延迟的现有先进的ADJSCC和WITT具有相当的性能有很大的改善。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference 架构/方法图
架构/方法图|来源:《SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference》,原 PDF p.4,Fig. 1 Architecture overview of the SACC from the perspective of a single transceiver pair。 核对论文
SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference 关键实验结果图/表
关键实验结果图/表|来源:《SINR-Adaptive and CBR-Controllable Semantic Cellular Communication Considering Imperfect CSI and Inter-Cell Co-Channel Interference》,原 PDF p.13,Fig. 8 Performance comparison of SACC in Rayleigh channel with perfect from 核对论文
核心纳入2025图像传输、压缩或生成

SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding

DOI / IEEE 页面

作者Ke Yang; Sixian Wang; Jincheng Dai; Xiaoqi Qin; Kai Niu; Ping Zhang

出版信息Vol. 11 · No. 1 · pp. 90-104

DOI / IEEE ID10.1109/tccn.2024.3424842 / 10589474

通信位置数字语义编码与物理层接口

一句话主旨:SwinJSCC 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“有限星座/标准数字波形接口”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:作为实现语义通信的关键技术之一,端到端优化神经元联合信源信道编码(JSCC)近年来取得了长足的发展。 PDF p.1
  2. 仍然存在的问题:然而,分离理论所基于的假设在实际系统中可能不成立,这导致了联合信源-信道编码(JSCC)的发展。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:近年来,在推动神经网络JSCC模型适应性和应用多样性的研究中,一个普遍的趋势是基于卷积神经网络(CNN)的主干网络,但其模型容量有限,固有地导致系统编码增益低于传统的编码传输系统。 PDF p.1
  6. 方案为何可能有效:因此,本文提出了一种新的网络骨干网来升级深度JSCC,我们的开源框架旨在推动这一领域的研究。 PDF p.2
  7. 作者希望证明什么:大量的实验结果表明,我们的SwinJSCC与最先进的工程BPG + 5G LDPC编码传输系统相比,具有更快的端到端编码速度,特别是对于高分辨率图像,在这种情况下,传统的基于CNN的JSCC由于其有限的模型容量而仍然。 PDF p.1

方法与端到端信息流

近年来,许多研究工作都在推动神经JSCC模型适应性和应用多样性的发展,而基于卷积神经网络(CNN)骨干网的神经JSCC模型容量有限,我们的开放源码框架旨在促进这一领域的研究。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SwinJSCC:近年来,许多研究工作都在推动神经JSCC模型适应性和应用多样性的发展,而基于卷积神经网络(CNN)骨干网的神经JSCC模型容量有限,我们的开放源码框架旨在促进这一领域的研究。
实际发送实际发送对象是有限星座符号、OFDM/OTFS 资源或受保护数据包。
信道信道作用方式按“类别 2:语义特征映射为调制符号或编码包”解释。
接收端接收端从均衡或 soft demodulation 后的符号,再恢复语义表示开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:有限星座/标准数字波形接口

通过与两个空间调制模块(可根据信道状态信息和目标传输速率缩放潜在表示)配合使用,我们的基准SwinJSCC可进一步升级为多功能版本,从而增强其适应不同信道条件和速率配置的能力。 独立判断:SwinJSCC 的主传输单位应归为“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

随后,采用速率调制网络来调整嵌入大小以匹配CBR R,定义为R = C /(2 × 3 × 2 i × 2 i),其中i表示级数。 PDF p.6

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 2:语义特征映射为调制符号或编码包

这里,我们考虑了针对不同的编码率和正交幅度调制(QAM)的具有6144比特的块长度的5G LDPC码。 本调研据此归为“类别 2:语义特征映射为调制符号或编码包”。 PDF p.8

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.8

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、DIV2K、CIFAR10

BaselineDeepJSCC、BPG、LDPC、QAM、Swin Transformer、SwinJSCC、ADJSCC、JSCC

评价指标PSNR、SSIM、MS-SSIM、BD-rate、MSE、latency、FLOPs、PER

信道与工作点AWGN、Rayleigh、wireless channel、fading channel、SNR = 0dB、SNR = 3dB、SNR = 13dB、SNR = 10dB、SNR = 1dB、CBR = 1/48、CBR = 0.0625

数据集为Kodak、DIV2K、CIFAR10;实验小节中明确出现的比较对象包括DeepJSCC、BPG、LDPC、QAM、Swin Transformer、SwinJSCC、ADJSCC、JSCC;指标包括PSNR、SSIM、MS-SSIM、BD-rate、MSE、latency、FLOPs、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、fading channel;正文可定位的代表性工作点有SNR = 0dB、SNR = 3dB、SNR = 13dB、SNR = 10dB、SNR = 1dB、CBR = 1/48、CBR = 0.0625。 PDF p.9

大量的实验结果表明,我们的SwinJSCC与最先进的工程BPG + 5G LDPC编码传输系统相比,具有更快的端到端编码速度,特别是对于高分辨率图像,在这种情况下,传统的基于CNN的JSCC由于其有限的模型容量而仍然。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding 架构/方法图
架构/方法图|来源:《SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding》,原 PDF p.5,Fig. 5 The overall architecture of our SwinJSCC for wireless image transmission。 核对论文
SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding 关键实验结果图/表
关键实验结果图/表|来源:《SwinJSCC: Taming Swin Transformer for Deep Joint Source-Channel Coding》,原 PDF p.10,Fig. 10 (a)∼(c) PSNR performance versus the SNR over the AWGN channel. (d)∼(f) PSNR performance versus the SNR over the fast Rayleigh fading channel. The average CBR is set to 1/3, 1/16, and 1/16 for the CIFAR10 dataset, Kodak dataset, and CLIC21 dataset。 核对论文
核心纳入2025任务导向推理

Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach

DOI / IEEE 页面

作者Shujing Li; Yanhu Wang; Shuaishuai Guo; Chenyuan Feng

出版信息Vol. 11 · No. 3 · pp. 1723-1737

DOI / IEEE ID10.1109/tccn.2024.3465651 / 10685450

通信位置任务导向联合信源信道设计

一句话主旨:GNNs 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:图形数据在知识表示和社交网络等领域至关重要,通常涉及具有许多节点和边的大型网络。 PDF p.1
  2. 仍然存在的问题:然而,图形数据固有的复杂性和大小可能会对传输和存储带来挑战。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:本文介绍了一种方法来提取一个较小的,以任务为中心的子图,保持关键信息,同时减少通信开销。 PDF p.1
  6. 方案为何可能有效:此外,我们提出了VQ-GIB机制,集成矢量量化(VQ)转换成一个离散的码本序列,与现有的数字通信系统兼容的子图表示。 PDF p.1
  7. 作者希望证明什么:平衡码本的大小是至关重要的,因为增加码本的大小会降低量化失真,但也会提高计算复杂度。 PDF p.8

方法与端到端信息流

本文提出了一种提取较小的、以任务为中心的子图的方法,该方法在保留关键信息的同时降低了通信开销,并提出了一种与现有数字通信系统兼容的VQ-GIB机制,该机制结合了矢量量化(VQ)将子图表示转换为离散码本序列。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 GNNs:本文提出了一种提取较小的、以任务为中心的子图的方法,该方法在保留关键信息的同时降低了通信开销,并提出了一种与现有数字通信系统兼容的VQ-GIB机制,该机制结合了矢量量化(VQ)将子图表示转换为离散码本序列。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

此外,我们提出了VQ-GIB机制,集成矢量量化(VQ)转换成一个离散的码本序列,与现有的数字通信系统兼容的子图表示。 独立判断:GNNs 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{idx}\lceil\log_2 K\rceil+N_{side},\qquad CR=\frac{N_{src}}{N_{tx}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.9

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标accuracy、precision、classification accuracy、PER

信道与工作点AWGN、SNR of 5 dB

指标包括accuracy、precision、classification accuracy、PER;信道/链路条件包括AWGN;正文可定位的代表性工作点有SNR of 5 dB。 PDF p.9

平衡码本的大小是至关重要的,因为增加码本的大小会降低量化失真,但也会提高计算复杂度。 PDF p.8

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach 架构/方法图
架构/方法图|来源:《Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach》,原 PDF p.10,Fig. 4 Classification accuracy variation with SNR for three methods on PROTEINS and COLLAB Datasets using GCN backbone, at hidden dimensions of 16 and 32。 核对论文
Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach 关键实验结果图/表
关键实验结果图/表|来源:《Task-Oriented Communication for Graph Data: A Graph Information Bottleneck Approach》,原 PDF p.9,Fig. 4 (b) presents the experimental outcomes on the COLLAB class_n is the number of graph classes, and dim represents the dataset, a social network dataset characterized by complex hidden dimension. The size in 核对论文
核心纳入2026点云/三维场景传输

3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints

DOI / IEEE 页面

作者Shuqi Liu; Yufeng Zhuang; Jingqing Wang; Zhuohui Yao; Yanzhu Hu

出版信息Vol. 12 · pp. 11433-11447

DOI / IEEE ID10.1109/tccn.2026.3720357 / 11643232

通信位置生成式语义信源编码

一句话主旨:ATE 面向点云/三维场景传输,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:3D高斯溅射(3DGS)技术以其卓越的渲染效率和逼真的重建能力,成为实时场景重建和同步定位与制图(SLAM)应用的一种有前途的方法。 PDF p.1
  2. 仍然存在的问题:然而,在实际应用中,传统的3DGS方法仍然面临着两个关键的挑战:输入数据中的噪声和冗余,以及固定分辨率建模的适应性不足。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
  5. 本文提出什么:本文提出了一种新的三维高斯场景表示框架,联合集成联合信源信道编码(JSCC)与多尺度优化,以提高建模精度和鲁棒性,在复杂的操作环境。 PDF p.1
  6. 方案为何可能有效:我们结合了联合收割机的基于高斯的多尺度分解方案,处理渲染输出和JSCC增强的RGB-D数据。 PDF p.1
  7. 作者希望证明什么:所提出的框架实现了更优的性能相比,最先进的3DGS方法在绝对轨迹误差(ATE)的指标,同时保留实时渲染能力。 PDF p.1

方法与端到端信息流

为了提高复杂作战环境下的建模精度和鲁棒性,该文提出了一种新的三维高斯场景表示框架,该框架将联合信源信道编码(Joint Source-Channel Coding,JSCC)与多尺度优化技术相结合,并联合收割机了基于高斯金字塔的多尺度分解算法,该算法同时处理渲染输出和JSCC增强的RGB-D数据。 PDF p.1

输入输入是点云/三维场景传输所需的三维点、视图或场景语义。
发送端发送端采用 ATE:为了提高复杂作战环境下的建模精度和鲁棒性,该文提出了一种新的三维高斯场景表示框架,该框架将联合信源信道编码(Joint Source-Channel Coding,JSCC)与多尺度优化技术相结合,并联合收割机了基于高斯金字塔的多尺度分解算法,该算法同时处理渲染输出和JSCC增强的RGB-D数据。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为三维重建、渲染或下游感知结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:ATE 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.4

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.4 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.4 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.4 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Waymo

BaselineJPEG、LDPC、JSCC

评价指标PSNR、SSIM、LPIPS、bpp、mAP、accuracy、PER

信道与工作点AWGN、wireless channel、SNR of 25.76 dB、SNR= 20 dB、SNR= 0 dB、SNR= 15 dB、SNR= 25 dB、0.85 bpp、2.12 bpp、1.85 bpp

数据集为Waymo;实验小节中明确出现的比较对象包括JPEG、LDPC、JSCC;指标包括PSNR、SSIM、LPIPS、bpp、mAP、accuracy、PER;信道/链路条件包括AWGN、wireless channel;正文可定位的代表性工作点有SNR of 25.76 dB、SNR= 20 dB、SNR= 0 dB、SNR= 15 dB、SNR= 25 dB、0.85 bpp、2.12 bpp、1.85 bpp。 PDF p.9

所提出的框架实现了更优的性能相比,最先进的3DGS方法在绝对轨迹误差(ATE)的指标,同时保留实时渲染能力。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints 架构/方法图
架构/方法图|来源:《3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints》,原 PDF p.10,Fig. 7 Multi-Metrics dynamic changes, Correlation and regression analysis This section comprehensively evaluates the novel view on the TUM-fr2 dataset. See 核对论文
3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints 关键实验结果图/表
关键实验结果图/表|来源:《3-D Gaussian SLAM Based on Joint Source-Channel Coding and Multi-Scale Constraints》,原 PDF p.11,Fig. 8 Qualitative comparison results on the TUM-fr3 scene. From left to right: Point-SLAM [9], MonoGS [1], Ours, Ground truth。 核对论文
相关但非核心2026语音/音频传输或识别

6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models

DOI / IEEE 页面

作者Yuxuan Wei; Xiao Chen; Zhaohui Yang; Jianfeng Shi; Hao Jiang; Cunhua Pan; Feng Shu; Jiajia Liu

出版信息Vol. 12 · pp. 10179-10199

DOI / IEEE ID10.1109/tccn.2026.3712130 / 11603439

通信位置通信安全与隐私

一句话主旨:LAM-SC 面向语音/音频传输或识别,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:第六代(6G)通信技术正在推动从传统句法传输向语义智能传输的深刻变革。 PDF p.1
  2. 仍然存在的问题:同时,通过分析模型的体系结构、优势和局限性,讨论了图像、文本、音频和多模态场景下的语义提取。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
  5. 本文提出什么:然后,我们提出了一个先进的基于LAM的SC(LAM-SC)计划的图像SC系统,它引入了一个特定于模态的交叉训练策略,以实现高效的语义图像传输。 PDF p.1
  6. 方案为何可能有效:在本小节中,我们介绍了两种基于DL的音频数据语义提取模型,包括基于注意力机制的挤压和激励网络和基于wav 2 vec的自动编码器架构。 PDF p.8
  7. 作者希望证明什么:这些结果说明了语义抽取在认知语言学中的重要性。 PDF p.1

方法与端到端信息流

在此基础上,本文提出了一种基于分层学习模型的图像语义提取方法(LAM-SC),该方法引入了一种基于模态的交叉训练策略,实现了图像语义的高效传输。 PDF p.1 PDF p.8

输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 LAM-SC:在此基础上,本文提出了一种基于分层学习模型的图像语义提取方法(LAM-SC),该方法引入了一种基于模态的交叉训练策略,实现了图像语义的高效传输。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:LAM-SC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.13

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

然后,这些符号在具有加性高斯白噪声(AWGN)的无线信道上被发送。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.13

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.13

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景COCO、VOC2012

BaselineASC、GPT

评价指标SSIM、MSE、mAP、latency

信道与工作点AWGN、wireless channel、SNR = 0 dB、SNR = 10 dB、SNR = 20 dB、SNR of 10 dB、SNR of 20 dB、SNR = 5 dB、SNR of 5 dB

数据集为COCO、VOC2012;实验小节中明确出现的比较对象包括ASC、GPT;指标包括SSIM、MSE、mAP、latency;信道/链路条件包括AWGN、wireless channel;正文可定位的代表性工作点有SNR = 0 dB、SNR = 10 dB、SNR = 20 dB、SNR of 10 dB、SNR of 20 dB、SNR = 5 dB、SNR of 5 dB。 PDF p.13

这些结果说明了语义抽取在认知语言学中的重要性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。 该文属于边界谱系,不能用它代表端到端语义通信主线。

6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models 架构/方法图
架构/方法图|来源:《6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models》,原 PDF p.8,Fig. 5 The wav2vec architecture. ECSC introduces no 核对论文
6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models 关键实验结果图/表
关键实验结果图/表|来源:《6G-Oriented Semantic Extraction in Semantic Communications: From DL to Large AI Models》,原 PDF p.16,Fig. 10 SSIM performance of advanced LAM-SC and traditional LAM-SC trained under different SNRs。 核对论文
核心纳入2026任务导向推理

A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication

DOI / IEEE 页面

作者Mingdie Yan; Likun Huang; Qiang Li; Ronghua Liu; Zian Meng; Wenqian Tang; Xiaohu Ge

出版信息Vol. 12 · pp. 6582-6597

DOI / IEEE ID10.1109/tccn.2026.3670165 / 11419146

通信位置任务导向联合信源信道设计

一句话主旨:AFBs 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信是动态和资源受限环境下面向任务的智能服务的一个很有前途的范例。 PDF p.1
  2. 仍然存在的问题:然而,当前的设计遭受有限的泛化、高模型计算和低效的训练。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:然而,当前的设计遭受有限的泛化、高模型计算和低效的训练。 PDF p.1
  6. 方案为何可能有效:在此框架下,通过集成注意力特征块(AFB)和语义码(SC)屏蔽机制,提出了一种深度联合信源信道编码(DeepJSCC)模型。 PDF p.1
  7. 作者希望证明什么:实验结果表明,在高信噪比条件下,所提出的单模型DADC-C框架比传统方法的分类准确率提高了30%,而在参数、浮点运算量、延迟、每秒帧数(FPS)和存储量等方面与多模型DeepJSCC方案具有数量级的优势。 PDF p.1

方法与端到端信息流

在此框架下,通过集成注意力特征块(Attention Feature Blocks,AFB)和语义码(Semantic Code,SC)屏蔽机制,提出了一种深度联合信源信道编码(DeepJSCC)模型,即基于注意力特征块的深度联合信源信道编码(DeepJSCC)模型。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 AFBs:在此框架下,通过集成注意力特征块(Attention Feature Blocks,AFB)和语义码(Semantic Code,SC)屏蔽机制,提出了一种深度联合信源信道编码(DeepJSCC)模型,即基于注意力特征块的深度联合信源信道编码(DeepJSCC)模型。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:AFBs 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

传统方法:我们考虑了三种不同的信源信道编码方案,它们将JPEG/JPEG 2000与1/3码率Turbo或1/5码率LDPC相结合,使用在一致设置下独立训练的无噪声分类器。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.12

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.12

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10

BaselineDeepJSCC、JPEG、JPEG2000、LDPC、Turbo、ResNet、ADJSCC、JSCC、ETC

评价指标PSNR、SSIM、MSE、mAP、accuracy、precision、latency、FLOPs、FPS、classification accuracy

信道与工作点AWGN、Rayleigh、fading channel、wireless channel、SNR = 24 dB、SNR of 38.95 dB

数据集为ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、JPEG2000、LDPC、Turbo、ResNet、ADJSCC、JSCC、ETC;指标包括PSNR、SSIM、MSE、mAP、accuracy、precision、latency、FLOPs、FPS、classification accuracy;信道/链路条件包括AWGN、Rayleigh、fading channel、wireless channel;正文可定位的代表性工作点有SNR = 24 dB、SNR of 38.95 dB。 PDF p.10

实验结果表明,在高信噪比条件下,所提出的单模型DADC-C框架比传统方法的分类准确率提高了30%,而在参数、浮点运算量、延迟、每秒帧数(FPS)和存储量等方面与多模型DeepJSCC方案具有数量级的优势。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication 架构/方法图
架构/方法图|来源:《A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication》,原 PDF p.4,Fig. 1 An illustration of the proposed DADC-C framework for intelligent pragmatic tasks。 核对论文
A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《A Dynamic Adaptive Deep Coding-Classification Framework for Intelligent Pragmatic Tasks in Semantic Communication》,原 PDF p.13,Fig. 7 PSNR and classification accuracy of the proposed DynamicJSCC-R and benchmark models with MSE/SSIM+CE loss on the CIFAR-10 dataset. Top row: performance under changing CR conditions. Bottom row: performance under varying channel SNR conditions。 核对论文
相关但非核心2026图像传输、压缩或生成

A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks

DOI / IEEE 页面

作者Han Shen; Qifu Tyler Sun; Fanyang Meng; Ye Wang; Jian Zou; Zongpeng Li; Yongsheng Liang

出版信息Vol. 12 · pp. 9444-9459

DOI / IEEE ID10.1109/tccn.2026.3705838 / 11573825

通信位置多用户接入、广播或中继

一句话主旨:LNC 面向图像传输、压缩或生成,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:低地球轨道(LEO)卫星中继传输越来越多地用于增强网络覆盖范围。 PDF p.1
  2. 仍然存在的问题:但是,卫星通信过程中的诸多不可控因素会影响信号的传输质量和连续性,对卫星网络的高效传输提出挑战。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这个问题,我们提出了一种分组级学习网络编码(LNC),它是一种数据驱动的联合信源-网络编码方法,利用端到端联合训练,在没有反馈的情况下有效地适应动态网络条件。 PDF p.1
  6. 方案为何可能有效:这些包括:(1)目前,我们通常使用单独的源网络编码方案。 PDF p.2
  7. 作者希望证明什么:仿真结果表明,与现有的RLNC方法相比,所提出的LNC方法具有较好的鲁棒性。 PDF p.1

方法与端到端信息流

为了解决这个问题,我们提出了一种分组级学习网络编码(LNC),这是一种数据驱动的联合源网络编码方法,可以在没有反馈的情况下有效地适应动态网络条件,利用端到端的联合训练。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 LNC:为了解决这个问题,我们提出了一种分组级学习网络编码(LNC),这是一种数据驱动的联合源网络编码方法,可以在没有反馈的情况下有效地适应动态网络条件,利用端到端的联合训练。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:LNC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

我们使用λ1 = 0.013的模型在所有实验中进行评估。我们的模型在Kodak和DOTA-v1数据集上的bpp分别为0.473和0.442。 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:经过多跳 relay recoding 后仍存活的 latent packets;丢失 packet 不可用。 PDF p.2 PDF p.10

是否真正处理离散变量出错:是(相关谱系):端到端训练显式注入 packet erasure,并学习 packet-level source-network coding;它不是以 semantic payload 为主张的核心 SemCom 论文。

实验设置与主要结论

数据集/场景Kodak

BaselineJPEG、JPEG2000、JSCC、CLIP

评价指标PSNR、bitrate、bpp、mAP、FLOPs、PER

信道与工作点packet loss、erasure

数据集为Kodak;实验小节中明确出现的比较对象包括JPEG、JPEG2000、JSCC、CLIP;指标包括PSNR、bitrate、bpp、mAP、FLOPs、PER;信道/链路条件包括packet loss、erasure。 PDF p.10

仿真结果表明,与现有的RLNC方法相比,所提出的LNC方法具有较好的鲁棒性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 该文属于边界谱系,不能用它代表端到端语义通信主线。

A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks 架构/方法图
架构/方法图|来源:《A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks》,原 PDF p.5,Fig. 2 Network architecture of encoder and decoder. Convolution parameters are denoted as: the number of filters × kernel height × kernel width / up-sampling or down-sampling stride, where ↑ / ↓ indicates up-sampling and down-sampling, respectively。 核对论文
A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks 关键实验结果图/表
关键实验结果图/表|来源:《A Learned Network Coding Scheme for Robust Image Transmission in Lossy Relay Networks》,原 PDF p.12,Fig. 12 Ablation study results for recoder module. (a) PSNR performance versus path length (varying L). (b) PSNR performance versus packet loss rate (varying ε)。 核对论文
核心纳入2026语义感知资源分配与网络优化

A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity

DOI / IEEE 页面

作者Chuanyu Dong; Qing Wang; Kai Guan; Zhiqiang Wu; Zhicheng Dong; Song Yang

出版信息pp. 1-1

DOI / IEEE ID10.1109/tccn.2026.3721535 / 11647250

通信位置资源分配与跨层优化

一句话主旨:G-DSE 面向语义感知资源分配与网络优化,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信深入研究比特背后的本质,有望促进跨语言和跨领域的信息交换。 PDF p.1
  2. 仍然存在的问题:然而,数量激增的边缘设备对无线通信网络提出了前所未有的挑战,W论文已在第13届IEEE/CIC国际会议上发表于Wang.)chuanyudong@tju.edu.cn,wangq@tju.edu.cn)。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:基于这些问题,提出了一种鲁棒的、保真度增强的语义通信方案LRSC。 PDF p.1
  6. 方案为何可能有效:同时,建立了一种基于RSA机制的语义解码方法,实现了对语义的准确解释。 PDF p.2
  7. 作者希望证明什么:与现有的最先进的lite方法相比,它提高了2.8 dB的峰值信噪比和语义保真度的8%。 PDF p.1

方法与端到端信息流

针对这些问题,本文提出了一种增强保真度的健壮语义通信方案LRSC,同时建立了一种基于RSA机制的语义解码方法,实现了语义的准确解释。 PDF p.1 PDF p.2

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 G-DSE:针对这些问题,本文提出了一种增强保真度的健壮语义通信方案LRSC,同时建立了一种基于RSA机制的语义解码方法,实现了语义的准确解释。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:G-DSE 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10

BaselineWITT、BPG、LDPC、QAM、Swin Transformer、JSCC、OFDM、ETC

评价指标PSNR、SSIM、MSE、accuracy、latency、FLOPs、semantic similarity、classification accuracy、energy efficiency

信道与工作点Rayleigh、OFDM、fading channel、SNR = 7dB、SNR = 7 dB、SNR = 13 dB、SNR = 13dB、SNR = 1dB、SNR = 1 dB、SNR = 15dB、CBR = 0.125、CBR = 0.25、CBR of 0.125

数据集为ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括WITT、BPG、LDPC、QAM、Swin Transformer、JSCC、OFDM、ETC;指标包括PSNR、SSIM、MSE、accuracy、latency、FLOPs、semantic similarity、classification accuracy、energy efficiency;信道/链路条件包括Rayleigh、OFDM、fading channel;正文可定位的代表性工作点有SNR = 7dB、SNR = 7 dB、SNR = 13 dB、SNR = 13dB、SNR = 1dB、SNR = 1 dB、SNR = 15dB、CBR = 0.125、CBR = 0.25、CBR of 0.125。 PDF p.8

与现有的最先进的lite方法相比,它提高了2.8 dB的峰值信噪比和语义保真度的8%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity 架构/方法图
架构/方法图|来源:《A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity》,原 PDF p.3,该页包含论文的主要方法/架构图。 核对论文
A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity 关键实验结果图/表
关键实验结果图/表|来源:《A Lite Robust Semantic Communication (LRSC) Scheme via Enhancing Fidelity》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026任务导向推理

A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference

DOI / IEEE 页面

作者Ali Krayani; Felix Obite; Atm S. Alam; Lucio Marcenaro; Arumugam Nallanathan; Carlo S. Regazzoni

出版信息Vol. 12 · pp. 5014-5031

DOI / IEEE ID10.1109/tccn.2025.3637049 / 11271003

通信位置多用户接入、广播或中继

一句话主旨:Active-SGDBN 面向任务导向推理,把问题放在“多用户接入、广播或中继”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:未来的无线网络需要具有高可靠性和低延迟的智能数据密集型服务,这促使语义感知通信成为一种变革性的范式。 PDF p.1
  2. 仍然存在的问题:针对基于无人机的NOMA网络资源分配的NP难问题,提出了一种新的主动语义广义动态贝叶斯网络(Active-SGDBN)框架。 PDF p.1
  3. 为什么已有方法解决不了:把单用户语义编解码器逐个复制给多个用户,会忽略共享内容、异构信道、干扰和公平性,因而不能直接得到频谱有效的网络方案。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:针对基于无人机的NOMA网络资源分配的NP难问题,提出了一种新的主动语义广义动态贝叶斯网络(Active-SGDBN)框架。 PDF p.1
  6. 方案为何可能有效:具体来说,我们优化的功率分配的基础上无人机的移动性,以最大限度地提高系统的总速率,同时通过无监督聚类和贝叶斯推理编码的语义结构。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,Active-SGDBN在总速率和误比特率(BER)方面均优于基准方案,性能接近最优,验证了其有效性和推广能力。 PDF p.1

方法与端到端信息流

针对基于无人机的NOMA网络中资源分配的NP难问题,提出了一种新的主动语义广义动态贝叶斯网络(Active-SGDBN)框架,该框架基于无人机移动性优化功率分配,以最大化系统总速率,同时通过无监督聚类和贝叶斯推理对语义结构进行编码。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Active-SGDBN:针对基于无人机的NOMA网络中资源分配的NP难问题,提出了一种新的主动语义广义动态贝叶斯网络(Active-SGDBN)框架,该框架基于无人机移动性优化功率分配,以最大化系统总速率,同时通过无监督聚类和贝叶斯推理对语义结构进行编码。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:研究多个用户共享频谱、干扰或中继时的语义相关性与异构信道。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Active-SGDBN 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.11

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.11

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.11

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselinePPO、DDPG

评价指标QoE、throughput、energy efficiency、BER、PER

信道与工作点NOMA

实验小节中明确出现的比较对象包括PPO、DDPG;指标包括QoE、throughput、energy efficiency、BER、PER;信道/链路条件包括NOMA。 PDF p.11

仿真结果表明,Active-SGDBN在总速率和误比特率(BER)方面均优于基准方案,性能接近最优,验证了其有效性和推广能力。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“多用户接入、广播或中继”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference 架构/方法图
架构/方法图|来源:《A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference》,原 PDF p.4,Fig. 1 The main framework of the proposed active inference-based semantic-aware resource allocation (Active-SGDBN)。 核对论文
A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference 关键实验结果图/表
关键实验结果图/表|来源:《A Semantic-Aware Resource Allocation for Emerging AAV-NOMA Networks Empowered by Bayesian Active Inference》,原 PDF p.14,Fig. 13 Performance evaluation in terms of (a) average sum-rate and (b) average BER versus the number of training examples (dictionary size)。 核对论文
核心纳入2026视频传输、生成或控制

Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video

DOI / IEEE 页面

作者Haixiao Gao; Mengying Sun; Xiaodong Xu; Xiqi Cheng; Shujun Han; Ping Zhang

出版信息Vol. 12 · pp. 427-442

DOI / IEEE ID10.1109/tccn.2025.3561304 / 10966439

通信位置自适应联合信源信道编码

一句话主旨:AIGPV 面向视频传输、生成或控制,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:人工智能生成的全景视频(AIGPV)的发展为用户在6G沉浸式通信场景中的多样化需求提供了潜在的解决方案。 PDF p.1
  2. 仍然存在的问题:然而,在资源受限的条件下确保用户的体验质量(QoE)仍然是一个重大挑战。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:在本文中,我们介绍了一个跨模态的语义通信传输方案的移动-AIGPV。 PDF p.1
  6. 方案为何可能有效:此外,我们设计了一个跨模态的摆动Transformer块(CMSTB),以提高深JSCC的性能。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,相比直接传输高分辨率视频的语义通信方案,我们提出的PVSR-JSCC不仅减少了36.7%的带宽消耗,但也降低了42.8%的语义模型的计算复杂度。 PDF p.1

方法与端到端信息流

本文提出了一种面向移动AIGPV的跨模态语义通信传输方案,并设计了跨模态转换器Transformer模块(CMSTB)来增强JSCC的深层性能。 PDF p.1

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 AIGPV:本文提出了一种面向移动AIGPV的跨模态语义通信传输方案,并设计了跨模态转换器Transformer模块(CMSTB)来增强JSCC的深层性能。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:AIGPV 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

为了确保公平性,APVST和APVST(w/o text)方案的CBR设置为0.018,而其他方案的CBR设置为0.013。 PDF p.10

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景HEVC

BaselineNTSCC、HEVC、H.264、H.265、LDPC、Swin Transformer、ViT、DeepSC、JSCC、CLIP

评价指标PSNR、SSIM、mAP、QoE、latency、FLOPs、semantic similarity

信道与工作点Rayleigh、wireless channel、SNR of 29.7 dB、SNR of 10 dB

数据集为HEVC;实验小节中明确出现的比较对象包括NTSCC、HEVC、H.264、H.265、LDPC、Swin Transformer、ViT、DeepSC、JSCC、CLIP;指标包括PSNR、SSIM、mAP、QoE、latency、FLOPs、semantic similarity;信道/链路条件包括Rayleigh、wireless channel;正文可定位的代表性工作点有SNR of 29.7 dB、SNR of 10 dB。 PDF p.2

仿真结果表明,相比直接传输高分辨率视频的语义通信方案,我们提出的PVSR-JSCC不仅减少了36.7%的带宽消耗,但也降低了42.8%的语义模型的计算复杂度。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video 架构/方法图
架构/方法图|来源:《Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video》,原 PDF p.4,Fig. 2 The framework of our proposed PVSR-JSCC。 核对论文
Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video 关键实验结果图/表
关键实验结果图/表|来源:《Adaptive Cross-Modal Super-Resolution Semantic Communication for Mobile AI-Generated Panoramic Video》,原 PDF p.14,Fig. 12 Visual comparison examples of test SNR at 10dB, with WS-SSIM metric。 核对论文
核心纳入2026视频传输、生成或控制

Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission

DOI / IEEE 页面

作者Xiaoxuan Qi; Nan Ma; Yijing Lin; Wenkai Liu; Zhicheng Bao; Ping Zhang

出版信息Vol. 12 · pp. 6175-6190

DOI / IEEE ID10.1109/tccn.2026.3662328 / 11381603

通信位置自适应联合信源信道编码

一句话主旨:FIVSSC 面向视频传输、生成或控制,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:提出了一种基于深度联合信源信道编码(JSCC)的视频符号语义通信系统(FIVSSC),通过只传输选定的语义关键帧来降低处理延迟。 PDF p.1
  2. 仍然存在的问题:现有的视频语义通信方案主要关注在受限的信道带宽下确保高视频重构质量,而与数字通信系统的及时性和兼容性仍然是需要进一步探索的开放性挑战。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:提出了一种基于深度联合信源信道编码(JSCC)的视频符号语义通信系统(FIVSSC),通过只传输选定的语义关键帧来降低处理延迟。 PDF p.1
  6. 方案为何可能有效:综上所述,对于6G通信中的视频语义通信,我们面临以下问题:问题1:如何让视频语义通信系统更好地兼容传统数字通信系统? PDF p.2
  7. 作者希望证明什么:仿真实验结果表明,与其他语义视频通信和传统视频通信方案相比,该方案具有更高的重建质量和更高的实时性。 PDF p.1

方法与端到端信息流

本文提出了一种基于深度联合信源信道编码(JSCC)的视频符号语义通信系统(FIVSSC),通过只传输选定的语义关键帧来降低处理延迟。综上所述,对于6G通信中的视频语义通信,我们面临以下问题:问题1:如何使视频语义通信系统与传统数字通信系统更好地兼容? PDF p.1 PDF p.2

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 FIVSSC:本文提出了一种基于深度联合信源信道编码(JSCC)的视频符号语义通信系统(FIVSSC),通过只传输选定的语义关键帧来降低处理延迟。综上所述,对于6G通信中的视频语义通信,我们面临以下问题:问题1:如何使视频语义通信系统与传统数字通信系统更好地兼容?
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:FIVSSC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

语义提取器和JSCC编码器的压缩比是一个固定值γn,定义为dn中的符号数除以cn中的符号数。 PDF p.6

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.10

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景UVG、HEVC

BaselineDeepJSCC、HEVC、H.264、H.265、LDPC、Polar、Minnen、DVC、JSCC、SSCC

评价指标PSNR、SSIM、MS-SSIM、MSE、accuracy、latency、FLOPs

信道与工作点AWGN、Rayleigh、NOMA、MIMO、channel estimation、fading channel、SNR = 15dB、SNR = 10dB、SNR of 12 dB、SNR = 0dB

数据集为UVG、HEVC;实验小节中明确出现的比较对象包括DeepJSCC、HEVC、H.264、H.265、LDPC、Polar、Minnen、DVC、JSCC、SSCC;指标包括PSNR、SSIM、MS-SSIM、MSE、accuracy、latency、FLOPs;信道/链路条件包括AWGN、Rayleigh、NOMA、MIMO、channel estimation、fading channel;正文可定位的代表性工作点有SNR = 15dB、SNR = 10dB、SNR of 12 dB、SNR = 0dB。 PDF p.10

仿真实验结果表明,与其他语义视频通信和传统视频通信方案相比,该方案具有更高的重建质量和更高的实时性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission 架构/方法图
架构/方法图|来源:《Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission》,原 PDF p.14,Fig. 13 The hardware components of the symbolic semantic communication prototype platform. An external clock distributor is used for synchronization。 核对论文
Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission 关键实验结果图/表
关键实验结果图/表|来源:《Adaptive Frame Interpolation Symbolic Semantic Communication for Low Latency Wireless Video Transmission》,原 PDF p.9,Fig. 6 MS-SSIM and PSNR performance comparison versus CBR over the AWGN channel at the SNR = 15dB. The traditional schemes are based on BPSK。 核对论文
核心纳入2026图像传输、压缩或生成

Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation

DOI / IEEE 页面

作者Jiarun Ding; Peiwen Jiang; Chao-Kai Wen; Shi Jin

出版信息Vol. 12 · pp. 8141-8155

DOI / IEEE ID10.1109/tccn.2026.3692647 / 11516213

通信位置自适应联合信源信道编码

一句话主旨:ASCViT 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:人工智能的迅速发展促进了语义通信,尤其是无线图像传输的显著进步。 PDF p.1
  2. 仍然存在的问题:然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。 PDF p.1
  6. 方案为何可能有效:具体而言,该方案根据对象和特征点检测结果对图像区域进行优先级排序。 PDF p.1
  7. 作者希望证明什么:然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。 PDF p.1

方法与端到端信息流

然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。具体地说,该方案的优先级图像区域的基础上的对象和特征点检测结果。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 ASCViT:然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。具体地说,该方案的优先级图像区域的基础上的对象和特征点检测结果。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:ASCViT 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景COCO

BaselineDeepJSCC、BPG、LDPC、ViT、YOLO、FCN、JSCC、OFDM

评价指标PSNR、SSIM、MSE、IoU、PER

信道与工作点AWGN、Rayleigh、OFDM、channel estimation、fading channel、at 0 dB SNR、At -5 dB SNR

数据集为COCO;实验小节中明确出现的比较对象包括DeepJSCC、BPG、LDPC、ViT、YOLO、FCN、JSCC、OFDM;指标包括PSNR、SSIM、MSE、IoU、PER;信道/链路条件包括AWGN、Rayleigh、OFDM、channel estimation、fading channel;正文可定位的代表性工作点有at 0 dB SNR、At -5 dB SNR。 PDF p.9

然而,大多数现有的方法集中在丢弃不太重要的语义特征,以减少带宽消耗。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation 架构/方法图
架构/方法图|来源:《Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation》,原 PDF p.13,Fig. 12 System framework and hardware components of the ICP。 核对论文
Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation 关键实验结果图/表
关键实验结果图/表|来源:《Adaptive Semantic Image Transmission With Object Prioritization and Over-the-Air Validation》,原 PDF p.14,Fig. 14 Comparison between performance measured in real channels by controlling noise manually and that in simulated AWGN channels. “AWGN” indicates the results are from AWGN channel simulations and “Real” indicates the results are measured in practise。 核对论文
核心纳入2026点云/三维场景传输

Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission

DOI / IEEE 页面

作者Wanting Yang; Zehui Xiong; Qianqian Yang; Ping Zhang; Mérouane Debbah; Rahim Tafazolli

出版信息Vol. 12 · pp. 5983-5998

DOI / IEEE ID10.1109/tccn.2026.3657061 / 11361156

通信位置生成式语义信源编码

一句话主旨:PCs 面向点云/三维场景传输,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:随着自动驾驶和延展实境的快速发展,点云(PC)的高效传输变得越来越重要。 PDF p.1
  2. 仍然存在的问题:仿真结果证实了跨模态语义提取和双度量指导微调的有效性,突出了该框架在各种条件下的鲁棒性,包括低SNR,带宽限制,不同数量的2D图像和以前看不见的对象。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
  5. 本文提出什么:论文针对这一问题,提出了一种新的面向PC传输的信道自适应跨模态生成语义通信(SemCom)算法--GenSeCPC。 PDF p.1
  6. 方案为何可能有效:针对这一问题和不足,我们提出了一种新的跨模态生成式SemCom框架,称为GenSeC-PC,该框架将生成式SemCom与JSCC无缝集成。 PDF p.2
  7. 作者希望证明什么:此外,为了保证传输的鲁棒性和降低系统复杂度,我们设计了一种精简的非对称信道自适应联合语义信道编码结构,其中编码器只需要反馈平均信噪比和可用带宽。 PDF p.1

方法与端到端信息流

在这种情况下,我们提出了一种新的信道自适应跨模态生成语义通信(SemCom)的PC传输,称为GenSeCPC。针对这一差距,我们提出了一种新的跨模态生成SemCom框架,称为GenSeC-PC,无缝集成生成SemCom与JSCC。 PDF p.1 PDF p.2

输入输入是点云/三维场景传输所需的三维点、视图或场景语义。
发送端发送端采用 PCs:在这种情况下,我们提出了一种新的信道自适应跨模态生成语义通信(SemCom)的PC传输,称为GenSeCPC。针对这一差距,我们提出了一种新的跨模态生成SemCom框架,称为GenSeC-PC,无缝集成生成SemCom与JSCC。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为三维重建、渲染或下游感知结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:PCs 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

而且,正如预期的那样,AWGN信道下的性能普遍优于Rayleigh衰落信道下的性能。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景ShapeNet

BaselineLDPC、SAC、JSCC、PointNet

评价指标MSE、accuracy、precision、latency、FPS、IoU、PER

信道与工作点AWGN、Rayleigh、wireless channel、fading channel、SNR = 20 dB、SNR = -20 dB、SNR = -5 dB、SNR = 15 dB、SNR of 15 dB、ber of 2

数据集为ShapeNet;实验小节中明确出现的比较对象包括LDPC、SAC、JSCC、PointNet;指标包括MSE、accuracy、precision、latency、FPS、IoU、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、fading channel;正文可定位的代表性工作点有SNR = 20 dB、SNR = -20 dB、SNR = -5 dB、SNR = 15 dB、SNR of 15 dB、ber of 2。 PDF p.10

此外,为了保证传输的鲁棒性和降低系统复杂度,我们设计了一种精简的非对称信道自适应联合语义信道编码结构,其中编码器只需要反馈平均信噪比和可用带宽。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission 架构/方法图
架构/方法图|来源:《Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission》,原 PDF p.4,Fig. 1 Illustration of channel-adaptive cross-modal GenSeC-PC framework。 核对论文
Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission 关键实验结果图/表
关键实验结果图/表|来源:《Channel-Adaptive Cross-Modal Generative Semantic Communication for Point Cloud Transmission》,原 PDF p.10,Fig. 8 Performance comparison between IaKP-PointDif and PointDif。 核对论文
核心纳入2026点云/三维场景传输

Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation

DOI / IEEE 页面

作者Jingxuan Men; Mahdi Boloursaz Mashhadi; Ning Wang; Yi Ma; Mike Nilsson; Rahim Tafazolli

出版信息Vol. 12 · pp. 7909-7925

DOI / IEEE ID10.1109/tccn.2026.3689868 / 11505940

通信位置自适应联合信源信道编码

一句话主旨:Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation 面向点云/三维场景传输,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:立体媒体因其在3D可视化、虚拟现实、虚拟实境和沉浸式媒体中的广泛应用而受到关注。 PDF p.1
  2. 仍然存在的问题:但是,考虑到立体媒体对之间的相关性,立体媒体通信将引入冗余。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
  5. 本文提出什么:为此,提出了一种新的双视角深度联合信源-信道编码方案,该方案能够有效地提取和传输表示视角间相关性的语义特征,从而在提高重建质量的同时减少冗余。 PDF p.1
  6. 方案为何可能有效:通过利用视图之间的差异,立体媒体可以促进3D结构构建并增强空间感知。 PDF p.1
  7. 作者希望证明什么:相比于基准测试,基于WSNM的重构方法在不同条件下均能保持重构质量,可获得更高的峰值信噪比(Peak Signal to Noise Ratio,PSNR)和结构相似度(Structural Similarity Index,SSIM)。 PDF p.1

方法与端到端信息流

为了解决这个问题,我们提出了一种新的双视图深度联合信源信道编码方案,该方案有效地提取和传输表示视图间相关性的语义特征,从而在提高重建质量的同时减少冗余,通过利用视图之间的视差,立体媒体可以促进3D结构构建并增强空间感知。 PDF p.1

输入输入是点云/三维场景传输所需的三维点、视图或场景语义。
发送端发送端采用 Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation:为了解决这个问题,我们提出了一种新的双视图深度联合信源信道编码方案,该方案有效地提取和传输表示视图间相关性的语义特征,从而在提高重建质量的同时减少冗余,通过利用视图之间的视差,立体媒体可以促进3D结构构建并增强空间感知。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为三维重建、渲染或下游感知结果。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

子图(a)-(B)对应于AWGN信道下的InStereo 2k,(c)-(d)对应于Cityscapes,而(e)-(f)对应于Rayleigh衰落信道下的InStereo 2k,(g)-(h)对应于Cityscapes。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Cityscapes

BaselineSwinJSCC、ADJSCC、JSCC、OFDM

评价指标PSNR、SSIM、accuracy、latency、FLOPs、FPS、PER

信道与工作点AWGN、Rayleigh、OFDM、channel estimation、imperfect CSI、fading channel、SNR = 10 dB

数据集为Cityscapes;实验小节中明确出现的比较对象包括SwinJSCC、ADJSCC、JSCC、OFDM;指标包括PSNR、SSIM、accuracy、latency、FLOPs、FPS、PER;信道/链路条件包括AWGN、Rayleigh、OFDM、channel estimation、imperfect CSI、fading channel;正文可定位的代表性工作点有SNR = 10 dB。 PDF p.10

相比于基准测试,基于WSNM的重构方法在不同条件下均能保持重构质量,可获得更高的峰值信噪比(Peak Signal to Noise Ratio,PSNR)和结构相似度(Structural Similarity Index,SSIM)。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation 架构/方法图
架构/方法图|来源:《Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation》,原 PDF p.4,Fig. 1 The proposed semantic communication framework for stereo media transmission (SSC Version 1)。 核对论文
Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation 关键实验结果图/表
关键实验结果图/表|来源:《Channel-Adaptive Semantic Communication for Stereoscopic Media: Design and Prototype Implementation》,原 PDF p.12,Fig. 14 (a), the setup consists of two cameras the same GPU, and the results are presented in 核对论文
核心纳入2026图像传输、压缩或生成

Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI

DOI / IEEE 页面

作者Zhiyue Zhang; Shaojie Wang; Junsheng Mu; Yalong Hu; Li Li

出版信息Vol. 12 · pp. 10093-10105

DOI / IEEE ID10.1109/tccn.2026.3705851 / 11573832

通信位置数字语义编码与物理层接口

一句话主旨:SemCom 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:智能体人工智能的发展依赖于具身感知与物理世界的交互,这就需要下一代能够进行实时、高保真视觉传输的网络。 PDF p.1
  2. 仍然存在的问题:然而,传统的数字通信结构以忠实的比特级重构为目标,由于香农极限而遭受性能瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:针对这些问题,提出了一种基于潜在流匹配的生成式信源-信道联合编码框架。 PDF p.1
  6. 方案为何可能有效:更具体地说,在发射机处通过显式频域解耦和多级离散化来设计小波增强的鲁棒语义表示。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,与扩散驱动的SemCom算法相比,该算法在峰值信噪比(PSNR)、结构相似度指数(SSIM)和感知图像块相似度(LPIPS)等性能指标上均优于扩散驱动的SemCom算法,同时显著降低了推理延迟。 PDF p.1

方法与端到端信息流

针对这些问题,本文提出了一种基于潜在流匹配的生成式信源信道联合编码框架,通过在发送端进行显式频域解耦和多级离散化,设计了一种小波增强的鲁棒语义表示。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SemCom:针对这些问题,本文提出了一种基于潜在流匹配的生成式信源信道联合编码框架,通过在发送端进行显式频域解耦和多级离散化,设计了一种小波增强的鲁棒语义表示。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

小波增强的残差矢量量化(RVQ)模块的鲁棒语义表示的设计。 独立判断:SemCom 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.3

初始学习速率设定为2×10-4,随后是用于动态调整的余弦退火时间表。 PDF p.9

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.8

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景ImageNet

BaselineDeepJSCC、ELIC、JSCC

评价指标PSNR、SSIM、LPIPS、accuracy、latency、PER

信道与工作点AWGN、Rayleigh、Rician、wireless channel、fading channel、SNR = 5 dB、CBR = 1/12

数据集为ImageNet;实验小节中明确出现的比较对象包括DeepJSCC、ELIC、JSCC;指标包括PSNR、SSIM、LPIPS、accuracy、latency、PER;信道/链路条件包括AWGN、Rayleigh、Rician、wireless channel、fading channel;正文可定位的代表性工作点有SNR = 5 dB、CBR = 1/12。 PDF p.8

仿真结果表明,与扩散驱动的SemCom算法相比,该算法在峰值信噪比(PSNR)、结构相似度指数(SSIM)和感知图像块相似度(LPIPS)等性能指标上均优于扩散驱动的SemCom算法,同时显著降低了推理延迟。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI 架构/方法图
架构/方法图|来源:《Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI》,原 PDF p.4,Fig. 2 End-to-end architecture of the proposed generative JSCC framework。 核对论文
Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI 关键实验结果图/表
关键实验结果图/表|来源:《Channel-Aware Latent Flow-Matching Semantic Communication for Agentic AI》,原 PDF p.10,Fig. 7 Performance comparisons of PSNR, SSIM, and LPIPS versus SNR for the proposed scheme under different CBR。 核对论文
核心纳入2026图像传输、压缩或生成

Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication

DOI / IEEE 页面

作者Simy M. Baby; E. S. Gopi

出版信息Vol. 12 · pp. 1892-1904

DOI / IEEE ID10.1109/tccn.2025.3598379 / 11124273

通信位置任务导向联合信源信道设计

一句话主旨:CLDA 面向图像传输、压缩或生成,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:作为接收端处的预期任务的用于分类的语义通信涉及对消息信号进行编码以在接收端处的准确性方面最大化分类器的性能。 PDF p.1
  2. 仍然存在的问题:虽然解耦预训练将编码器和分类器设计分开,但它在适应变化的任务和信道条件方面经常面临限制。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:我们提出了一种基于复值线性判别分析(CLDA)的编码方法,提高了类的歧视和功能的可解释性。 PDF p.1
  6. 方案为何可能有效:该方法通过使用诸如最小均方误差(MMSE)之类的传统检测器来恢复所传输的特征,从而保持了去耦并增强了对信道变化的鲁棒性,使得能够无缝地集成到现有通信系统中。 PDF p.1
  7. 作者希望证明什么:实验结果验证了所提CLDA+CI框架的有效性,其分类准确率达到96.3%。 PDF p.1

方法与端到端信息流

我们提出了一种基于复值线性鉴别分析(CLDA)的编码方法,该方法通过使用传统的检测器(如最小均方误差(MMSE))来恢复传输的特征,从而保持解耦并增强对信道变化的鲁棒性,从而能够无缝集成到现有的通信系统中。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 CLDA:我们提出了一种基于复值线性鉴别分析(CLDA)的编码方法,该方法通过使用传统的检测器(如最小均方误差(MMSE))来恢复传输的特征,从而保持解耦并增强对信道变化的鲁棒性,从而能够无缝集成到现有的通信系统中。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:CLDA 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineIB

评价指标accuracy、recall、precision、classification accuracy、PER

信道与工作点AWGN、Rayleigh、MIMO、fading channel、at 0 dB SNR、at 0dB SNR、at 30dB SNR

实验小节中明确出现的比较对象包括IB;指标包括accuracy、recall、precision、classification accuracy、PER;信道/链路条件包括AWGN、Rayleigh、MIMO、fading channel;正文可定位的代表性工作点有at 0 dB SNR、at 0dB SNR、at 30dB SNR。 PDF p.8

实验结果验证了所提CLDA+CI框架的有效性,其分类准确率达到96.3%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication 架构/方法图
架构/方法图|来源:《Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication》,原 PDF p.4,Fig. 2 (a) Proposed methodology on LDA/KLDA based semantic communication (b) Extension to Multi-task based semantic communication using the proposed technique (c) Extension to Multi-source based semantic communication using the proposed technique。 核对论文
Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Complex Valued Linear Discriminant Analysis on mmWave Radar Face Signatures for Task-Oriented Semantic Communication》,原 PDF p.11,Fig. 3 show the results of experiments conducted using synthetic toy 核对论文
核心纳入2026视频传输、生成或控制

Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication

DOI / IEEE 页面

作者Lei Teng; Senran Fan; Chen Dong; Haotai Liang; Zhicheng Bao; Xiaodong Xu; Rui Meng; Ping Zhang

出版信息Vol. 12 · pp. 9279-9296

DOI / IEEE ID10.1109/tccn.2026.3705844 / 11573813

通信位置数字语义编码与物理层接口

一句话主旨:Conquering High Packet-Loss Erasure 面向视频传输、生成或控制,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信与联合语义信道编码鲁棒地传输不同的数据模态,但面临的挑战,在减轻语义信息丢失,由于在基于分组的系统中的数据包丢失。 PDF p.1
  2. 仍然存在的问题:然而,传统通信系统在物理层的传输容量越来越接近香农极限。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:在当前协议下,丢弃具有错误的分组,防止接收端利用错误的语义数据进行鲁棒解码。 PDF p.1
  6. 方案为何可能有效:本文的主要工作如下:1)提出了一种基于Swin Transformer的抗丢包语义视频通信系统。 PDF p.2
  7. 作者希望证明什么:为了改进压缩,采用了公共-个体分解方法,对个体信息应用下采样以最小化冗余。 PDF p.1

方法与端到端信息流

在现有的协议中,有错误的数据包会被丢弃,使得接收端不能利用错误的语义数据进行鲁棒解码。本文的主要工作概括如下:1)提出了一种基于Swin Transformer的抗丢包语义视频通信系统。 PDF p.1 PDF p.2

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 Conquering High Packet-Loss Erasure:在现有的协议中,有错误的数据包会被丢弃,使得接收端不能利用错误的语义数据进行鲁棒解码。本文的主要工作概括如下:1)提出了一种基于Swin Transformer的抗丢包语义视频通信系统。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Conquering High Packet-Loss Erasure 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

GOP大小被设置为4,并且整个GOP的帧被随机裁剪为256 × 256像素。 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

说明了在丢包信道下,MS-SSIM和PSNR性能与丢包率之间的关系。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.12

语义 decoder 实际面对的是:未丢失的 semantic packets、packet-loss mask,以及由 3D CNN 恢复的缺失语义特征。 PDF p.12

是否真正处理离散变量出错:是:训练/测试显式施加高比例 packet erasure,并用语义交织、loss mask 与 3D CNN 恢复缺失信息。

实验设置与主要结论

数据集/场景UVG、HEVC

BaselineDeepJSCC、VVC、HEVC、H.264、H.265、LDPC、Swin Transformer、SwinJSCC、JSCC、ETC

评价指标PSNR、SSIM、MS-SSIM、FPS、throughput、SER、PER

信道与工作点packet loss、erasure、SNR of 26.169 dB、CBR of 0.0078

数据集为UVG、HEVC;实验小节中明确出现的比较对象包括DeepJSCC、VVC、HEVC、H.264、H.265、LDPC、Swin Transformer、SwinJSCC、JSCC、ETC;指标包括PSNR、SSIM、MS-SSIM、FPS、throughput、SER、PER;信道/链路条件包括packet loss、erasure;正文可定位的代表性工作点有SNR of 26.169 dB、CBR of 0.0078。 PDF p.11

为了改进压缩,采用了公共-个体分解方法,对个体信息应用下采样以最小化冗余。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。

Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication 架构/方法图
架构/方法图|来源:《Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication》,原 PDF p.6,Fig. 4 The overall architecture of our MSTVSC for wireless video transmission。 核对论文
Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Conquering High Packet-Loss Erasure: MoE Swin Transformer-Based Video Semantic Communication》,原 PDF p.11,Fig. 11 The relationship between PSNR and MS-SSIM performance of different encoding-decoding schemes and CBR at a packet loss rate of 0 is depicted。 核对论文
核心纳入2026任务导向推理

Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources

DOI / IEEE 页面

作者Fuzhou Peng; Xijun Wang; Xiang Chen

出版信息Vol. 12 · pp. 4277-4289

DOI / IEEE ID10.1109/tccn.2025.3637040 / 11268476

通信位置资源分配与跨层优化

一句话主旨:AoCI 面向任务导向推理,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:随着人们对实时通信需求的不断增长,目标导向通信已经成为一种强调信息的重要性及其与特定目标的相关性的范式。 PDF p.1
  2. 仍然存在的问题:然而,传统的通信系统设计主要集中在信息比特的可靠传输和精确重构上。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:在信道时延分布未知的情况下,提出了一种在线调度策略,该策略的性能与离线策略的性能渐近接近。 PDF p.1
  6. 方案为何可能有效:对于在线的情况下,我们评估所提出的在线政策,通过检查各种系统配置下的学习参数的收敛行为。 PDF p.2
  7. 作者希望证明什么:仿真结果验证了所提出的离线策略可以实现显着的性能增益的平均成本相比,其他基线政策。 PDF p.1

方法与端到端信息流

当信道延迟分布未知时,我们提出了一种在线调度策略,该策略的性能渐近地接近离线调度策略;对于在线情况,我们通过考察学习参数在各种系统配置下的收敛行为来评估所提出的在线调度策略。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 AoCI:当信道延迟分布未知时,我们提出了一种在线调度策略,该策略的性能渐近地接近离线调度策略;对于在线情况,我们通过考察学习参数在各种系统配置下的收敛行为来评估所提出的在线调度策略。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

系统/理论层变量;论文未定义统一 payload bitstream 独立判断:AoCI 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标MSE、throughput、AoI、AoII、PER

信道与工作点wireless channel

指标包括MSE、throughput、AoI、AoII、PER;信道/链路条件包括wireless channel。 PDF p.2

仿真结果验证了所提出的离线策略可以实现显着的性能增益的平均成本相比,其他基线政策。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources 架构/方法图
架构/方法图|来源:《Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources》,原 PDF p.10,Fig. 7 Comparison of average cost vs. pr under different settings。 核对论文
Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources 关键实验结果图/表
关键实验结果图/表|来源:《Content-Aware Scheduling Policy for Goal-Oriented Status Updating With Multiple Sources》,原 PDF p.11,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成

Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems

DOI / IEEE 页面

作者Xiaomin Cai; Fengyuan Tian; Yunfan Zhang; Sergei Popov; Gan Zheng; Tianhua Xu

出版信息Vol. 12 · pp. 6942-6954

DOI / IEEE ID10.1109/tccn.2026.3677171 / 11455253

通信位置自适应联合信源信道编码

一句话主旨:CAE 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:随着数据流量的指数增长,光纤通信系统需要先进的方法来优化传输效率,同时保持信号完整性。 PDF p.1
  2. 仍然存在的问题:本文提出了一种新的基于卷积自动编码器(CAE)的光纤网络语义通信框架,具有可调的压缩率,平衡带宽效率和传输质量。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:本文提出了一种新的基于卷积自动编码器(CAE)的光纤网络语义通信框架,具有可调的压缩率,平衡带宽效率和传输质量。 PDF p.1
  6. 方案为何可能有效:总的来说,所提出的基于CAE的光学语义通信框架通过在物理上真实的EGN模型下联合解决语义压缩和信道感知去噪来区分自己,提供可扩展的压缩控制,更高的重建保真度,以及比无线和光学领域中现有的基于深度学习的通信系统更低的计算成本。 PDF p.2
  7. 作者希望证明什么:新的数据集只需要很少的训练时间就可以达到接近甚至稍微超过MNIST结果的性能。 PDF p.1

方法与端到端信息流

本文提出了一种基于卷积自动编码器(CAE)的光纤语义通信框架,该框架具有可调的压缩率,平衡了带宽效率和传输质量。总体而言,所提出的基于CAE的光语义通信框架通过在物理上真实的EGN模型下联合解决语义压缩和信道感知去噪,提供可扩展的压缩控制,与无线和光领域现有的基于深度学习的通信系统相比,具有更高的重建保真度和更低的计算成本。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 CAE:本文提出了一种基于卷积自动编码器(CAE)的光纤语义通信框架,该框架具有可调的压缩率,平衡了带宽效率和传输质量。总体而言,所提出的基于CAE的光语义通信框架通过在物理上真实的EGN模型下联合解决语义压缩和信道感知去噪,提供可扩展的压缩控制,与无线和光领域现有的基于深度学习的通信系统相比,具有更高的重建保真度和更低的计算成本。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:CAE 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

第一个是CAE-N,其中N表示压缩比,用于语义压缩,压缩率范围从2:1到98:1。 PDF p.2

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

这些分量在通过光信道传输之前使用16-QAM星座进行调制。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景MNIST

BaselineQAM、FEC、Reed-Solomon

评价指标PSNR、SSIM、MSE、accuracy、recall、precision、latency

信道与工作点AWGN、NOMA、SNR of 5 dB、SNR of 15 dB

数据集为MNIST;实验小节中明确出现的比较对象包括QAM、FEC、Reed-Solomon;指标包括PSNR、SSIM、MSE、accuracy、recall、precision、latency;信道/链路条件包括AWGN、NOMA;正文可定位的代表性工作点有SNR of 5 dB、SNR of 15 dB。 PDF p.8

新的数据集只需要很少的训练时间就可以达到接近甚至稍微超过MNIST结果的性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems 架构/方法图
架构/方法图|来源:《Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems》,原 PDF p.9,Fig. 4 CAE-4: Comparison of reconstruction effects. Top: Original image; Middle: Image after channel; Bottom: Reconstructed image。 核对论文
Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems 关键实验结果图/表
关键实验结果图/表|来源:《Convolutional Autoencoder-Enhanced Semantic Communication in Optical Fiber Systems》,原 PDF p.10,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成

Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence

DOI / IEEE 页面

作者Yunze Zhang; Chaowei Wang; Wenyuan Wang; Zhi Zhang; Wenjun Xu; Fan Jiang; Lexi Xu

出版信息Vol. 12 · pp. 8402-8414

DOI / IEEE ID10.1109/tccn.2026.3695848 / 11534317

通信位置生成式语义信源编码

一句话主旨:GenAI 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“有限星座/标准数字波形接口”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:为了提高基于空间的嵌入式边缘代理在恶劣信道环境中的感知连续性以及在严格的SWaP(大小、重量和功耗)约束下高级生成AI(GenAI)架构的计算能量平衡,提出了一种基于混合Mamba-Transformer架构的语义通信框架。 PDF p.1
  2. 仍然存在的问题:然而,尽管数据生成的爆炸性增长,卫星代理面临严格的体现在“感知-传输-决策”循环的限制。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了提高基于空间的嵌入式边缘代理在恶劣信道环境中的感知连续性以及在严格的SWaP(大小、重量和功耗)约束下高级生成AI(GenAI)架构的计算能量平衡,提出了一种基于混合Mamba-Transformer架构的语义通信框架。 PDF p.1
  6. 方案为何可能有效:值得注意的是,制定的模型表现出上级跨域泛化,使关键的拓扑语义的精确重建。 PDF p.1
  7. 作者希望证明什么:在不同数据集上的仿真结果表明,该方案在PSNR,MS-SSIM和LPIPS指标方面明显优于传统的BPG+LDPC方案和最先进的深度学习方法。 PDF p.1

方法与端到端信息流

增强恶劣信道环境中基于空间的嵌入式边缘代理的感知连续性,以及严格SWaP下高级生成AI(GenAI)架构的计算能量平衡(Size,Weight,and Power)约束,提出了一种基于混合Mamba-Transformer架构的语义通信框架,该模型具有上级跨领域泛化能力,使得能够精确地重建关键拓扑语义。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 GenAI:增强恶劣信道环境中基于空间的嵌入式边缘代理的感知连续性,以及严格SWaP下高级生成AI(GenAI)架构的计算能量平衡(Size,Weight,and Power)约束,提出了一种基于混合Mamba-Transformer架构的语义通信框架,该模型具有上级跨领域泛化能力,使得能够精确地重建关键拓扑语义。
实际发送实际发送对象是有限星座符号、OFDM/OTFS 资源或受保护数据包。
信道信道作用方式按“类别 2:语义特征映射为调制符号或编码包”解释。
接收端接收端从均衡或 soft demodulation 后的符号,再恢复语义表示开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:有限星座/标准数字波形接口

利用SSM的线性计算复杂性,Mamba模块可以高效地对高分辨率特征地图进行建模,以捕获长距离的空间依赖性,例如山脉、河道和城市布局,而不会产生过多的内存开销。 独立判断:GenAI 的主传输单位应归为“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.4

此外,k表示传输符号的数量,信道带宽比(CBR)定义为k/(H × W × 3)。 PDF p.4

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 2:语义特征映射为调制符号或编码包

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 2:语义特征映射为调制符号或编码包”解释信道作用点。 本调研据此归为“类别 2:语义特征映射为调制符号或编码包”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景Kodak、DIV2K

BaselineDeepJSCC、BPG、LDPC、SwinJSCC、ADJSCC、JSCC、CLIP

评价指标PSNR、SSIM、MS-SSIM、LPIPS、MSE、accuracy、latency、FLOPs、semantic similarity、PER

信道与工作点SNR = 4 dB、SNR of 4 dB、CBR of 1/12、CBR = 1/12

数据集为Kodak、DIV2K;实验小节中明确出现的比较对象包括DeepJSCC、BPG、LDPC、SwinJSCC、ADJSCC、JSCC、CLIP;指标包括PSNR、SSIM、MS-SSIM、LPIPS、MSE、accuracy、latency、FLOPs、semantic similarity、PER;正文可定位的代表性工作点有SNR = 4 dB、SNR of 4 dB、CBR of 1/12、CBR = 1/12。 PDF p.8

在不同数据集上的仿真结果表明,该方案在PSNR,MS-SSIM和LPIPS指标方面明显优于传统的BPG+LDPC方案和最先进的深度学习方法。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence 架构/方法图
架构/方法图|来源:《Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence》,原 PDF p.5,Fig. 3 Implementation of the proposed Mamba-Transformer satellite image transmission framework。 核对论文
Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence 关键实验结果图/表
关键实验结果图/表|来源:《Cross-Domain Semantic Image Communication Empowered by LEO Embodied Intelligence》,原 PDF p.9,Fig. 5 (a)∼(c) PSNR, (d)∼(f) MS-SSIM, and (g)∼(i) LPIPS performance of different models versus the SNR over the satellite-terrestrial channel across CLIC2021, Kodak, and DIV2K datasets with target CBR of 1/12。 核对论文
核心纳入2026图像传输、压缩或生成

D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models

DOI / IEEE 页面

作者Bilal Khalid; Jaroslaw E. Prilepsky; Sergei K. Turitsyn; Pedro Freire

出版信息Vol. 12 · pp. 9114-9129

DOI / IEEE ID10.1109/tccn.2026.3706089 / 11574682

通信位置数字语义编码与物理层接口

一句话主旨:D-SIC 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:基于扩散模型的生成式大型人工智能模型(LAMs)在图像生成任务中表现出强大的能力。 PDF p.1
  2. 仍然存在的问题:然而,现代通信系统主要是数字的,这意味着如果没有定制的硬件,这些技术的实际实施是不可行的。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:在本文中,我们提出了一种新的方法,语义图像通信(SIC)集成稳定级联,最近生成的LAM,到一个数字通信框架。 PDF p.1
  6. 方案为何可能有效:在本文中,我们提出了一种新的方法,语义图像通信(SIC)集成稳定级联,最近生成的LAM,到一个数字通信框架。 PDF p.1
  7. 作者希望证明什么:我们表明,D-SIC优于传统的数字图像压缩编解码器,JPEG 2000和更好的便携式图形(BPG),低密度奇偶校验(LDPC)编码的感知质量指标和能源效率。 PDF p.1

方法与端到端信息流

在本文中,我们提出了一种新的方法,语义图像通信(SIC)集成稳定级联,最近生成的LAM,到一个数字通信框架,我们提出了一个模块化的数字SIC框架的基础上SSCC,允许独立的组件优化和兼容现有的数字通信系统。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 D-SIC:在本文中,我们提出了一种新的方法,语义图像通信(SIC)集成稳定级联,最近生成的LAM,到一个数字通信框架,我们提出了一个模块化的数字SIC框架的基础上SSCC,允许独立的组件优化和兼容现有的数字通信系统。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从可能出错或缺失的离散 bit/token/index(或其 soft estimate)开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

通过大量的模拟,我们表明D-SIC在感知质量指标上超过了JPEG 2000,BPG和DeepJSCC,同时传输的比特数比JPEG 2000少4倍,比BPG少2倍,比DeepJSCC模型少14倍,其压缩比为1/6。 独立判断:D-SIC 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释信道作用点。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.10

是否真正处理离散变量出错:是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。

实验设置与主要结论

数据集/场景DIV2K、Cityscapes

BaselineDeepJSCC、JPEG、JPEG2000、BPG、LDPC、QAM、JSCC

评价指标PSNR、SSIM、LPIPS、FID、latency、energy efficiency、BER、PER

信道与工作点AWGN、Rayleigh、Rician、fading channel、SNR of 1 dB、SNR of 2 dB

数据集为DIV2K、Cityscapes;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、JPEG2000、BPG、LDPC、QAM、JSCC;指标包括PSNR、SSIM、LPIPS、FID、latency、energy efficiency、BER、PER;信道/链路条件包括AWGN、Rayleigh、Rician、fading channel;正文可定位的代表性工作点有SNR of 1 dB、SNR of 2 dB。 PDF p.10

我们表明,D-SIC优于传统的数字图像压缩编解码器,JPEG 2000和更好的便携式图形(BPG),低密度奇偶校验(LDPC)编码的感知质量指标和能源效率。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:错误模型仍主要来自仿真;码本规模、包头/FEC、真实调制和 burst error 是否与训练分布一致,需要原型或真实链路验证。

D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models 架构/方法图
架构/方法图|来源:《D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models》,原 PDF p.3,Fig. 1 A generalized representation of the generative AI-powered separation-based semantic image communication system。 核对论文
D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models 关键实验结果图/表
关键实验结果图/表|来源:《D-SIC: Energy-Efficient Digital Semantic Image Communication via Large Generative Models》,原 PDF p.11,Fig. 10 Visual comparison of reconstructions of D-SIC with DeepJSCC in Rayleigh fading channel at different SNRs。 核对论文
核心纳入2026图像传输、压缩或生成

DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations

DOI / IEEE 页面

作者Kailin Tan; Jincheng Dai; Sixian Wang; Guo Lu; Shuo Shao; Kai Niu; Wenjun Zhang; Ping Zhang

出版信息Vol. 12 · pp. 9247-9262

DOI / IEEE ID10.1109/tccn.2026.3705826 / 11573817

通信位置生成式语义信源编码

一句话主旨:DiT-JSCC 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:生成式联合信源信道编码(GenJSCC)作为一种新的深度联合信源信道编码(Deep JSCC)范式已经出现,用于在诸如超低带宽和低信噪比的极端无线信道条件下实现高保真和鲁棒的图像传输。 PDF p.1
  2. 仍然存在的问题:这种限制源于面向重建的JSCC编码器和生成解码器之间的根本不匹配,因为前者缺乏明确的语义可辨别性,并且无法提供可靠的条件提示。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:该文提出了一种新的GenJSCC骨干DiT-JSCC,它能够联合学习基于语义的表示编码器和基于扩散Transformer(DiT)的生成解码器。 PDF p.1
  6. 方案为何可能有效:具体来说,我们设计了一个语义细节的双分支编码器,自然地对齐与粗到细的条件DiT解码器,优先考虑在极端的信道条件下的语义一致性。 PDF p.1
  7. 作者希望证明什么:大量的实验表明,DiT-JSCC始终优于现有的JSCC方法在语义一致性和视觉质量,特别是在极端的制度。 PDF p.1

方法与端到端信息流

在本文中,我们提出了DiT-JSCC,一种新的GenJSCC骨干,可以联合学习语义优先表示编码器和基于扩散Transformer(DiT)的生成解码器。具体来说,我们设计了一个语义细节双分支编码器,自然地与粗到细的条件DiT解码器对齐,在极端信道条件下优先考虑语义一致性。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 DiT-JSCC:在本文中,我们提出了DiT-JSCC,一种新的GenJSCC骨干,可以联合学习语义优先表示编码器和基于扩散Transformer(DiT)的生成解码器。具体来说,我们设计了一个语义细节双分支编码器,自然地与粗到细的条件DiT解码器对齐,在极端信道条件下优先考虑语义一致性。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:DiT-JSCC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

系统效率通过信道带宽比(CBR)来量化,CBR被称为ρ并且被定义为: PDF p.3

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.10

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景ImageNet、HEVC

BaselineDeepJSCC、NTSCC、BPG、VVC、HEVC、LDPC、VTM、Swin Transformer、ViT、GAN、VAE、DVC

评价指标LPIPS、FID、DISTS、bitrate、latency、BLEU、BERTScore、PER

信道与工作点AWGN、Rayleigh、wireless channel、OFDM、fading channel、SNR = 0dB、SNR = 2dB、SNR = -1dB、SNR = 0 dB、at 0dB SNR、SNR 0 dB、SNR of 0 dB、CBR of 1/96、CBR OF 1/48

数据集为ImageNet、HEVC;实验小节中明确出现的比较对象包括DeepJSCC、NTSCC、BPG、VVC、HEVC、LDPC、VTM、Swin Transformer、ViT、GAN、VAE、DVC;指标包括LPIPS、FID、DISTS、bitrate、latency、BLEU、BERTScore、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、OFDM、fading channel;正文可定位的代表性工作点有SNR = 0dB、SNR = 2dB、SNR = -1dB、SNR = 0 dB、at 0dB SNR、SNR 0 dB、SNR of 0 dB、CBR of 1/96、CBR OF 1/48。 PDF p.10

大量的实验表明,DiT-JSCC始终优于现有的JSCC方法在语义一致性和视觉质量,特别是在极端的制度。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations 架构/方法图
架构/方法图|来源:《DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations》,原 PDF p.7,Fig. 6 The overview of the proposed coarse-to-fine CDiT model. The left part illustrates the network architecture incorporates a coarse-to-fine conditional injection strategy and a U-Net-like backbone. The right part presents the network details of the CDiT block。 核对论文
DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations 关键实验结果图/表
关键实验结果图/表|来源:《DiT-JSCC: Rethinking Deep JSCC With Diffusion Transformers and Semantic Representations》,原 PDF p.14,Fig. 7 To validate the effectiveness models, whose training datasets and native image resolutions of the proposed KC-BA in terms of RDP performance, in affect the datasets and resolution-aligned comparisons that can 核对论文
核心纳入2026图像传输、压缩或生成

Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications

DOI / IEEE 页面

作者Simone Fiorellino; Claudio Battiloro; Emilio Calvanese Strinati; Paolo Di Lorenzo

出版信息Vol. 12 · pp. 5832-5847

DOI / IEEE ID10.1109/tccn.2026.3658783 / 11366936

通信位置自适应联合信源信道编码

一句话主旨:PFE 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:在未来的人工智能原生无线网络中,独立设计和训练的深度神经网络(DNN)编码器的潜在空间之间存在不匹配,可能会由于语义信道噪声的出现而阻碍相互理解。 PDF p.1
  2. 仍然存在的问题:将语义引入通信系统带来了新的挑战,特别是以语义噪声的形式, PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这个问题,我们提出了Parseval帧均衡器(PFE),一个零拍,基于帧的语义信道均衡器,对齐异构编码器的潜在空间,而不需要系统重新训练。 PDF p.1
  6. 方案为何可能有效:所提出的架构促进了一个节能,低延迟的语义通信框架,保持异构编码器之间的语义一致性。 PDF p.2
  7. 作者希望证明什么:未来的工作可能会检查传输私有语义导频的开销,并探索在具有挑战性的均衡场景中增强鲁棒性的改进策略。 PDF p.15

方法与端到端信息流

为了解决这个问题,我们提出了Parseval帧均衡器(PFE),零拍,基于帧的语义信道均衡器,对齐异构编码器的潜在空间,而不需要系统retraining. The建议的架构促进了一个节能,低延迟的语义通信框架,保持异构编码器之间的语义一致性。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 PFE:为了解决这个问题,我们提出了Parseval帧均衡器(PFE),零拍,基于帧的语义信道均衡器,对齐异构编码器的潜在空间,而不需要系统retraining. The建议的架构促进了一个节能,低延迟的语义通信框架,保持异构编码器之间的语义一致性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:PFE 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景ImageNet

BaselineBERT

评价指标accuracy、precision、latency、classification accuracy、energy efficiency、PER

信道与工作点Rayleigh

数据集为ImageNet;实验小节中明确出现的比较对象包括BERT;指标包括accuracy、precision、latency、classification accuracy、energy efficiency、PER;信道/链路条件包括Rayleigh。 PDF p.10

未来的工作可能会检查传输私有语义导频的开销,并探索在具有挑战性的均衡场景中增强鲁棒性的改进策略。 PDF p.15

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications 架构/方法图
架构/方法图|来源:《Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications》,原 PDF p.7,Fig. 2 PFE accuracy performance varying the number of transmitted coefficients and architectures. At the RX, a classifier trained on vit base resnet50 384。 核对论文
Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications 关键实验结果图/表
关键实验结果图/表|来源:《Frame-Based Zero-Shot Semantic Channel Equalization for AI-Native Communications》,原 PDF p.8,Fig. 5 Task accuracy versus compression factor ξ using Proto-PFE at fixed numbers of transmitted coefficients. Results are averaged over the ensemble of UE encoders。 核对论文
核心纳入2026点云/三维场景传输

From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms

DOI / IEEE 页面

作者Tianle Mai; Haipeng Yao; Gepeng Zhu; Chenlang Jin; Xiangjun Xin

出版信息Vol. 12 · pp. 6207-6220

DOI / IEEE ID10.1109/tccn.2026.3662333 / 11381444

通信位置生成式语义信源编码

一句话主旨:From Local to Global 面向点云/三维场景传输,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:最近,神经辐射场(NeRF)在3D场景重建中表现出优异的保真度性能。 PDF p.1
  2. 仍然存在的问题:然而,他们的大量数据需求对低空平台提出了挑战,特别是由于严格的带宽限制。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
  5. 本文提出什么:因此,在本文中,我们提出了一个端到端的框架,LAM-SC-3DR,它集成了LAM驱动的语义提取,语义通信和基于NeRF的三维重建,以优化远程三维场景恢复低空平台。 PDF p.1
  6. 方案为何可能有效:拟议框架由三个模块组成。 PDF p.2
  7. 作者希望证明什么:广泛的评估表明,LAM-SC-3DR可以减少高达96%的传输负载,同时保持3D语义重建质量。 PDF p.1

方法与端到端信息流

因此,本文提出了一个端到端的框架LAM-SC-3DR,该框架集成了LAM驱动的语义提取、语义通信和基于NeRF的三维重建,以优化低空平台的远程三维场景恢复。 PDF p.1 PDF p.2

输入输入是点云/三维场景传输所需的三维点、视图或场景语义。
发送端发送端采用 From Local to Global:因此,本文提出了一个端到端的框架LAM-SC-3DR,该框架集成了LAM驱动的语义提取、语义通信和基于NeRF的三维重建,以优化低空平台的远程三维场景恢复。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为三维重建、渲染或下游感知结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:From Local to Global 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景KITTI

Baseline全文未稳定定位

评价指标SSIM、MSE、mAP、mIoU、accuracy、precision

信道与工作点wireless channel

数据集为KITTI;指标包括SSIM、MSE、mAP、mIoU、accuracy、precision;信道/链路条件包括wireless channel。 PDF p.9

广泛的评估表明,LAM-SC-3DR可以减少高达96%的传输负载,同时保持3D语义重建质量。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms 架构/方法图
架构/方法图|来源:《From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms》,原 PDF p.4,Fig. 3 LAM-SC 3D Scene Reconstruction Framework。 核对论文
From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms 关键实验结果图/表
关键实验结果图/表|来源:《From Local to Global: Semantic Communication-Driven Remote 3D Scene Reconstruction Using Low-Altitude Platforms》,原 PDF p.9,Fig. 7 presents the reconstructed depth maps features based on reconstructed (i.e. decompressed) inputs. in each of the three configurations. However, the results As shown in 核对论文
核心纳入2026任务导向推理

GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs

DOI / IEEE 页面

作者Huaifeng Shi; Long Zhou; Wen Tian; Chaofan Liu

出版信息Vol. 12 · pp. 9902-9916

DOI / IEEE ID10.1109/tccn.2026.3709876 / 11594898

通信位置生成式语义信源编码

一句话主旨:GDE 面向任务导向推理,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:在空-空-地一体化网络(SAGIN)中,节点的高移动性和长传播时延使得瞬时信道状态信息(ICSI)容易老化和估计失配,这对语义恢复的鲁棒性提出了挑战。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“任务导向推理”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:为了解决上述问题,本文提出了一种基于生成扩散均衡器(GDE)的无ICSI接收端框架,用于SAGIN中的语义通信。 PDF p.1
  6. 方案为何可能有效:GDE不是将瞬时信道倒置,而是将接收端语义恢复公式化为一个统计指导的代理推理过程。 PDF p.1
  7. 作者希望证明什么:与不完美ICSI下的DeepJSCC基线相比,GDE在中等ICSI失配下实现了约50%的带宽减少,同时保持了相当的重建质量。 PDF p.1

方法与端到端信息流

为了解决这个问题,本文提出了生成扩散推理器(GDE),一个ICSI免费的接收方框架的语义通信SAGINs. GDE,而不是反转的瞬时信道,制定接收方语义恢复作为一个统计指导代理推理过程。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 GDE:为了解决这个问题,本文提出了生成扩散推理器(GDE),一个ICSI免费的接收方框架的语义通信SAGINs. GDE,而不是反转的瞬时信道,制定接收方语义恢复作为一个统计指导代理推理过程。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:GDE 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

Rician信道模型,其中k表示信道使用的数量,确定带宽压缩比。 PDF p.3

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景DIV2K、CIFAR-10

BaselineDeepJSCC、PPO、JSCC

评价指标PSNR、LPIPS、MSE、mAP、accuracy、latency、PER

信道与工作点Rician、channel estimation、fading channel、SNR of 0 dB、SNR= 10 dB、SNR of 10 dB、SNR = 10 dB

数据集为DIV2K、CIFAR-10;实验小节中明确出现的比较对象包括DeepJSCC、PPO、JSCC;指标包括PSNR、LPIPS、MSE、mAP、accuracy、latency、PER;信道/链路条件包括Rician、channel estimation、fading channel;正文可定位的代表性工作点有SNR of 0 dB、SNR= 10 dB、SNR of 10 dB、SNR = 10 dB。 PDF p.9

与不完美ICSI下的DeepJSCC基线相比,GDE在中等ICSI失配下实现了约50%的带宽减少,同时保持了相当的重建质量。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs 架构/方法图
架构/方法图|来源:《GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs》,原 PDF p.5,Fig. 2 The overall architecture of the proposed GDE。 核对论文
GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs 关键实验结果图/表
关键实验结果图/表|来源:《GDE: A Generative Diffusion Equalizer for ICSI-Free Semantic Communications in SAGINs》,原 PDF p.10,Fig. 3 Performance comparison on CIFAR-10 and DIV2K datasets versus different SNRs (KdB = 10 dB). (a) PSNR on CIFAR-10 dataset; (b) LPIPS on CIFAR-10 dataset; (c) PSNR on DIV2K dataset; (d) LPIPS on DIV2K dataset。 核对论文
核心纳入2026图像传输、压缩或生成

Generative Semantic Communication: Diffusion Models Beyond Bit Recovery

DOI / IEEE 页面

作者Eleonora Grassucci; Sergio Barbarossa; Danilo Comminiello

出版信息Vol. 12 · pp. 8171-8185

DOI / IEEE ID10.1109/tccn.2026.3689849 / 11505923

通信位置生成式语义信源编码

一句话主旨:Generative Semantic Communication 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信被认为是下一代人工智能通信的核心之一。 PDF p.1
  2. 仍然存在的问题:然而,典型地,已经对干净数据研究了这种模型,并且还没有研究它们对通过压缩或通过噪声信道传播而改变的数据的扩展。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:此外,我们还提出了一种训练策略,以使生成模型对由于通过通信信道传播而产生的加性噪声具有鲁棒性。 PDF p.1
  6. 方案为何可能有效:我们在不同的信道条件和数据集下测试我们的方法,我们展示了我们的方法如何生成与传输的语义信息一致的逼真图像,即使在接收到的布局极其损坏的情况下,以及在传输数据速率非常低的情况下。 PDF p.2
  7. 作者希望证明什么:更具体地说,我们的结果表明,即使在通信信道存在极高噪声的情况下,物体、位置和深度仍然是可识别的。 PDF p.1

方法与端到端信息流

此外,我们还提出了一种训练策略,以使生成模型对由于通过通信信道传播而引起的加性噪声具有鲁棒性。我们在不同的信道条件和数据集下测试了我们的方法,并且我们展示了我们的方法如何即使在接收到的布局严重损坏的情况下以及在传输数据速率非常低的情况下也能够生成与所传输的语义信息一致的真实感图像。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Generative Semantic Communication:此外,我们还提出了一种训练策略,以使生成模型对由于通过通信信道传播而引起的加性噪声具有鲁棒性。我们在不同的信道条件和数据集下测试了我们的方法,并且我们展示了我们的方法如何即使在接收到的布局严重损坏的情况下以及在传输数据速率非常低的情况下也能够生成与所传输的语义信息一致的真实感图像。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Generative Semantic Communication 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

在前面的所有示例中,我们将这种失真建模为加性白色高斯噪声(AWGN)。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.11

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.11

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景COCO、Cityscapes

BaselineDeepJSCC、BPG、Swin Transformer、GAN、VAE、SwinJSCC、JSCC、OFDM

评价指标PSNR、LPIPS、FID、bpp、mAP、mIoU、latency、FLOPs、PER

信道与工作点AWGN、Rayleigh、wireless channel、MIMO、OFDM、SNR = 10 dB、0.09 BPP、0.005 BPP、0.02 BPP、0.17 BPP

数据集为COCO、Cityscapes;实验小节中明确出现的比较对象包括DeepJSCC、BPG、Swin Transformer、GAN、VAE、SwinJSCC、JSCC、OFDM;指标包括PSNR、LPIPS、FID、bpp、mAP、mIoU、latency、FLOPs、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、MIMO、OFDM;正文可定位的代表性工作点有SNR = 10 dB、0.09 BPP、0.005 BPP、0.02 BPP、0.17 BPP。 PDF p.9

更具体地说,我们的结果表明,即使在通信信道存在极高噪声的情况下,物体、位置和深度仍然是可识别的。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Generative Semantic Communication: Diffusion Models Beyond Bit Recovery 架构/方法图
架构/方法图|来源:《Generative Semantic Communication: Diffusion Models Beyond Bit Recovery》,原 PDF p.6,Fig. 3 we compare our method 核对论文
Generative Semantic Communication: Diffusion Models Beyond Bit Recovery 关键实验结果图/表
关键实验结果图/表|来源:《Generative Semantic Communication: Diffusion Models Beyond Bit Recovery》,原 PDF p.7,Fig. 3 Comparison among the methods for transmitted semantics and a fixed PSNR value of 10。 核对论文
核心纳入2026任务导向推理

Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication

DOI / IEEE 页面

作者Shengyu Zhang; Qi Zhang; Liuchang Yang; Yan Wang; Tao Jiang

出版信息Vol. 12 · pp. 9460-9473

DOI / IEEE ID10.1109/tccn.2026.3710171 / 11595579

通信位置任务导向联合信源信道设计

一句话主旨:DHSCC 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:触觉通信对低延迟和可靠的无线传输提出了严格的要求。 PDF p.1
  2. 仍然存在的问题:针对这一问题,提出了一种面向任务的深度混合信源信道编码(DHSCC)框架。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:针对这一问题,提出了一种面向任务的深度混合信源信道编码(DHSCC)框架。 PDF p.1
  6. 方案为何可能有效:具体而言,本文做出了以下主要贡献:1)提出了一种面向任务的新型DHSCC框架,用于边缘辅助触觉反馈通信,将深度自编码器结构与极化码集成。 PDF p.2
  7. 作者希望证明什么:设计了一种基于胶囊网络的组级重要性估计模块,结合自适应特征组,实现了对关键触觉信息的不等错误保护(unequivalerrorprotection,UEP),缓解了时变信道下的“悬崖效应.” PDF p.1

方法与端到端信息流

为了解决这一问题,本文提出了一种面向任务的触觉传输的深度混合信源信道编码(DHSCC)框架,具体而言,本文做出了以下主要贡献:1)提出了一种面向任务的DHSCC框架,用于边缘辅助触觉反馈通信,将深度自编码器结构与极化码相结合。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 DHSCC:为了解决这一问题,本文提出了一种面向任务的触觉传输的深度混合信源信道编码(DHSCC)框架,具体而言,本文做出了以下主要贡献:1)提出了一种面向任务的DHSCC框架,用于边缘辅助触觉反馈通信,将深度自编码器结构与极化码相结合。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

该框架将残差积量化和极化编码集成到端到端神经网络中,从而实现高效的特征压缩和数字兼容的bitstream传输。 独立判断:DHSCC 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

上述比特率正则化损失Lrate被定义为重要性分数与被表示为特征分布的特征位置的掩码的乘积之和。 PDF p.6

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.9

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景CIFAR-10

BaselinePolar、JSCC、VIB

评价指标accuracy、latency、throughput、classification accuracy、BER、PER

信道与工作点AWGN、Rayleigh、fading channel、ber of 128

数据集为CIFAR-10;实验小节中明确出现的比较对象包括Polar、JSCC、VIB;指标包括accuracy、latency、throughput、classification accuracy、BER、PER;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有ber of 128。 PDF p.9

设计了一种基于胶囊网络的组级重要性估计模块,结合自适应特征组,实现了对关键触觉信息的不等错误保护(unequivalerrorprotection,UEP),缓解了时变信道下的“悬崖效应.” PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication 架构/方法图
架构/方法图|来源:《Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication》,原 PDF p.4,Fig. 2 The framework of the proposed DHSCC。 核对论文
Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication 关键实验结果图/表
关键实验结果图/表|来源:《Group-Level Feature-Aware Hybrid Coding for Adaptive Task-Oriented Tactile Communication》,原 PDF p.11,Fig. 6 Ablation study results of different modules in the proposed DHSCC under different channels。 核对论文
核心纳入2026语音/音频传输或识别

High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems

DOI / IEEE 页面

作者Bo Chen; Jianping An; Bowen Gui; Liang Zeng

出版信息Vol. 12 · pp. 5638-5648

DOI / IEEE ID10.1109/tccn.2026.3657147 / 11361127

通信位置通信安全与隐私

一句话主旨:High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems 面向语音/音频传输或识别,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:最近基于神经网络的编解码器在将语音压缩成离散语义表示方面表现出显著的性能,同时降低了带宽消耗。 PDF p.1
  2. 仍然存在的问题:然而,这些方法仍然面临着保持感知质量,实现灵活的带宽利用率,并防止说话人身份泄漏的挑战。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:语音的可懂度、识别正确率与波形误差并不总是同步,少量包丢失也可能破坏整段语言内容;有限码率下应优先保护语言与说话人语义。 PDF p.1
  5. 本文提出什么:为了解决这些局限性,本文提出了一种语义-声学混合编码框架,该框架在端到端编解码器架构中集成了预训练的语义建模和轻量级声学表示。 PDF p.1
  6. 方案为何可能有效:该框架还支持语义驱动的自适应比特率控制,通过训练期间的超参数调谐在语音质量和带宽之间提供灵活的折衷。 PDF p.1
  7. 作者希望证明什么:试验结果证明,本文方法能提供具有语义增强的高保真重建,MUSHRA评分达到88,优于传统的单信道低比特率编解码器,具有近感知无损的语音重建性能。 PDF p.1

方法与端到端信息流

为了解决这些问题,本文提出了一种语义-声学混合编码框架,该框架在端到端的编解码器架构中集成了预先训练的语义建模和轻量级声学表示,并进一步实现了语义驱动的自适应比特率控制,通过训练过程中的超参数调整,在语音质量和带宽之间实现灵活的权衡。 PDF p.1

输入输入是语音/音频传输或识别所需的语音波形、声学特征或说话人信息。
发送端发送端采用 High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems:为了解决这些问题,本文提出了一种语义-声学混合编码框架,该框架在端到端的编解码器架构中集成了预先训练的语义建模和轻量级声学表示,并进一步实现了语义驱动的自适应比特率控制,通过训练过程中的超参数调整,在语音质量和带宽之间实现灵活的权衡。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建语音、识别文本或说话人任务结果。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.3

这种改进来自于我们的方法:我们使用额外的声学约束来改善音频重建质量,而不是在更高的比特率下扩展语义代码维度。 PDF p.7

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.3 PDF p.7

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.3 PDF p.7

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景LibriSpeech

BaselineBERT

评价指标bitrate、mAP、accuracy、MOS、WER、PER

信道与工作点NOMA

数据集为LibriSpeech;实验小节中明确出现的比较对象包括BERT;指标包括bitrate、mAP、accuracy、MOS、WER、PER;信道/链路条件包括NOMA。 PDF p.7

试验结果证明,本文方法能提供具有语义增强的高保真重建,MUSHRA评分达到88,优于传统的单信道低比特率编解码器,具有近感知无损的语音重建性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems 架构/方法图
架构/方法图|来源:《High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems》,原 PDF p.7,Fig. 6 Air-to-ground communication network for intelligent systems。 核对论文
High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems 关键实验结果图/表
关键实验结果图/表|来源:《High Quality and Secure Speech Transmission at Low Bitrate via Semantic-Acoustic Hybrid Coding for Low-Altitude Intelligent Systems》,原 PDF p.8,Fig. 8 A direct demonstration of the mask aligned with Mel Spectrogram. The dashed line represents the base model, while the smoothed solid line indicates the model after the mask。 核对论文
核心纳入2026视频传输、生成或控制

Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics

DOI / IEEE 页面

作者Peng Cui; Shujun Han; Ze Liu; Yunfei Luo; Xiaodong Xu; Xiaoyu Chi; Bingxuan Xu; Ping Zhang

出版信息Vol. 12 · pp. 6509-6523

DOI / IEEE ID10.1109/tccn.2026.3666538 / 11403981

通信位置资源分配与跨层优化

一句话主旨:PSCRA 面向视频传输、生成或控制,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:人工智能(AI)技术的进步促进了新兴视频分析应用的广泛部署,特别是在需要实时处理能力的边缘计算环境中。 PDF p.1
  2. 仍然存在的问题:然而,在带宽受限的条件下实现边缘视频分析的分析准确性和实时性能之间的最佳折衷是一个重大挑战。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:针对这个问题,本文基于语义压缩和海量多输入多输出(massive-MIMO)传输技术,提出一种边缘视频分析的联合传输方案。 PDF p.1
  6. 方案为何可能有效:具体地,设计了一种面向任务的性能度量--任务可靠性,用于联合评估智能任务传输的随机延迟界和智能任务执行的准确性。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,与传统的多智能体强化学习算法相比,PSCRA算法的资源分配策略具有更好的系统效用。 PDF p.1

方法与端到端信息流

针对这一问题,本文提出了一种语义压缩和大规模多输入多输出(MIMO)联合传输的边缘视频分析方法,并设计了一种面向任务的性能度量指标任务可靠性,联合评估智能任务传输的随机延迟界和智能任务执行的准确性。 PDF p.1

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 PSCRA:针对这一问题,本文提出了一种语义压缩和大规模多输入多输出(MIMO)联合传输的边缘视频分析方法,并设计了一种面向任务的性能度量指标任务可靠性,联合评估智能任务传输的随机延迟界和智能任务执行的准确性。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:PSCRA 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineTD3、DDPG

评价指标accuracy

信道与工作点MIMO、block fading

实验小节中明确出现的比较对象包括TD3、DDPG;指标包括accuracy;信道/链路条件包括MIMO、block fading。 PDF p.9

仿真结果表明,与传统的多智能体强化学习算法相比,PSCRA算法的资源分配策略具有更好的系统效用。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics 架构/方法图
架构/方法图|来源:《Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics》,原 PDF p.4,Fig. 2 The framework of the semantic transmitter module, the wireless channel module and the semantic receiver module。 核对论文
Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics 关键实验结果图/表
关键实验结果图/表|来源:《Joint Semantic Compression and Massive MIMO Transmission for Edge Video Analytics》,原 PDF p.11,Fig. 7 UB-QDVP and task reliability versus mean rate. under different average powers。 核对论文
核心纳入2026图像传输、压缩或生成

Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs

DOI / IEEE 页面

作者Yixiao Feng; Zhengda Wu; Yining Wang

出版信息Vol. 12 · pp. 3846-3861

DOI / IEEE ID10.1109/tccn.2025.3626348 / 11219023

通信位置资源分配与跨层优化

一句话主旨:REI 面向图像传输、压缩或生成,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:针对无人机网络,提出了一种联合航迹规划和语义通信框架。 PDF p.1
  2. 仍然存在的问题:然而,无人机平台固有的资源限制,特别是在功率和无线带宽方面,限制了低空无人机的数量。接收日期:2025年5月25日;修订日期:2025年9月6日;接收日期:10月14日。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了评估所提出的语义通信框架的性能,我们提出了一个数学度量,称为重构效率指数(REI),该指标综合考虑了传输功率的降低和轨迹长度的保持。 PDF p.1
  6. 方案为何可能有效:将该问题描述为一个优化问题,其目标是通过联合确定扩展参数、顶点简化参数和发射功率分配来最大化每架低空无人机的平均REI。 PDF p.1
  7. 作者希望证明什么:仿真结果验证了所提ACPPO算法与传统的RL算法相比,平均REI提高了48.0%。 PDF p.1

方法与端到端信息流

为了评估所提出的语义通信框架的性能,我们提出了一种综合考虑发射功率降低和航迹长度保持的数学度量--重构效率指数(REI),并将该问题描述为一个优化问题,其目标是通过联合确定扩展参数、顶点简化参数以及传输功率分配。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 REI:为了评估所提出的语义通信框架的性能,我们提出了一种综合考虑发射功率降低和航迹长度保持的数学度量--重构效率指数(REI),并将该问题描述为一个优化问题,其目标是通过联合确定扩展参数、顶点简化参数以及传输功率分配。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:REI 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineViT、PPO、CLIP、DDPG

评价指标mAP、accuracy、precision、latency、PER

信道与工作点全文未稳定定位

实验小节中明确出现的比较对象包括ViT、PPO、CLIP、DDPG;指标包括mAP、accuracy、precision、latency、PER。 PDF p.2

仿真结果验证了所提ACPPO算法与传统的RL算法相比,平均REI提高了48.0%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs 架构/方法图
架构/方法图|来源:《Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs》,原 PDF p.14,Fig. 9 An example of the received data and planned trajectories based on the proposed semantic communication framework。 核对论文
Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs 关键实验结果图/表
关键实验结果图/表|来源:《Joint Trajectory Planning and Semantic Communication Design for Urban Low-Altitude UAVs》,原 PDF p.12,Fig. 4 The number of vertices as the semantic information extraction parameters varies。 核对论文
核心纳入2026语义感知资源分配与网络优化

Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion

DOI / IEEE 页面

作者Wei Wu; Lingyi Wang; Fuhui Zhou; Zhaohui Yang; Qihui Wu

出版信息Vol. 12 · pp. 5120-5135

DOI / IEEE ID10.1109/tccn.2025.3641514 / 11282491

通信位置数字语义编码与物理层接口

一句话主旨:KMSE 面向语义感知资源分配与网络优化,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:人工智能(AI)-原生三维(3D)频谱图在智能通信网络的频谱监测中至关重要。 PDF p.1
  2. 仍然存在的问题:然而,以频谱高效、计算高效和人工智能驱动的方式来获得和传输3D频谱图是具有挑战性的,尤其是在复杂的通信环境和稀疏的采样数据下。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:由于统计机器学习很容易被误导的表面数据的相关性缺乏可解释性,我们提出了一种新的知识增强的语义频谱图完成框架与两个专家知识驱动的物理信号传播模型的约束。 PDF p.1
  6. 方案为何可能有效:由于频谱完成遵循真实世界的物理模型,因此我们可以探索AI原生语义通信网络,以实现健壮且可解释的频谱图完成。 PDF p.2
  7. 作者希望证明什么:仿真结果表明,所提出的方案在RKMSE方面都优于现有的基准方案,更适合大规模地应用。 PDF p.1

方法与端到端信息流

针对统计机器学习容易被表面数据相关性误导且缺乏可解释性的问题,本文提出了一种新的知识增强的语义频谱图完成框架,该框架具有来自物理信号传播模型的两个专家知识驱动的约束。由于频谱完成遵循真实世界的物理模型,因此我们可以探索一种AI原生语义通信网络,以实现鲁棒且可解释的频谱图完成。 PDF p.1 PDF p.2

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 KMSE:针对统计机器学习容易被表面数据相关性误导且缺乏可解释性的问题,本文提出了一种新的知识增强的语义频谱图完成框架,该框架具有来自物理信号传播模型的两个专家知识驱动的约束。由于频谱完成遵循真实世界的物理模型,因此我们可以探索一种AI原生语义通信网络,以实现鲁棒且可解释的频谱图完成。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

在此基础上,提出了一种基于知识增强矢量量化Transformer(KE-VQ-Transformer)的多尺度低复杂度智能补全方法,该方法采用稀疏窗口避免了超大规模的3D注意力计算,多尺度设计提高了补全性能。 独立判断:KMSE 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{idx}\lceil\log_2 K\rceil+N_{side},\qquad CR=\frac{N_{src}}{N_{tx}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

为了在地面用户端利用IDW恢复出完整的地图,原始采样数据通过LDPC +64QAM在信道上传输。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 这些传统信道编码/调制条目若只属于 baseline,不改变所提语义接收机默认可靠输入的分类。 PDF p.11

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.11

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineLDPC、Swin Transformer、ViT、GAN、VAE、VQ-VAE

评价指标MSE、mAP、accuracy、latency、FLOPs、semantic similarity

信道与工作点wireless channel、IRS、SNR = 12 dB、SNR = 0 dB

实验小节中明确出现的比较对象包括LDPC、Swin Transformer、ViT、GAN、VAE、VQ-VAE;指标包括MSE、mAP、accuracy、latency、FLOPs、semantic similarity;信道/链路条件包括wireless channel、IRS;正文可定位的代表性工作点有SNR = 12 dB、SNR = 0 dB。 PDF p.10

仿真结果表明,所提出的方案在RKMSE方面都优于现有的基准方案,更适合大规模地应用。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion 架构/方法图
架构/方法图|来源:《Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion》,原 PDF p.9,Fig. 2 Our proposed semantic spectrum map completion framework。 核对论文
Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion 关键实验结果图/表
关键实验结果图/表|来源:《Knowledge-Driven 3D Semantic Spectrum Map: KE-VQ-Transformer-Based AAV Semantic Communication and Map Completion》,原 PDF p.12,Fig. 5 The convergence performance of Stage 2 with τ = 0.15。 核对论文
核心纳入2026任务导向推理

Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems

DOI / IEEE 页面

作者Jialin Zhuang; Lanhua Li; Yusi Long; Bo Gu; Changyan Yi; Shimin Gong

出版信息Vol. 12 · pp. 5351-5366

DOI / IEEE ID10.1109/tccn.2026.3657116 / 11361155

通信位置资源分配与跨层优化

一句话主旨:AoASI 面向任务导向推理,把问题放在“资源分配与跨层优化”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:本文研究了一种语义感知的移动的边缘计算(MEC)系统,用于从移动的设备(MD)到云服务器的及时状态更新。 PDF p.1
  2. 仍然存在的问题:然而,传统的原始数据传输强加了大量的冗余,产生了通信瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:只按 bit rate、吞吐量或平均失真分配资源,无法区分不同样本和任务的语义价值;外层优化必须得到可用的语义效用—资源曲线。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:为了捕捉语义信息的准确性和新鲜度,我们引入了准确语义信息的年龄(AoASI),它集成了语义重建的准确性与信息的新鲜度。 PDF p.1
  6. 方案为何可能有效:我们的目标是通过联合优化语义提取、访问控制、时间分配和计算资源分配来最小化长期平均AoASI。 PDF p.1
  7. 作者希望证明什么:仿真结果验证了所提方法具有较快的收敛速度和更好的AoASI性能。 PDF p.1

方法与端到端信息流

为了获取语义信息的准确性和新鲜度,本文引入了精确语义信息年龄(AoASI)概念,将语义重构的准确性和信息的新鲜度结合起来,通过语义提取、访问控制、时间分配和计算资源分配的联合优化,使长期平均AoASI最小化。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 AoASI:为了获取语义信息的准确性和新鲜度,本文引入了精确语义信息年龄(AoASI)概念,将语义重构的准确性和信息的新鲜度结合起来,通过语义提取、访问控制、时间分配和计算资源分配的联合优化,使长期平均AoASI最小化。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:把语义/任务质量映射为网络效用,再分配功率、带宽、算力或时延。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:AoASI 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineHM、PPO、BERT、OFDM、DDPG

评价指标mAP、accuracy、precision、QoE、latency、BERTScore、throughput、AoI、AoII、energy efficiency

信道与工作点AWGN、wireless channel、NOMA、SINR、OFDM

实验小节中明确出现的比较对象包括HM、PPO、BERT、OFDM、DDPG;指标包括mAP、accuracy、precision、QoE、latency、BERTScore、throughput、AoI、AoII、energy efficiency;信道/链路条件包括AWGN、wireless channel、NOMA、SINR、OFDM。 PDF p.2

仿真结果验证了所提方法具有较快的收敛速度和更好的AoASI性能。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“资源分配与跨层优化”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems 架构/方法图
架构/方法图|来源:《Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems》,原 PDF p.11,Fig. 4 Convergence of per-window L-HDRL. access control strategies β, we obtain the system states, including the AoASI state a, error rate e, channel conditions 核对论文
Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems 关键实验结果图/表
关键实验结果图/表|来源:《Lagrangian-Augmented Learning for Stochastic Age of Accurate Semantic Information Minimization in Mobile Edge Computing Systems》,原 PDF p.13,Fig. 7 Balancing freshness and reconstruction accuracy of semantic information over multiple time slots。 核对论文
核心纳入2026点云/三维场景传输

LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks

DOI / IEEE 页面

作者Jiawei Wang; Yang Tian; Junjie Li; Haofeng Sun; Hui Tian; Ping Zhang

出版信息Vol. 12 · pp. 4896-4910

DOI / IEEE ID10.1109/tccn.2025.3642880 / 11298140

通信位置生成式语义信源编码

一句话主旨:TASC-3D 面向点云/三维场景传输,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:虽然这些方法已经在结构化环境中证明了有效性,但是它们在动态和非结构化设置中表现出局限性,例如深度模糊和遮挡。 PDF p.1
  2. 仍然存在的问题:然而,现有的基于2D的方法遭受深度误差和遮挡,而直接的3D数据传输导致不可持续的通信成本。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:XR 与三维感知的数据量极大而交互时延敏感;以更少信道使用保住几何和任务关键对象,会直接降低空口负担。 PDF p.1
  5. 本文提出什么:为了解决这些问题,我们提出了一种面向任务的SemCom框架(TASC-3D),旨在增强LAE网络中的3D场景理解。 PDF p.1
  6. 方案为何可能有效:具体而言,TASC-3D集成了用于有效场景表示的混合编码器、用于增强噪声恢复能力的扩散模型以及用于将高级语义解释为可执行命令的大型语言模型(LLM)。 PDF p.1
  7. 作者希望证明什么:大量实验表明,TASC-3D在压缩效率、传输鲁棒性和下游任务准确性方面优于基线方法,突出了其在LAE航空应用中实现实际3D语义通信的潜力。 PDF p.1

方法与端到端信息流

为了解决这些问题,我们提出了一个面向任务的SemCom框架(TASC-3D),旨在增强LAE网络中的3D场景理解。具体来说,TASC-3D集成了一个混合编码器,用于有效的场景表示,一个扩散模型,用于增强噪声弹性,和一个大语言模型(LLM),用于解释高级语义到可执行命令。 PDF p.1

输入输入是点云/三维场景传输所需的三维点、视图或场景语义。
发送端发送端采用 TASC-3D:为了解决这些问题,我们提出了一个面向任务的SemCom框架(TASC-3D),旨在增强LAE网络中的3D场景理解。具体来说,TASC-3D集成了一个混合编码器,用于有效的场景表示,一个扩散模型,用于增强噪声弹性,和一个大语言模型(LLM),用于解释高级语义到可执行命令。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为三维重建、渲染或下游感知结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:TASC-3D 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

实验结果为了系统地评估TASC-3D的性能,我们在AWGN信道和瑞利衰落信道下进行了全面的分析。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineLDPC、VAE、SwinJSCC、JSCC

评价指标MSE、mAP、accuracy、recall、precision、CIDEr、IoU

信道与工作点AWGN、Rayleigh、fading channel、SNR = 10 dB、SNR = 0 dB、SNR = 16 dB、SNR = 8 dB、SNR = 4 dB、CBR = 0.092、CBR = 0.123、CBR = 0.015

实验小节中明确出现的比较对象包括LDPC、VAE、SwinJSCC、JSCC;指标包括MSE、mAP、accuracy、recall、precision、CIDEr、IoU;信道/链路条件包括AWGN、Rayleigh、fading channel;正文可定位的代表性工作点有SNR = 10 dB、SNR = 0 dB、SNR = 16 dB、SNR = 8 dB、SNR = 4 dB、CBR = 0.092、CBR = 0.123、CBR = 0.015。 PDF p.9

大量实验表明,TASC-3D在压缩效率、传输鲁棒性和下游任务准确性方面优于基线方法,突出了其在LAE航空应用中实现实际3D语义通信的潜力。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks 架构/方法图
架构/方法图|来源:《LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks》,原 PDF p.3,该页包含论文的主要方法/架构图。 核对论文
LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks 关键实验结果图/表
关键实验结果图/表|来源:《LLM-Empowered Semantic Communication for Multi-Task 3D Scene Understanding in Low-Altitude Economy Networks》,原 PDF p.12,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成

LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication

DOI / IEEE 页面

作者Zengrui Zhao; Celimuge Wu; Yangfei Lin; Lei Zhong; Yusheng Ji; Tomoaki Ohtsuki; Mehdi Bennis

出版信息Vol. 12 · pp. 2439-2454

DOI / IEEE ID10.1109/tccn.2025.3588246 / 11078451

通信位置生成式语义信源编码

一句话主旨:LRGD 面向图像传输、压缩或生成,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:虽然最近在大型语言模型和扩散模型的进步,使生成的图像语义通信在基于文本和多模态设置,现有的方法与视觉保真度的斗争,由于文本描述的固有限制和缺乏专门的设计,在多模态方法。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“图像传输、压缩或生成”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这些问题,我们提出了一个压缩的感知驱动的多模态语义通信框架,传输显着性自适应稀疏采样,边缘轮廓和文本描述的图像在发送器和重建图像在接收端使用引导扩散模型。 PDF p.1
  6. 方案为何可能有效:我们设计了一个低秩的引导扩散模型,结合一个粗糙的预重建图像来引导扩散过程,并引入了一个基于扩散步骤的动态引导强度调整机制。 PDF p.2
  7. 作者希望证明什么:在多个数据集上进行的大量实验表明,该方法在各种噪声环境下都能获得稳健的上级图像重建性能,同时将数据压缩到原始图像大小的5.76.0%。 PDF p.1

方法与端到端信息流

为了解决这些问题,本文提出了一种压缩感知驱动的多模态语义通信框架,该框架在发送端传输图像的显著性自适应稀疏采样、边缘轮廓和文本描述,在接收端利用引导扩散模型重建图像,结合粗预重建图像来引导扩散过程,并引入基于扩散步骤的动态引导强度调整机制。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 LRGD:为了解决这些问题,本文提出了一种压缩感知驱动的多模态语义通信框架,该框架在发送端传输图像的显著性自适应稀疏采样、边缘轮廓和文本描述,在接收端利用引导扩散模型重建图像,结合粗预重建图像来引导扩散过程,并引入基于扩散步骤的动态引导强度调整机制。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:LRGD 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景DIV2K、CelebA、Set14、BSD100

BaselineDeepJSCC、JPEG、JSCC、BLIP

评价指标PSNR、SSIM、LPIPS、FID、accuracy、latency

信道与工作点AWGN、Rayleigh、Rician

数据集为DIV2K、CelebA、Set14、BSD100;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、JSCC、BLIP;指标包括PSNR、SSIM、LPIPS、FID、accuracy、latency;信道/链路条件包括AWGN、Rayleigh、Rician。 PDF p.10

在多个数据集上进行的大量实验表明,该方法在各种噪声环境下都能获得稳健的上级图像重建性能,同时将数据压缩到原始图像大小的5.76.0%。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication 架构/方法图
架构/方法图|来源:《LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication》,原 PDF p.8,Fig. 3 Visualizations and corresponding SSIM/LPIPS of reconstructed results on sample images. The four rows show sample images from Set14, BSD100, DIV2K, and Flickr-8k, respectively。 核对论文
LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《LRGD: Low-Rank Guided Diffusion for Robust Image Transmission in Semantic Communication》,原 PDF p.9,Fig. 4 SSIM performance comparisons of different methods under varying channel SNR conditions on the Flickr-8k dataset 核对论文
核心纳入2026任务导向推理

Multi-Stage Semantic Communication for Low-Latency Edge Inference

DOI / IEEE 页面

作者Guangyao Ding; Huiguo Gao; Shengli Liu; Guanding Yu

出版信息Vol. 12 · pp. 267-282

DOI / IEEE ID10.1109/tccn.2025.3558066 / 10949629

通信位置任务导向联合信源信道设计

一句话主旨:Multi-Stage Semantic Communication for Low-Latency Edge Inference 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:支持深度学习的语义通信最近显示,W接收于2024年6月7日;修订于2024年11月1日和2025年2月12日当前版本19日。 PDF p.1
  2. 仍然存在的问题:通过发送提取的语义特征而不是原始数据,可以显著地减少通信延迟。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:本文设计了一种支持多级语义特征传输的低延迟设备-边缘协同推理系统语义通信技术。 PDF p.1
  6. 方案为何可能有效:本文设计了一种支持多级语义特征传输的低延迟设备-边缘协同推理系统语义通信技术。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,所提出的基于提前停止策略的多阶段边缘推理算法能够有效地降低边缘推理的平均时延。 PDF p.1

方法与端到端信息流

在本文中,我们设计了一种支持多阶段语义特征传输的低延迟设备-边缘协同推理系统的语义通信技术。在第二节中,我们给出了基于语义通信的边缘推理系统模型。 PDF p.1 PDF p.3

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 Multi-Stage Semantic Communication for Low-Latency Edge Inference:在本文中,我们设计了一种支持多阶段语义特征传输的低延迟设备-边缘协同推理系统的语义通信技术。在第二节中,我们给出了基于语义通信的边缘推理系统模型。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Multi-Stage Semantic Communication for Low-Latency Edge Inference 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

在训练分类网络时,批量大小设置为128,采用SGD优化器,其中动量为0.9,权重衰减为5 × 10-4。 PDF p.11

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10

BaselineResNet、JSCC

评价指标MSE、accuracy、latency、FLOPs、classification accuracy、PER

信道与工作点全文未稳定定位

数据集为ImageNet、CIFAR-10;实验小节中明确出现的比较对象包括ResNet、JSCC;指标包括MSE、accuracy、latency、FLOPs、classification accuracy、PER。 PDF p.10

仿真结果表明,所提出的基于提前停止策略的多阶段边缘推理算法能够有效地降低边缘推理的平均时延。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Multi-Stage Semantic Communication for Low-Latency Edge Inference 架构/方法图
架构/方法图|来源:《Multi-Stage Semantic Communication for Low-Latency Edge Inference》,原 PDF p.8,Fig. 3 The proposed multi-stage edge inference scheme and the early stopping strategy。 核对论文
Multi-Stage Semantic Communication for Low-Latency Edge Inference 关键实验结果图/表
关键实验结果图/表|来源:《Multi-Stage Semantic Communication for Low-Latency Edge Inference》,原 PDF p.14,Fig. 12 Performance comparison against the actual quantization (ResNet and CIFAR-10)。 核对论文
核心纳入2026图像传输、压缩或生成

Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication

DOI / IEEE 页面

作者Jian Zou; Jian Xiao; Han Shen; Wenwu Xie; Fanyang Meng; Liang Yang; Yongsheng Liang

出版信息Vol. 12 · pp. 966-980

DOI / IEEE ID10.1109/tccn.2025.3573407 / 11015528

通信位置数字语义编码与物理层接口

一句话主旨:MU-MIMO 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:为了提高多用户多输入多输出(MU-MIMO)正交频分复用(OFDM)系统的自适应性和吞吐量,提出了一种新的数字语义通信(D-SemCom)框架,该框架结合了非正交叠加导频(NOSIP)机制。 PDF p.1
  2. 仍然存在的问题:然而,这引入了诸如用户间干扰之类的挑战,这限制了传统信号处理方法的性能。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为解决该问题,提出了SANet协议,实现了接收信号到对数似然比的非线性映射。 PDF p.1
  6. 方案为何可能有效:为了提高多用户多输入多输出(MU-MIMO)正交频分复用(OFDM)系统的自适应性和吞吐量,提出了一种新的数字语义通信(D-SemCom)框架,该框架结合了非正交叠加导频(NOSIP)机制。 PDF p.1
  7. 作者希望证明什么:数值结果表明:1)与传统方法相比,SANet提高了D-SemCom的有效吞吐量7.01%; 2)与正交导频方案相比,NOSIP方案提高了D-SemCom的有效吞吐量37.15%; 3)验证了自适应数据增强策略在提高D-SemCom性能方面的有效性。 PDF p.1

方法与端到端信息流

为了解决这些问题,提出了SANet,实现了接收信号到对数似然比的非线性映射,并提出了一种新的数字语义通信(D-SemCom)框架,通过结合非正交叠加导频(NOSIP)方案来提高多用户多输入多输出(MU-MIMO)正交频分复用(OFDM)系统的自适应性和有效吞吐量。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 MU-MIMO:为了解决这些问题,提出了SANet,实现了接收信号到对数似然比的非线性映射,并提出了一种新的数字语义通信(D-SemCom)框架,通过结合非正交叠加导频(NOSIP)方案来提高多用户多输入多输出(MU-MIMO)正交频分复用(OFDM)系统的自适应性和有效吞吐量。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

语义信息以连续的方式嵌入信号中,通常绕过诸如量化和调制的传统数字通信模块。 独立判断:MU-MIMO 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

在本文提出的D-SemCom系统中,信道带宽比ρ被定义为量化bitstream的总长度与原始源数据的总维数之比。 PDF p.5

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.9

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景CIFAR-10

BaselineBPG、LDPC、ResNet、OFDM

评价指标PSNR、SSIM、MSE、accuracy、precision、FLOPs、goodput、classification accuracy、BER

信道与工作点wireless channel、MIMO、OFDM、channel estimation

数据集为CIFAR-10;实验小节中明确出现的比较对象包括BPG、LDPC、ResNet、OFDM;指标包括PSNR、SSIM、MSE、accuracy、precision、FLOPs、goodput、classification accuracy、BER;信道/链路条件包括wireless channel、MIMO、OFDM、channel estimation。 PDF p.9

数值结果表明:1)与传统方法相比,SANet提高了D-SemCom的有效吞吐量7.01%; 2)与正交导频方案相比,NOSIP方案提高了D-SemCom的有效吞吐量37.15%; 3)验证了自适应数据增强策略在提高D-SemCom性能方面的有效性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication 架构/方法图
架构/方法图|来源:《Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication》,原 PDF p.5,Fig. 3 Architecture design of the proposed SANet。 核对论文
Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Non-Orthogonal Superimposed Pilot for Goodput Enhancement in Digital Semantic Communication》,原 PDF p.13,Fig. 16 Performance comparison of different transmission schemes under varying SNR conditions。 核对论文
核心纳入2026任务导向推理

On the Effectiveness of Task-Oriented Digital Semantic Communication System

DOI / IEEE 页面

作者Xingyu Mao; Qifa Yan; Bin Dai; Xiaohu Tang; Zhengchun Zhou

出版信息Vol. 12 · pp. 3436-3451

DOI / IEEE ID10.1109/tccn.2025.3628475 / 11224544

通信位置数字语义编码与物理层接口

一句话主旨:On the Effectiveness of Task-Oriented Digital Semantic Communication System 面向任务导向推理,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:面向任务的数字语义通信系统利用神经网络提取和传递与任务相关的特征,与传统的交流系统相比,显著提高了交流效率。 PDF p.1
  2. 仍然存在的问题:然而,现有的研究在优化在发射机处提取的特征的信息表示效率方面存在局限性,从而限制了系统的有效性,如通过分类准确性等推理性能来测量。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:这些系统还确保了与现代数字通信框架的兼容性,从而在新兴的资源受限的通信场景中吸引了很多关注。 PDF p.1
  6. 方案为何可能有效:在本文中,我们分别在系统和执行层级上引入两个正则化条件,以使面向任务的数位语意沟通系统能有更有效的编码。 PDF p.2
  7. 作者希望证明什么:实验结果表明,与基准方案相比,该方案在低延迟的情况下获得了更好的推理性能,并且在训练信道和测试信道不匹配的情况下具有更强的鲁棒性。 PDF p.1

方法与端到端信息流

这些系统还保证了与现代数字通信框架的兼容性,因此在新兴的资源受限通信场景中受到了广泛的关注。在本工作中,我们分别在系统和实现层引入了两个正则化项,以便能够更有效地为面向任务的数字语义通信系统编码。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 On the Effectiveness of Task-Oriented Digital Semantic Communication System:这些系统还保证了与现代数字通信框架的兼容性,因此在新兴的资源受限通信场景中受到了广泛的关注。在本工作中,我们分别在系统和实现层引入了两个正则化项,以便能够更有效地为面向任务的数字语义通信系统编码。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

其次,提出了一种半正交正则化项来优化矢量量化模块,通过最大化码字分离和最小化码字之间的线性相关性来提高量化效率和模型泛化能力。 独立判断:On the Effectiveness of Task-Oriented Digital Semantic Communication System 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{idx}\lceil\log_2 K\rceil+N_{side},\qquad CR=\frac{N_{src}}{N_{tx}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.10

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景ImageNet、CIFAR-10、CIFAR-100、MNIST、Tiny ImageNet

BaselineDeepJSCC、ResNet、JSCC

评价指标SSIM、accuracy、latency、classification accuracy

信道与工作点AWGN、SNR=4dB、SNR=8dB

数据集为ImageNet、CIFAR-10、CIFAR-100、MNIST、Tiny ImageNet;实验小节中明确出现的比较对象包括DeepJSCC、ResNet、JSCC;指标包括SSIM、accuracy、latency、classification accuracy;信道/链路条件包括AWGN;正文可定位的代表性工作点有SNR=4dB、SNR=8dB。 PDF p.10

实验结果表明,与基准方案相比,该方案在低延迟的情况下获得了更好的推理性能,并且在训练信道和测试信道不匹配的情况下具有更强的鲁棒性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

On the Effectiveness of Task-Oriented Digital Semantic Communication System 架构/方法图
架构/方法图|来源:《On the Effectiveness of Task-Oriented Digital Semantic Communication System》,原 PDF p.3,Fig. 1 A task-oriented digital semantic communication system model。 核对论文
On the Effectiveness of Task-Oriented Digital Semantic Communication System 关键实验结果图/表
关键实验结果图/表|来源:《On the Effectiveness of Task-Oriented Digital Semantic Communication System》,原 PDF p.9,Fig. 2 The classification accuracy of evaluated schemes on the MNIST dataset。 核对论文
核心纳入2026任务导向推理

Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications

DOI / IEEE 页面

作者Mengbing Liu; Jiancheng An; Chongwen Huang; Chau Yuen

出版信息Vol. 12 · pp. 805-819

DOI / IEEE ID10.1109/tccn.2025.3569604 / 11003068

通信位置任务导向联合信源信道设计

一句话主旨:ODE 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:模拟机器学习硬件平台承诺比数字平台更快的速度和更高的能效。 PDF p.1
  2. 仍然存在的问题:具体地,空中模拟计算允许通过精心构造的传输信号将计算卸载到无线传播。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:利用RIS的优势,我们设计并实现了常微分方程(ODE)神经网络使用空中计算(AirComp),并证明其有效性的双重任务。 PDF p.1
  6. 方案为何可能有效:具体地,空中模拟计算允许通过精心构造的传输信号将计算卸载到无线传播。 PDF p.1
  7. 作者希望证明什么:具体而言,对于图像重建和语义标注任务,与没有Air-ODE块的模拟网络相比,Air-ODE块可以在重建质量和标注精度方面实现约2倍的增益。 PDF p.1

方法与端到端信息流

利用RIS的优点,我们设计并实现了一个基于空中模拟计算(AirComp)的常微分方程(ODE)神经网络,并证明了其在双重任务中的有效性。 PDF p.1

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 ODE:利用RIS的优点,我们设计并实现了一个基于空中模拟计算(AirComp)的常微分方程(ODE)神经网络,并证明了其在双重任务中的有效性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:ODE 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineDeepJSCC、JSCC

评价指标PSNR、SSIM、MSE、mAP、accuracy、latency、FLOPs、energy efficiency

信道与工作点Rayleigh、Rician、IRS、MIMO、channel estimation、imperfect CSI、Under 30 dB SNR

实验小节中明确出现的比较对象包括DeepJSCC、JSCC;指标包括PSNR、SSIM、MSE、mAP、accuracy、latency、FLOPs、energy efficiency;信道/链路条件包括Rayleigh、Rician、IRS、MIMO、channel estimation、imperfect CSI;正文可定位的代表性工作点有Under 30 dB SNR。 PDF p.9

具体而言,对于图像重建和语义标注任务,与没有Air-ODE块的模拟网络相比,Air-ODE块可以在重建质量和标注精度方面实现约2倍的增益。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications 架构/方法图
架构/方法图|来源:《Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications》,原 PDF p.3,Fig. 1 The proposed complex-valued ODE-inspired neural network structure for the semantic communication system。 核对论文
Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Over-the-Air ODE-Inspired Neural Network for Dual Task-Oriented Semantic Communications》,原 PDF p.11,Fig. 8 Performance versus SNR。 核对论文
核心纳入2026边缘学习与任务通信

Personalized Federated Learning for GAI-Assisted Semantic Communications

DOI / IEEE 页面

作者Yubo Peng; Feibo Jiang; Li Dong; Kezhi Wang; Kun Yang

出版信息Vol. 12 · pp. 2513-2525

DOI / IEEE ID10.1109/tccn.2025.3586904 / 11073781

通信位置生成式语义信源编码

一句话主旨:GSC 面向边缘学习与任务通信,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(SC),其重点是传输意义,而不是原始数据,已成为下一代通信范式。 PDF p.1
  2. 仍然存在的问题:然而,供应链的性能在很大程度上受到网络设计和培训方法的影响。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:梯度或中间特征既大又易受噪声影响,通信错误会直接改变训练收敛或推理决策;这使空口聚合与任务 loss 必须一起考虑。 PDF p.1
  5. 本文提出什么:然而,供应链的性能在很大程度上受到网络设计和培训方法的影响。 PDF p.1
  6. 方案为何可能有效:具体而言,在本地培训阶段,采用个性化本地蒸馏(PLD)方法,其中每个用户基于本地资源选择定制的GSC模型作为导师。 PDF p.1
  7. 作者希望证明什么:然后,为了实现部署在每个用户的GSC模型的有效学习,个性化语义联邦学习(PSFL)框架的建议。 PDF p.1

方法与端到端信息流

然而,网络设计和训练方法对供应链的性能有很大的影响,具体地说,在本地训练阶段,采用了一种个性化的本地蒸馏(PLD)方法,即每个用户根据本地资源选择一个定制的GSC模型作为指导者。 PDF p.1

输入输入是边缘学习与任务通信所需的梯度、模型更新或中间特征。
发送端发送端采用 GSC:然而,网络设计和训练方法对供应链的性能有很大的影响,具体地说,在本地训练阶段,采用了一种个性化的本地蒸馏(PLD)方法,即每个用户根据本地资源选择一个定制的GSC模型作为指导者。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为聚合模型或边缘推理结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:GSC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

通信模型我们认为正交频分多址(OFDMA)被采用用于用户和BS之间的链路。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.5

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.5

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景CIFAR-10、CIFAR-100、MNIST、Fashion-MNIST

BaselineViT、ResNet、OFDM、FedAvg

评价指标PSNR、SSIM、MSE、accuracy

信道与工作点AWGN、OFDM、wireless channel

数据集为CIFAR-10、CIFAR-100、MNIST、Fashion-MNIST;实验小节中明确出现的比较对象包括ViT、ResNet、OFDM、FedAvg;指标包括PSNR、SSIM、MSE、accuracy;信道/链路条件包括AWGN、OFDM、wireless channel。 PDF p.2

然后,为了实现部署在每个用户的GSC模型的有效学习,个性化语义联邦学习(PSFL)框架的建议。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Personalized Federated Learning for GAI-Assisted Semantic Communications 架构/方法图
架构/方法图|来源:《Personalized Federated Learning for GAI-Assisted Semantic Communications》,原 PDF p.4,Fig. 2 The illustration of image transmission utilizing the proposed GSC model。 核对论文
Personalized Federated Learning for GAI-Assisted Semantic Communications 关键实验结果图/表
关键实验结果图/表|来源:《Personalized Federated Learning for GAI-Assisted Semantic Communications》,原 PDF p.12,Fig. 15 Comparison results of different schemes on Fashion-MNIST in terms of (a) global loss, (b) global accuracy, and (c) local accuracy of each client。 核对论文
核心纳入2026任务导向推理

PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly

DOI / IEEE 页面

作者Qing Cai; Yiqing Zhou; Ling Liu; Nankun Wang; Pingyi Fan; Tianjiao Chen; Baoming Bai; Yihao Wu; Guangyi Liu

出版信息Vol. 12 · pp. 11183-11200

DOI / IEEE ID10.1109/tccn.2026.3718954 / 11638216

通信位置任务导向联合信源信道设计

一句话主旨:TO-SemComFly 面向任务导向推理,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(SemCom)通过传递语义特征而超越了比特级传输,面向任务的通信(TOC)进一步以任务相关特征的传输为目标,提高了通信效率。 PDF p.1
  2. 仍然存在的问题:然而,现有的TOC方案对于每个数据输入仍然依赖于基于高维深度学习(DL)的语义源编码器,导致通信期间的高编码复杂度。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:本文提出了一种名为面向任务的SemCom on-the-fly(TO-SemComFly)的新范式,该范式利用预训练语言模型(PLM)离线预计算语义特征,从而实现快速且低复杂度的动态编码。 PDF p.1
  6. 方案为何可能有效:提出了一种高效的面向任务的SemCom框架TO-SemComFly,该框架由基于PLM的两阶段语义编码器实现,第一阶段采用PAC语义编码器从基于PLM的缓存中检索原始语义特征,第二阶段采用LF语义编码器,以形成连贯和信道鲁棒的语义特征。 PDF p.3
  7. 作者希望证明什么:与现有的TOC方案相比,TO-SemComFly实现了至少63.4%和51.7%的精度提高在低信噪比下,和11.5%和20.7%的效率提高在AWGN和瑞利衰落信道。 PDF p.1

方法与端到端信息流

本文提出了一种面向任务的SemCom on-the-fly模式(TO-SemComFly),它利用预训练语言模型(PLM)离线预计算语义特征,实现了快速、低复杂度的动态编码。·提出了一种面向任务的高效SemCom框架TO-SemComFly,该方法在第一阶段采用PAC语义编码器从基于PLM的缓存中检索原始语义特征,在第二阶段采用LF语义编码器以形成连贯且信道鲁棒的语义特征。 PDF p.1 PDF p.3

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 TO-SemComFly:本文提出了一种面向任务的SemCom on-the-fly模式(TO-SemComFly),它利用预训练语言模型(PLM)离线预计算语义特征,实现了快速、低复杂度的动态编码。·提出了一种面向任务的高效SemCom框架TO-SemComFly,该方法在第一阶段采用PAC语义编码器从基于PLM的缓存中检索原始语义特征,在第二阶段采用LF语义编码器以形成连贯且信道鲁棒的语义特征。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

实际的损害,如信道失配,不完美的CSI,有限块长度的影响,功能量化,突发错误,和协议开销超出了当前模型的范围。 独立判断:TO-SemComFly 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.5

具体地,信道使用的数量被设置为16,对应于信道编码器的输出维度。 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.11

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.11

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineLDPC、DeepSC、JSCC、BERT、GPT、WebP、GPT-2

评价指标mAP、accuracy、recall、precision、latency、BERTScore、semantic similarity、PER

信道与工作点AWGN、Rayleigh、wireless channel、MIMO、channel estimation、imperfect CSI、fading channel、SNR = 0dB

实验小节中明确出现的比较对象包括LDPC、DeepSC、JSCC、BERT、GPT、WebP、GPT-2;指标包括mAP、accuracy、recall、precision、latency、BERTScore、semantic similarity、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、MIMO、channel estimation、imperfect CSI、fading channel;正文可定位的代表性工作点有SNR = 0dB。 PDF p.11

与现有的TOC方案相比,TO-SemComFly实现了至少63.4%和51.7%的精度提高在低信噪比下,和11.5%和20.7%的效率提高在AWGN和瑞利衰落信道。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly 架构/方法图
架构/方法图|来源:《PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly》,原 PDF p.5,Fig. 2 System model for task-oriented semantic communication on the fly。 核对论文
PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly 关键实验结果图/表
关键实验结果图/表|来源:《PLM-Based Two-Stage Semantic Encoding for Task-Oriented Semantic Communication on the Fly》,原 PDF p.12,Fig. 6 BERTScore between query and received data as a function of data rate with different SNRs in AWGN channels。 核对论文
核心纳入2026图像传输、压缩或生成

Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding

DOI / IEEE 页面

作者Jiwan Seo; Jeongseok Ha; Joonhyuk Kang

出版信息Vol. 12 · pp. 11087-11101

DOI / IEEE ID10.1109/tccn.2026.3720206 / 11643340

通信位置数字语义编码与物理层接口

一句话主旨:RAQJSCC 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:传统的基于深度学习的联合信源信道编码(DeepJSCC)框架通常需要针对不同码率和信道条件的单独模型,并且由于其模拟传输性质而与实际数字通信系统不兼容。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“图像传输、压缩或生成”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这些限制,我们提出了一个统一的基于速率自适应量化的DeepJSCC(RAQJSCC)框架,该框架在单个模型内实现信道感知速率自适应,同时保持与传统数字通信系统的兼容性。 PDF p.1
  6. 方案为何可能有效:此外,我们将自适应调制和编码(AMC)单元,共同选择调制阶数和有效的码本大小的基础上的信道条件,使动态链路自适应不同的SNR制度。 PDF p.1
  7. 作者希望证明什么:实验结果表明,所提出的RAQJSCC框架优于现有的DeepJSCC和基于分离的方法在重建质量方面在宽范围的SNR,同时有效地减轻悬崖效应。 PDF p.1

方法与端到端信息流

为了解决这些局限性,我们提出了一个统一的基于速率自适应量化的DeepJSCC(RAQJSCC)框架,该框架在保持与传统数字通信系统兼容的同时,能够在单个模型内实现信道感知的速率自适应。此外,我们还结合了自适应调制和编码(AMC)单元,该单元基于信道条件联合选择调制阶数和有效码本大小,使得能够在不同的SNR体制上进行动态链路自适应。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 RAQJSCC:为了解决这些局限性,我们提出了一个统一的基于速率自适应量化的DeepJSCC(RAQJSCC)框架,该框架在保持与传统数字通信系统兼容的同时,能够在单个模型内实现信道感知的速率自适应。此外,我们还结合了自适应调制和编码(AMC)单元,该单元基于信道条件联合选择调制阶数和有效码本大小,使得能够在不同的SNR体制上进行动态链路自适应。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从可能出错或缺失的离散 bit/token/index(或其 soft estimate)开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

为了解决这些限制,我们提出了一个统一的基于速率自适应量化的DeepJSCC(RAQJSCC)框架,该框架在单个模型内实现信道感知速率自适应,同时保持与传统数字通信系统的兼容性。 独立判断:RAQJSCC 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

RAQJSCC 的 AMC 单元联合选择调制阶数 M_l 与有效码本大小 K_l;每个 index 的净信息量为 ⌈log₂K_l⌉ bit,真实信道使用次数还取决于调制阶数、信道码率和链路自适应约束。 PDF p.7

\[N_{tx}=N_{idx}\lceil\log_2 K\rceil+N_{side},\qquad CR=\frac{N_{src}}{N_{tx}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

对于Rician模型,我们考虑K因子值为1和5的两个代表性LoS条件,其中较大的K因子对应于较强的LoS优势。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.13

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.13

是否真正处理离散变量出错:是。论文把离散错误/丢失放进训练或恢复流程,因而正面处理了数字变量受损后的语义恢复。

实验设置与主要结论

数据集/场景Kodak

BaselineDeepJSCC、JPEG、BPG、LDPC、QAM、VAE、VQ-VAE、JSCC

评价指标PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、latency、semantic similarity、PER

信道与工作点AWGN、Rayleigh、Rician、fading channel、bit flip

数据集为Kodak;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、BPG、LDPC、QAM、VAE、VQ-VAE、JSCC;指标包括PSNR、SSIM、MS-SSIM、LPIPS、MSE、mAP、latency、semantic similarity、PER;信道/链路条件包括AWGN、Rayleigh、Rician、fading channel、bit flip。 PDF p.9

实验结果表明,所提出的RAQJSCC框架优于现有的DeepJSCC和基于分离的方法在重建质量方面在宽范围的SNR,同时有效地减轻悬崖效应。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:错误模型仍主要来自仿真;码本规模、包头/FEC、真实调制和 burst error 是否与训练分布一致,需要原型或真实链路验证。

Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding 架构/方法图
架构/方法图|来源:《Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding》,原 PDF p.5,Fig. 2 Block diagram of the proposed RAQJSCC system, which integrates RAQ, CSCR, and AMC-based MCS selection for link adaptation。 核对论文
Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding 关键实验结果图/表
关键实验结果图/表|来源:《Rate-Adaptive Vector Quantization for Deep Joint Source-Channel Coding》,原 PDF p.9,Fig. 3 RAQJSCC performance across different MCS indices under AWGN channels. Each curve corresponds to a modulation-BCR pair defined in 核对论文
核心纳入2026图像传输、压缩或生成

Region-of-Interest Oriented Image Semantic Communication

DOI / IEEE 页面

作者Heng Zhu; Yuanyuan Xu; Kun Zhu; Juan Li; Dusit Niyato

出版信息Vol. 12 · pp. 6598-6612

DOI / IEEE ID10.1109/tccn.2026.3668816 / 11417222

通信位置自适应联合信源信道编码

一句话主旨:Region-of-Interest Oriented Image Semantic Communication 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信因其缓解传统通信系统带宽限制的潜力而受到广泛关注。 PDF p.1
  2. 仍然存在的问题:然而,由于接收端可能只对部分区域感兴趣,因此当前方法不可避免地传输相当数量的语义上不相关的特征。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:最后,为了减轻多层传输中的噪声积累,我们设计了一个信噪比(SNR)估计模块,该模块根据反馈符号自适应地调整信道编码。 PDF p.1
  6. 方案为何可能有效:该框架由两个关键组件组成:1)负责识别和编码/解码RoI的语义编解码器,以及2)压缩/解压缩和调制/解调提取的RoI语义特征的信道编解码器。 PDF p.1
  7. 作者希望证明什么:数值结果表明,我们的方法在捕获的ROI,同时表现出增强的弹性信道噪声的有效性。 PDF p.1

方法与端到端信息流

最后,为了减少多层传输中的噪声积累,我们设计了一个基于反馈符号自适应调整信道编码的信噪比(SNR)估计模块,该框架包括两个关键部分:1)负责RoI识别和编码/解码的语义编解码器,以及2)负责对提取的RoI语义特征进行压缩/解压缩和调制/解调的信道编解码器。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Region-of-Interest Oriented Image Semantic Communication:最后,为了减少多层传输中的噪声积累,我们设计了一个基于反馈符号自适应调整信道编码的信噪比(SNR)估计模块,该框架包括两个关键部分:1)负责RoI识别和编码/解码的语义编解码器,以及2)负责对提取的RoI语义特征进行压缩/解压缩和调制/解调的信道编解码器。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Region-of-Interest Oriented Image Semantic Communication 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景Cityscapes

BaselineJPEG、BPG、LDPC、QAM、GAN、JSCC、WebP

评价指标PSNR、SSIM、FID、bpp、MSE、mAP、mIoU、accuracy、FLOPs、KID

信道与工作点全文未稳定定位

数据集为Cityscapes;实验小节中明确出现的比较对象包括JPEG、BPG、LDPC、QAM、GAN、JSCC、WebP;指标包括PSNR、SSIM、FID、bpp、MSE、mAP、mIoU、accuracy、FLOPs、KID。 PDF p.9

数值结果表明,我们的方法在捕获的ROI,同时表现出增强的弹性信道噪声的有效性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Region-of-Interest Oriented Image Semantic Communication 架构/方法图
架构/方法图|来源:《Region-of-Interest Oriented Image Semantic Communication》,原 PDF p.4,Fig. 1 The overall structure of the proposed single-layer image semantic communication framework。 核对论文
Region-of-Interest Oriented Image Semantic Communication 关键实验结果图/表
关键实验结果图/表|来源:《Region-of-Interest Oriented Image Semantic Communication》,原 PDF p.12,Fig. 5 Semantic segmentation results for recovered images. (SNR = 5, bpp = 0.702)。 核对论文
核心纳入2026图像传输、压缩或生成

SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission

DOI / IEEE 页面

作者Man Xu; Chan–Tong Lam; Yuanhui Liang; Benjamin Ng; Hawking Lai; Bowen Liu; Xiaochen Yuan; Sio‐Kei Im

出版信息Vol. 12 · pp. 8239-8255

DOI / IEEE ID10.1109/tccn.2026.3690646 / 11509323

通信位置自适应联合信源信道编码

一句话主旨:SADJSCC 面向图像传输、压缩或生成,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:传统的深度联合信源信道编码(DJSCC)方法在噪声环境中表现出语义不对准,这是由于它们依赖于像素级度量并且不能保持可解释的语义属性,特别是在变化的低信噪比(SNR)条件下。 PDF p.1
  2. 仍然存在的问题:然而,这些方法主要集中于通过感知度量来增强重构质量或提高传输效率。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了解决这些挑战,我们提出了一个语义感知的深度联合信源信道编码与属性保真度评估的信道自适应图像传输(SADJSCC),一个统一的框架,以解决语义错位:语义特征失真,潜在的空间位移,语义不可检测性。 PDF p.1
  6. 方案为何可能有效:·提出了一种基于属性保真度评估的信道自适应图像传输的语义感知DJSCC(SADJSCC),这是第一个将语义感知指导与信道自适应编码相结合的框架。 PDF p.2
  7. 作者希望证明什么:在CelebA、CIFAR-10和MNIST数据集上的实验验证表明,SADJSCC的性能获得了一致的提高。 PDF p.1

方法与端到端信息流

为了解决这些问题,本文提出了一种面向信道自适应图像传输的语义感知深度联合信源信道编码算法(SADJSCC),该算法能够有效地解决语义错位问题,包括语义特征失真、潜在空间位移和语义不可检测性。·提出了一种用于信道自适应图像传输的带属性保真度评估的语义感知DJSCC(SADJSCC),这是第一个将语义感知指导与信道自适应编码相结合的框架。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SADJSCC:为了解决这些问题,本文提出了一种面向信道自适应图像传输的语义感知深度联合信源信道编码算法(SADJSCC),该算法能够有效地解决语义错位问题,包括语义特征失真、潜在空间位移和语义不可检测性。·提出了一种用于信道自适应图像传输的带属性保真度评估的语义感知DJSCC(SADJSCC),这是第一个将语义感知指导与信道自适应编码相结合的框架。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SADJSCC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.2 PDF p.10

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景ImageNet、CelebA、CIFAR-10、MNIST

BaselineDeepJSCC、Swin Transformer、GAN、VAE、VQ-VAE、ELIC、ResNet、DeepSC、SwinJSCC、ADJSCC、JSCC、OFDM

评价指标PSNR、SSIM、LPIPS、FID、MSE、accuracy、recall、precision、latency、FLOPs

信道与工作点AWGN、Rayleigh、NOMA、MIMO、OFDM、fading channel、SNR = -4 dB、SNR of 28.6 dB、SNR of -4 dB、SNR of 34.1 dB、SNR = 4 dB、CBR = 1/4、CBR=1/4、CBR of 1/4、CBR = 1/3、CBR = 1/6

数据集为ImageNet、CelebA、CIFAR-10、MNIST;实验小节中明确出现的比较对象包括DeepJSCC、Swin Transformer、GAN、VAE、VQ-VAE、ELIC、ResNet、DeepSC、SwinJSCC、ADJSCC、JSCC、OFDM;指标包括PSNR、SSIM、LPIPS、FID、MSE、accuracy、recall、precision、latency、FLOPs;信道/链路条件包括AWGN、Rayleigh、NOMA、MIMO、OFDM、fading channel;正文可定位的代表性工作点有SNR = -4 dB、SNR of 28.6 dB、SNR of -4 dB、SNR of 34.1 dB、SNR = 4 dB、CBR = 1/4、CBR=1/4、CBR of 1/4、CBR = 1/3、CBR = 1/6。 PDF p.10

在CelebA、CIFAR-10和MNIST数据集上的实验验证表明,SADJSCC的性能获得了一致的提高。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission 架构/方法图
架构/方法图|来源:《SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission》,原 PDF p.7,Fig. 4 Semantic attribute prototype interpolation in latent space. α represents the interpolation coefficient。 核对论文
SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission 关键实验结果图/表
关键实验结果图/表|来源:《SADJSCC: Semantic-Aware DJSCC With Attribute Fidelity Evaluation for Channel-Adaptive Image Transmission》,原 PDF p.11,Fig. 6 The performance of the ablation experiments over an AWGN channel on the CelebA and MNIST datasets under training SNR = 20。 核对论文
核心纳入2026图像传输、压缩或生成

Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification

DOI / IEEE 页面

作者Xin Huang; Liang Zeng; Yaojun Lu; Jianping An

出版信息Vol. 12 · pp. 204-216

DOI / IEEE ID10.1109/tccn.2025.3556777 / 10946970

通信位置通信安全与隐私

一句话主旨:SCAPJSCC 面向图像传输、压缩或生成,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:Vision Transformer(ViT)和Swin Transformer由于其出色的视觉建模能力,在基于深度学习的联合信源信道编码(JSCC)和语义通信领域引起了极大的关注。 PDF p.1
  2. 仍然存在的问题:然而,我们发现这些方法存在三个问题:(1)ViT中全局注意力的二次复杂度带来了巨大的计算负担;(2)Swin Transformer中基于窗口的令牌分组降低了计算复杂度,但忽略了令牌中的语义信息。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为了克服上述缺陷,本文提出了一种基于语义聚类和对抗性净化的JSCC(SCAPJSCC)方案。 PDF p.1
  6. 方案为何可能有效:我们提出了一种插入解码器中的对抗性净化模块,能够检测和净化对抗性攻击,无论它们是发生在发射机处还是发生在通信信道上。 PDF p.2
  7. 作者希望证明什么:实验结果表明,SCAPJSCC的性能优于SwinJSCC,实现了更有效的图像信息语义建模,对各种对抗性攻击具有更强的抗攻击能力。 PDF p.1

方法与端到端信息流

为了解决这些问题,我们提出了一个基于语义聚类和对抗性净化的JSCC(SCAPJSCC)方案,我们提出了一个对抗性净化模块,该模块插入到解码器中,能够检测和净化对抗性攻击,无论它们发生在发送方还是通信信道上。 PDF p.1 PDF p.2

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SCAPJSCC:为了解决这些问题,我们提出了一个基于语义聚类和对抗性净化的JSCC(SCAPJSCC)方案,我们提出了一个对抗性净化模块,该模块插入到解码器中,能够检测和净化对抗性攻击,无论它们发生在发送方还是通信信道上。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:SCAPJSCC 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释信道作用点。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.8

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景Kodak、DIV2K、CIFAR-10、CIFAR10

BaselineDeepJSCC、NTSCC、SwinJSCC、ADJSCC、JSCC

评价指标PSNR、SSIM、MS-SSIM、accuracy、latency、MACs、PER

信道与工作点AWGN、Rayleigh、SNR = 7 dB、CBR of 1/6

数据集为Kodak、DIV2K、CIFAR-10、CIFAR10;实验小节中明确出现的比较对象包括DeepJSCC、NTSCC、SwinJSCC、ADJSCC、JSCC;指标包括PSNR、SSIM、MS-SSIM、accuracy、latency、MACs、PER;信道/链路条件包括AWGN、Rayleigh;正文可定位的代表性工作点有SNR = 7 dB、CBR of 1/6。 PDF p.8

实验结果表明,SCAPJSCC的性能优于SwinJSCC,实现了更有效的图像信息语义建模,对各种对抗性攻击具有更强的抗攻击能力。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification 架构/方法图
架构/方法图|来源:《Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification》,原 PDF p.4,Fig. 3 (a) The overall architecture of SCAPJSCC with adversarial purification (AP) modules. (b) The pipeline of vanilla SC blocks without adversarial purification modules。 核对论文
Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification 关键实验结果图/表
关键实验结果图/表|来源:《Secure and Robust Joint Source-Channel Coding With Semantic Clustering and Adversarial Purification》,原 PDF p.9,Fig. 7 The experimental results on AWGN channels. As the SNR changes, the left subfigure depicts the PSNR metric, while the right subfigure depicts the MS-SSIM metric。 核对论文
核心纳入2026图像传输、压缩或生成

Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication

DOI / IEEE 页面

作者Rui Meng; Song Gao; Bingxuan Xu; Xiaodong Xu; Jianqiao Chen; Nan Ma; Pei Xiao; Ping Zhang; Rahim Tafazolli

出版信息Vol. 12 · pp. 8106-8122

DOI / IEEE ID10.1109/tccn.2026.3692413 / 11516192

通信位置通信安全与隐私

一句话主旨:Secure Intellicise Wireless Network 面向图像传输、压缩或生成,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信(SemCom)凭借其在传输效率和可靠性方面的显著优势,已成为构建未来智能化(智能化和简洁化)无线网络的核心技术。 PDF p.1
  2. 仍然存在的问题:然而,以语义窃听为代表的智能攻击对SemCom的安全性提出了严峻的挑战。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:然而,以语义窃听为代表的智能攻击对SemCom的安全性提出了严峻的挑战。 PDF p.1
  6. 方案为何可能有效:然而,私密图像的恢复过程高度依赖于私密语义密钥的引导,而私密语义密钥可能会被智能窃听者推断出来,从而带来新的安全威胁。 PDF p.1
  7. 作者希望证明什么:在开源数据集上的仿真结果表明,与基线方案相比,AgentSemSteCom具有更好的传输质量和更高的安全性。 PDF p.1

方法与端到端信息流

然而,以语义窃听为代表的智能攻击对SemCom的安全性提出了严峻的挑战,而私密图像的恢复过程高度依赖于私密语义密钥的引导,智能窃听者可能会推断出私密语义密钥,从而带来新的安全威胁。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 Secure Intellicise Wireless Network:然而,以语义窃听为代表的智能攻击对SemCom的安全性提出了严峻的挑战,而私密图像的恢复过程高度依赖于私密语义密钥的引导,智能窃听者可能会推断出私密语义密钥,从而带来新的安全威胁。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Secure Intellicise Wireless Network 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.10

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景DIV2K、COCO、CelebA、CelebA-HQ、FFHQ

BaselineSwinJSCC、JSCC、LLaMA、BLIP

评价指标PSNR、SSIM、LPIPS、MSE、mAP、accuracy、precision

信道与工作点AWGN、SNR = 5 dB、SNR of 22.73 dB、SNR = 20 dB、SNR of 26.29 dB、SNR = 10 dB、SNR of 19.71 dB

数据集为DIV2K、COCO、CelebA、CelebA-HQ、FFHQ;实验小节中明确出现的比较对象包括SwinJSCC、JSCC、LLaMA、BLIP;指标包括PSNR、SSIM、LPIPS、MSE、mAP、accuracy、precision;信道/链路条件包括AWGN;正文可定位的代表性工作点有SNR = 5 dB、SNR of 22.73 dB、SNR = 20 dB、SNR of 26.29 dB、SNR = 10 dB、SNR of 19.71 dB。 PDF p.10

在开源数据集上的仿真结果表明,与基线方案相比,AgentSemSteCom具有更好的传输质量和更高的安全性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。

Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication 架构/方法图
架构/方法图|来源:《Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication》,原 PDF p.11,Fig. 5 Visualization results of AgentSemSteCom under different classes of images, which include common steganography images, facial images and style images. The images are collected at SNR = 10 dB。 核对论文
Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication 关键实验结果图/表
关键实验结果图/表|来源:《Secure Intellicise Wireless Network: Agentic AI for Coverless Semantic Steganography Communication》,原 PDF p.11,Fig. 5 Visualization results of AgentSemSteCom under different classes of images, which include common steganography images, facial images and style images. The images are collected at SNR = 10 dB。 核对论文
核心纳入2026任务导向推理

Semantic Communication for Cooperative Perception Using HARQ

DOI / IEEE 页面

作者Yucheng Sheng; Le Liang; Hao Ye; Shi Jin; Geoffrey Ye Li

出版信息Vol. 12 · pp. 1139-1154

DOI / IEEE ID10.1109/tccn.2025.3579540 / 11036556

通信位置数字语义编码与物理层接口

一句话主旨:V2V 面向任务导向推理,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“语义特征包/调制符号与 HARQ 冗余版本”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:这种感知是通过车对车(V2V)通信实现的,允许连接的自动驾驶汽车(CAV)交换传感器数据,例如光探测和测距(LiDAR)点云,从而增强对环境的集体理解。 PDF p.1
  2. 仍然存在的问题:然而,由于建筑物和树木等障碍物的存在,自动驾驶车辆往往面临感知能力有限的问题。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:边缘设备常需要及时决策而不是完整副本;只发送任务充分信息可以降低时延与带宽,但前提是关键证据确实能穿过信道。 PDF p.1
  5. 本文提出什么:我们开发了一种新的语义错误检测方法,以准确地识别错误的任务为导向的通信过程中,这是关键,以确定是否重传是保证在HARQ机制。 PDF p.1
  6. 方案为何可能有效:在本文中,我们研究了在通信系统设计中为了增强可靠性而采用的混合自动重传请求(HARQ)的结合,以进一步提高协作感知性能,特别是在极低信噪比(SNR)条件下。 PDF p.2
  7. 作者希望证明什么:仿真结果表明,我们提出的HARQ方法显着提高感知性能相比,没有HARQ,特别是在低信噪比制度。 PDF p.1

方法与端到端信息流

该文提出了一种新的语义错误检测方法,以准确地识别面向任务的通信过程中的错误,这是确定HARQ机制中是否允许重传的关键。文中研究了在通信系统设计中为了提高可靠性而采用的混合自动重传请求(HARQ)的结合,以进一步提高协作感知性能。特别是在极低的信噪比(SNR)条件下。本发明还提供了一种基于该方法的系统。 PDF p.1 PDF p.2

输入输入是任务导向推理所需的源数据与下游任务所需特征。
发送端发送端采用 V2V:该文提出了一种新的语义错误检测方法,以准确地识别面向任务的通信过程中的错误,这是确定HARQ机制中是否允许重传的关键。文中研究了在通信系统设计中为了提高可靠性而采用的混合自动重传请求(HARQ)的结合,以进一步提高协作感知性能。特别是在极低的信噪比(SNR)条件下。本发明还提供了一种基于该方法的系统。
实际发送实际发送对象是初传语义特征及按语义校验触发的增量冗余/重传包。
信道信道作用方式按“类别 5:语义感知 HARQ/重传与任务判据耦合”解释。
接收端接收端从初传或 HARQ 重传合并后的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为分类、分割、检索或其他任务决策。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:语义特征包/调制符号与 HARQ 冗余版本

最初,特征映射Mi被整形以消除零分量。 独立判断:V2V 的主传输单位应归为“语义特征包/调制符号与 HARQ 冗余版本”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.8

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:语义感知 HARQ/重传与任务判据耦合

另外,对于信道编码,我们考虑码长为5,376比特的1/2比率低密度奇偶校验(LDPC)码。 本调研据此归为“类别 5:语义感知 HARQ/重传与任务判据耦合”。 PDF p.11

语义 decoder 实际面对的是:初传或 HARQ 重传/合并后的合作感知语义特征。 PDF p.11

是否真正处理离散变量出错:是:语义错误检测器决定是否触发 HARQ,并在低 SNR 下以感知精度和吞吐量共同评估重传收益。

实验设置与主要结论

数据集/场景OPV2V

BaselineLDPC、QAM、JSCC、HARQ、OFDM

评价指标MSE、mAP、accuracy、recall、precision、latency、throughput、IoU、PER

信道与工作点wireless channel、OFDM、HARQ、fading channel、SNR = 9 dB、SNR = 15 dB、SNR of 15 dB、SNR = 6 dB

数据集为OPV2V;实验小节中明确出现的比较对象包括LDPC、QAM、JSCC、HARQ、OFDM;指标包括MSE、mAP、accuracy、recall、precision、latency、throughput、IoU、PER;信道/链路条件包括wireless channel、OFDM、HARQ、fading channel;正文可定位的代表性工作点有SNR = 9 dB、SNR = 15 dB、SNR of 15 dB、SNR = 6 dB。 PDF p.10

仿真结果表明,我们提出的HARQ方法显着提高感知性能相比,没有HARQ,特别是在低信噪比制度。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:主要局限取决于训练/测试分布、信道假设和系统开销是否完整公开。

Semantic Communication for Cooperative Perception Using HARQ 架构/方法图
架构/方法图|来源:《Semantic Communication for Cooperative Perception Using HARQ》,原 PDF p.8,Fig. 5 Structures of the cooperative perception with HARQ at the tth transmission. (a) SemHARQ-I; (b) SemHARQ-II。 核对论文
Semantic Communication for Cooperative Perception Using HARQ 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Communication for Cooperative Perception Using HARQ》,原 PDF p.7,Fig. 2 and their subtle differences will be where the term λm is the net effect of all pair-wise compardescribed in detail below. isons involving the mth sample. Specifically, λm is given by 1) SemHARQ-I: As illustrated in 核对论文
核心纳入2026文本传输或语言任务

Semantic Communication for Machines: A Joint Transmission and Understanding Design

DOI / IEEE 页面

作者Qi He; Hongxin Zhang; Kaiwen Yu; Gang Wu; Zhi Chen; Tony Q. S. Quek

出版信息Vol. 12 · pp. 7382-7398

DOI / IEEE ID10.1109/tccn.2026.3683217 / 11480127

通信位置生成式语义信源编码

一句话主旨:Semantic Communication for Machines 面向文本传输或语言任务,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信在多媒体传输和联合传输执行任务中表现出色,但缺乏通用的语义级设备控制架构。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“文本传输或语言任务”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:一个 token 错误就可能改变整句含义,因此仅看 BER 不足以评价链路;必须追踪最终语言意义或任务输出。 PDF p.1
  5. 本文提出什么:本文介绍了一种创新的框架,使直接人/机器到设备的交互,通过自然语言表示的通用语义。 PDF p.1
  6. 方案为何可能有效:一个典型的M2M场景是无人机辅助检查,其中无人机需要与地面设备协调来完成环境诊断和农业优化等任务,但异构设备生态系统需要我们的新型语义级自然语言命令框架来绕过昂贵的协议标准化,同时保持跨设备的互操作性。 PDF p.2
  7. 作者希望证明什么:大量的实验表明,所提出的模型和技能在一对一和一对多的情况下,重点对信道噪声的鲁棒性和接收机的复杂性急剧下降的功效。 PDF p.1

方法与端到端信息流

本文介绍了一种通过通用语义的自然语言表示实现人/机到设备直接交互的创新框架,一个典型的M2M场景是无人机辅助检查,其中无人机需要与地面设备协调来完成环境诊断和农业优化等任务,然而,异构设备生态系统需要我们的新型语义级自然语言命令框架,以绕过昂贵的协议标准化,同时保持跨设备互操作性。 PDF p.1 PDF p.2

输入输入是文本传输或语言任务所需的句子、token 序列或语言语义。
发送端发送端采用 Semantic Communication for Machines:本文介绍了一种通过通用语义的自然语言表示实现人/机到设备直接交互的创新框架,一个典型的M2M场景是无人机辅助检查,其中无人机需要与地面设备协调来完成环境诊断和农业优化等任务,然而,异构设备生态系统需要我们的新型语义级自然语言命令框架,以绕过昂贵的协议标准化,同时保持跨设备互操作性。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为恢复文本、翻译结果或语言任务输出。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Semantic Communication for Machines 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

在训练过程中,我们分别对BERT部分和体系结构中的其他部分使用了两种不同的带有线性预热调度器的Adam优化器,它们的最大学习速率分别为1 × 10-4和5 × 10-3。 PDF p.8

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.10

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.10

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineLDPC、Huffman、BERT

评价指标accuracy、precision、latency、FLOPs、PER

信道与工作点AWGN、Rayleigh、NOMA

实验小节中明确出现的比较对象包括LDPC、Huffman、BERT;指标包括accuracy、precision、latency、FLOPs、PER;信道/链路条件包括AWGN、Rayleigh、NOMA。 PDF p.10

大量的实验表明,所提出的模型和技能在一对一和一对多的情况下,重点对信道噪声的鲁棒性和接收机的复杂性急剧下降的功效。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantic Communication for Machines: A Joint Transmission and Understanding Design 架构/方法图
架构/方法图|来源:《Semantic Communication for Machines: A Joint Transmission and Understanding Design》,原 PDF p.2,Fig. 1 Application example of the proposed design。 核对论文
Semantic Communication for Machines: A Joint Transmission and Understanding Design 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Communication for Machines: A Joint Transmission and Understanding Design》,原 PDF p.13,Fig. 13 Performance comparison between word-level and subword-level decoding on ATIS and Snips datasets。 核对论文
核心纳入2026图像传输、压缩或生成

Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels

DOI / IEEE 页面

作者Bin Shen; Shuai Ma; Rui Chen; Youlong Wu; Hang Li; Guangming Shi; Shiyin Li; Naofal Al-Dhahir

出版信息Vol. 12 · pp. 283-297

DOI / IEEE ID10.1109/tccn.2025.3558018 / 10960558

通信位置数字语义编码与物理层接口

一句话主旨:SFDMA 面向图像传输、压缩或生成,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:为解决多用户语义通信网络容量瓶颈问题,提出一种语义特征域多址接入(SFDMA)方案。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“图像传输、压缩或生成”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:为解决多用户语义通信网络容量瓶颈问题,提出一种语义特征域多址接入(SFDMA)方案。 PDF p.1
  6. 方案为何可能有效:在此基础上,提出了一种语义数字多址接入网络模型来完成多用户推理任务,并利用变分信息瓶颈(VIB)理论设计了一种高效的语义编解码方案,以保证特征域的正交性和分类精度。 PDF p.1
  7. 作者希望证明什么:仿真结果表明,所提出的SFDMA方案在不同应用中具有语义特征域正交性,自适应功率分配方法在分类任务中表现出良好的性能,有效地保证了语义通信的服务质量(QoS)。 PDF p.1

方法与端到端信息流

为解决多用户语义通信网络容量瓶颈问题,提出了一种语义特征域多址接入(SFDMA)方案,在此方案的基础上,提出了一种语义数字多址接入网络模型,用于执行多用户推理任务,提出了一种基于变分信息瓶颈(VIB)的高效语义编解码方案理论来保证特征域中的正交性和分类精度。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SFDMA:为解决多用户语义通信网络容量瓶颈问题,提出了一种语义特征域多址接入(SFDMA)方案,在此方案的基础上,提出了一种语义数字多址接入网络模型,用于执行多用户推理任务,提出了一种基于变分信息瓶颈(VIB)的高效语义编解码方案理论来保证特征域中的正交性和分类精度。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

我们将量化过程表示为Qi(·),其输出可以表示为bi = Qi(zi)。 独立判断:SFDMA 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.3

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.2 PDF p.9

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景MNIST

BaselineDeepJSCC、JSCC

评价指标PSNR、SSIM、MS-SSIM、MSE、accuracy、precision、classification accuracy

信道与工作点AWGN、Rayleigh、SINR、fading channel、SNR = 5dB、SNR of 5dB、SNR of 0 dB、SNR of 10dB

数据集为MNIST;实验小节中明确出现的比较对象包括DeepJSCC、JSCC;指标包括PSNR、SSIM、MS-SSIM、MSE、accuracy、precision、classification accuracy;信道/链路条件包括AWGN、Rayleigh、SINR、fading channel;正文可定位的代表性工作点有SNR = 5dB、SNR of 5dB、SNR of 0 dB、SNR of 10dB。 PDF p.9

仿真结果表明,所提出的SFDMA方案在不同应用中具有语义特征域正交性,自适应功率分配方法在分类任务中表现出良好的性能,有效地保证了语义通信的服务质量(QoS)。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels 架构/方法图
架构/方法图|来源:《Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels》,原 PDF p.11,Fig. 10 compares the image restoration accuracy performance of SFDMA, Deep JSCC with/without interference schemes for image reconstruc- 核对论文
Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Feature Division Multiple Access for Digital Semantic Multiple Access Channels》,原 PDF p.11,Fig. 10 compares the image restoration accuracy performance of SFDMA, Deep JSCC with/without interference schemes for image reconstruc- 核对论文
相关但非核心2026综述、架构与研究路线

Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions

DOI / IEEE 页面

作者Rui Meng; Zixuan Huang; Jingshu Yan; Mengying Sun; Yiming Liu; Chenyuan Feng; Xiaodong Xu; Zhidi Zhang; Song Gao; Ping Zhang; Tony Q. S. Quek

出版信息Vol. 12 · pp. 7076-7097

DOI / IEEE ID10.1109/tccn.2026.3683191 / 11480161

通信位置语义信息理论与性能度量

一句话主旨:Semantic Radio Access Networks 面向综述、架构与研究路线,把问题放在“语义信息理论与性能度量”层处理;本调研把主接口判断为“上层理论/资源变量;论文不单独定义可发送语义格式”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:近年来,语义通信(SemCom)代表了一种变革性的通信模式,其优先于传统的比特级传输,从而提高了频谱效率、在复杂环境中的抗干扰能力、灵活的资源分配和增强了RAN的用户体验。 PDF p.1
  2. 仍然存在的问题:然而,目前尚缺乏关于SemCom与RAN集成的全面综述。 PDF p.1
  3. 为什么已有方法解决不了:不同论文各自报告准确率或重建指标,不能替代统一、可计算且与通信资源相联系的定义或可达界;缺失的是比较坐标而不是更深的网络。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:为此,本次调查将重点关注SemRAN,详细介绍其特定的架构。 PDF p.1
  6. 方案为何可能有效:为此,本次调查将重点关注SemRAN,详细介绍其特定的架构。 PDF p.1
  7. 作者希望证明什么:近年来,语义通信(SemCom)代表了一种变革性的通信模式,其优先于传统的比特级传输,从而提高了频谱效率、在复杂环境中的抗干扰能力、灵活的资源分配和增强了RAN的用户体验。 PDF p.1

方法与端到端信息流

为此,本次调查将重点关注SemRAN,详细介绍其特定的架构。 PDF p.1

输入输入是综述、架构与研究路线所需的已有语义通信系统、模型和网络机制。
发送端发送端采用 Semantic Radio Access Networks:为此,本次调查将重点关注SemRAN,详细介绍其特定的架构。
实际发送实际发送对象是系统模型定义的语义速率、任务效用或信道资源变量。
信道信道作用方式按“类别 5:沿用底层链路或抽象速率—效用模型”解释。
接收端接收端从系统公式假设的接收端输出或语义质量曲线开始,再执行语义解码、任务推理或生成。
输出最终输出为分类体系、架构总结与研究方向。
它在通信系统中的位置:定义语义信息、失真、价值或可达边界,为系统比较提供共同坐标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:上层理论/资源变量;论文不单独定义可发送语义格式

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“上层理论/资源变量;论文不单独定义可发送语义格式”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Semantic Radio Access Networks 的主传输单位应归为“上层理论/资源变量;论文不单独定义可发送语义格式”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文优化的是功率、带宽、时隙、用户调度或语义效用等上层资源变量,并未定义一条可逐 bit 复现的语义 codec。因而这里只报告系统约束和效用曲线,不能从优化变量反推 token/index 总 bit 数。 PDF p.2 PDF p.13

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 5:沿用底层链路或抽象速率—效用模型

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 5:沿用底层链路或抽象速率—效用模型”解释信道作用点。 本调研据此归为“类别 5:沿用底层链路或抽象速率—效用模型”。 PDF p.2 PDF p.13

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.13

是否真正处理离散变量出错:未正面处理。系统模型不足以追踪残余 bit/index/packet error 到最终语义质量。

实验设置与主要结论

数据集/场景全文未稳定定位

Baseline全文未稳定定位

评价指标全文未稳定定位

信道与工作点wireless channel、erasure、MIMO、HARQ、fading channel

该文属于综述/架构论文,不设置单一训练数据集、实验 baseline 或统一 SNR 工作点;页面中的技术名称按被综述对象处理,不冒充作者实验。 PDF p.13

近年来,语义通信(SemCom)代表了一种变革性的通信模式,其优先于传统的比特级传输,从而提高了频谱效率、在复杂环境中的抗干扰能力、灵活的资源分配和增强了RAN的用户体验。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“语义信息理论与性能度量”:价值在于把语义效用接入网络优化或可达边界;关键是效用定义能否在真实链路被测量、估计并稳定用于决策。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。 未报告统一可复核的 payload bit 数/CBR,跨论文带宽比较受限。 该文属于边界谱系,不能用它代表端到端语义通信主线。

Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions 架构/方法图
架构/方法图|来源:《Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions》,原 PDF p.3,Fig. 1 The structure of this paper。 核对论文
Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions 关键实验结果图/表
关键实验结果图/表|来源:《Semantic Radio Access Networks: Architecture, State-of-the-Art, and Future Directions》,原 PDF p.2,该页包含论文的关键实验结果图或表。 核对论文
核心纳入2026图像传输、压缩或生成

SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion

DOI / IEEE 页面

作者Taojie Zhu; Ao Zhang; Qiang Wu; Mingkai Chen; Zhenyu Liu; Tiesong Zhao; Lei Wang

出版信息Vol. 12 · pp. 9775-9789

DOI / IEEE ID10.1109/tccn.2026.3710538 / 11595835

通信位置通信安全与隐私

一句话主旨:SemDiffShield 面向图像传输、压缩或生成,把问题放在“通信安全与隐私”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:在智能人工智能驱动的6G网络的新兴时代,高维语义特征的交换是协作感知的基石。 PDF p.1
  2. 仍然存在的问题:然而,无线信道的开放性和语义特征的透明性产生了可被模型反转攻击利用的关键漏洞。 PDF p.1
  3. 为什么已有方法解决不了:只优化合法接收端的重建或任务 loss,并不会自动消除 latent 泄露、窃听或操纵风险;缺少的是把攻击者与保护目标放进同一系统模型。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:针对这一问题,我们提出了SemDiffShield框架,该框架可以将信道噪声重新利用为一种内生的安全原语。 PDF p.1
  6. 方案为何可能有效:最后,语义生成代理使用大型语言模型合成与秘密源语义正交的视觉自然的封面图像,保证了传输的不可检测性。 PDF p.1
  7. 作者希望证明什么:实验结果表明,SemDiffShield在保密性和恢复性之间取得了平衡,即使在传统基线失效的严重噪声条件下也能提供高保真恢复。 PDF p.1

方法与端到端信息流

为了解决这一挑战,我们提出了SemDiffShield,一个将信道噪声重新利用为内源性安全原语的框架。最后,语义生成代理通过使用大型语言模型来合成与秘密源语义正交的视觉上自然的封面图像,从而确保传输的不可检测性。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 SemDiffShield:为了解决这一挑战,我们提出了SemDiffShield,一个将信道噪声重新利用为内源性安全原语的框架。最后,语义生成代理通过使用大型语言模型来合成与秘密源语义正交的视觉上自然的封面图像,从而确保传输的不可检测性。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释。
接收端接收端从默认无误恢复的 bitstream、token 或 index开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:把窃听、攻击或隐私泄露纳入语义链路,同时考察合法端质量与攻击端获得的信息。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

然后,经由JSCC模块在无线信道上发送加密的潜在表示。 独立判断:SemDiffShield 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.4

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”解释信道作用点。 本调研据此归为“类别 1:形成数字表示,但物理链路按可靠 bitstream 抽象”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineVAE、DeepSC、JSCC、CLIP、BLIP

评价指标PSNR、SSIM、LPIPS、MSE、mAP、accuracy、latency、FLOPs、PER

信道与工作点AWGN、Rayleigh、wireless channel、NOMA、fading channel、SNR from 0 dB、SNR of 18.34 dB、SNR of 26.23 dB、SNR of 21.92 dB、bandwidth ratio of 1/6

实验小节中明确出现的比较对象包括VAE、DeepSC、JSCC、CLIP、BLIP;指标包括PSNR、SSIM、LPIPS、MSE、mAP、accuracy、latency、FLOPs、PER;信道/链路条件包括AWGN、Rayleigh、wireless channel、NOMA、fading channel;正文可定位的代表性工作点有SNR from 0 dB、SNR of 18.34 dB、SNR of 26.23 dB、SNR of 21.92 dB、bandwidth ratio of 1/6。 PDF p.9

实验结果表明,SemDiffShield在保密性和恢复性之间取得了平衡,即使在传统基线失效的严重噪声条件下也能提供高保真恢复。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“通信安全与隐私”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion 架构/方法图
架构/方法图|来源:《SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion》,原 PDF p.3,Fig. 2 Conventional semantic communication focuses on data manifold and to produce semantically meaningless out- 核对论文
SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion 关键实验结果图/表
关键实验结果图/表|来源:《SemDiffShield: Agentic AI-Empowered Secure Image Semantic Communication via Cryptographic Diffusion》,原 PDF p.11,Fig. 6 Transmission Performance Comparison. The first row (a-c) and the second row (d-f) show the fidelity metrics (MSE, PSNR, and SSIM) under AWGN and Rayleigh fading channels, respectively. Our method maintains s 核对论文
核心纳入2026视频传输、生成或控制

ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission

DOI / IEEE 页面

作者Xinyi Zhou; Danlan Huang; Zhixin Qi; Ting Jiang; You Yang; Zhiyong Feng

出版信息Vol. 12 · pp. 5047-5062

DOI / IEEE ID10.1109/tccn.2025.3641521 / 11282973

通信位置自适应联合信源信道编码

一句话主旨:ST-VJSCC 面向视频传输、生成或控制,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“有限星座/标准数字波形接口”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:新兴的无线视频服务需要高效的传输方案弹性的动态信道条件,同时保持语义的完整性。 PDF p.1
  2. 仍然存在的问题:传统的深度联合信源信道编码(DeepJSCC)在联合建模时空依赖性和适应带宽约束方面面临挑战。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:视频持续占用带宽且具有严格时延,单帧错误还会跨帧传播;通信系统必须同时处理时序一致性、资源占用和渐进退化。 PDF p.1
  5. 本文提出什么:我们提出了时空视频DeepJSCC(ST-VJSCC),通过三个关键创新来解决这些限制。 PDF p.1
  6. 方案为何可能有效:提出了一种新的时空视频DeepJSCC(ST-VJSCC)无线视频语义通信框架。 PDF p.2
  7. 作者希望证明什么:在未来的工作中,我们将专注于视频内容自适应可变长度编码和信道自适应可伸缩视频编码,以进一步提高传输效率和鲁棒性在现实世界的信道条件下。 PDF p.15

方法与端到端信息流

我们提出了时空视频DeepJSCC(ST-VJSCC),通过三个关键的创新来解决这些限制。本文提出了一种新的时空视频DeepJSCC(ST-VJSCC)框架,用于无线视频语义通信。 PDF p.1 PDF p.2

输入输入是视频传输、生成或控制所需的视频帧、运动信息或时序语义。
发送端发送端采用 ST-VJSCC:我们提出了时空视频DeepJSCC(ST-VJSCC),通过三个关键的创新来解决这些限制。本文提出了一种新的时空视频DeepJSCC(ST-VJSCC)框架,用于无线视频语义通信。
实际发送实际发送对象是有限星座符号、OFDM/OTFS 资源或受保护数据包。
信道信道作用方式按“类别 2:语义特征映射为调制符号或编码包”解释。
接收端接收端从均衡或 soft demodulation 后的符号,再恢复语义表示开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成视频或视频任务结果。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:有限星座/标准数字波形接口

与现有的DeepJSCC和传统的视频编码方法(通常依赖于显式运动估计或光流计算)相比,所提出的模型直接从潜在表示中学习时空依赖性,从而消除了对任何手工制作的运动提示或辅助模块的需要。 独立判断:ST-VJSCC 的主传输单位应归为“有限星座/标准数字波形接口”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.10

\[N_{tx}=N_{unit}b_{unit}+N_{header}+N_{FEC},\qquad CBR=\frac{N_{channel\ uses}}{N_{source\ samples}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 2:语义特征映射为调制符号或编码包

本文研究了城市非视距(NLoS)条件下的大尺度衰落信道,路径损耗指数取3,阴影衰落标准差取8 dB,遵循TR 38.901的规范。 本调研据此归为“类别 2:语义特征映射为调制符号或编码包”。 PDF p.11

语义 decoder 实际面对的是:数字解调/译码后的 bit、index 或量化 feature;软信息接口若未明示则不能假定。 PDF p.11

是否真正处理离散变量出错:部分:存在数字接口与信道模型,但若正文只报告 SNR/重建质量而未注入 bit/index error,就不能宣称解决跳变问题。

实验设置与主要结论

数据集/场景UCF101

BaselineDeepJSCC、H.264、H.265、LDPC、ViT、DVC、JSCC

评价指标PSNR、SSIM、MS-SSIM、MSE、latency、FPS

信道与工作点AWGN、Rayleigh、Rician、fading channel、SNR=13 dB、SNR = 1dB、SNR of 1 dB、SNR = 13 dB、SNR of 35.26 dB、CBR=0.031、CBR of 0.019、CBR = 0.031

数据集为UCF101;实验小节中明确出现的比较对象包括DeepJSCC、H.264、H.265、LDPC、ViT、DVC、JSCC;指标包括PSNR、SSIM、MS-SSIM、MSE、latency、FPS;信道/链路条件包括AWGN、Rayleigh、Rician、fading channel;正文可定位的代表性工作点有SNR=13 dB、SNR = 1dB、SNR of 1 dB、SNR = 13 dB、SNR of 35.26 dB、CBR=0.031、CBR of 0.019、CBR = 0.031。 PDF p.10

在未来的工作中,我们将专注于视频内容自适应可变长度编码和信道自适应可伸缩视频编码,以进一步提高传输效率和鲁棒性在现实世界的信道条件下。 PDF p.15

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission 架构/方法图
架构/方法图|来源:《ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission》,原 PDF p.3,Fig. 1 The proposed ST-VJSCC scheme for the semantic communications system。 核对论文
ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission 关键实验结果图/表
关键实验结果图/表|来源:《ST-VJSCC: Spatio-Temporal Video DeepJSCC Scheme for Adaptive Wireless Transmission》,原 PDF p.9,Fig. 5 Performance comparison of ST-VJSCC to other schemes over AWGN channel cases (CBR=0.031). (a) PSNR performance for UCF101 dataset. (b) MS-SSIM performance for UCF101 dataset. (c) PSNR performance for BVI-DVC dataset. (d) MS-SSIM perfromance for BVI-DVC dataset。 核对论文
核心纳入2026语义信息度量与理论

Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach

DOI / IEEE 页面

作者Jinghang He; Yajing Deng; Shaohua Wu; Bin Cao; Siqi Meng; Weihan Zhang; Qinyu Zhang

出版信息Vol. 12 · pp. 7157-7171

DOI / IEEE ID10.1109/tccn.2026.3682513 / 11478500

通信位置自适应联合信源信道编码

一句话主旨:TASC-f 面向语义信息度量与理论,把问题放在“自适应联合信源信道编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:面向任务的语义通信代表了一种新的范式,旨在优化特定语义任务的性能。 PDF p.1
  2. 仍然存在的问题:然而,这些方法往往在单个任务上表现不佳,并且难以适应动态变化的任务需求。 PDF p.1
  3. 为什么已有方法解决不了:为固定 SNR 或带宽训练的模型具有固定瓶颈和保护方式;条件变化时重复运行同一网络,不能把码率或冗余重新分给变得脆弱的信息。 PDF p.1
  4. 为什么这个问题重要:没有定义清楚的语义目标和资源坐标,就无法判断收益来自通信机制还是更换了数据集、模型或评价指标。 PDF p.1
  5. 本文提出什么:针对这些不足,提出了一种具有反馈的任务自适应语义通信系统(TASC-f),该系统采用统一的、端到端的自适应编解码器模型,能够处理不同的任务。 PDF p.1
  6. 方案为何可能有效:具体来说,我们制定的任务自适应语义通信问题作为一个有条件的率失真优化,将特定于任务的语义提示作为边信息。 PDF p.1
  7. 作者希望证明什么:所提出的系统不仅优于竞争的数据驱动通信方法,而且在适应新任务时,其性能也与专用单任务系统的固定任务的性能相匹配,并优于多任务通信系统。 PDF p.1

方法与端到端信息流

针对这些不足,我们提出了一个具有反馈的任务自适应语义通信系统(TASC-f),该系统利用了一个统一的、端到端的自适应编解码器模型,能够处理不同的任务,具体地说,我们将任务自适应语义通信问题表述为一个条件率失真优化问题,并将特定任务的语义提示作为辅助信息。 PDF p.1

输入输入是语义信息度量与理论所需的抽象信源—任务—信道模型。
发送端发送端采用 TASC-f:针对这些不足,我们提出了一个具有反馈的任务自适应语义通信系统(TASC-f),该系统利用了一个统一的、端到端的自适应编解码器模型,能够处理不同的任务,具体地说,我们将任务自适应语义通信问题表述为一个条件率失真优化问题,并将特定任务的语义提示作为辅助信息。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为界、度量或优化原则。
它在通信系统中的位置:让表示维度、保护强度或接收策略随带宽和信道条件变化。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:TASC-f 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景ImageNet

BaselineDeepJSCC、NTSCC、BPG、LDPC、Swin Transformer、ResNet、Mask R-CNN、JSCC、Swift

评价指标LPIPS、BD-rate、mAP、Top-1、accuracy、precision、latency、FLOPs、classification accuracy、PER

信道与工作点全文未稳定定位

数据集为ImageNet;实验小节中明确出现的比较对象包括DeepJSCC、NTSCC、BPG、LDPC、Swin Transformer、ResNet、Mask R-CNN、JSCC、Swift;指标包括LPIPS、BD-rate、mAP、Top-1、accuracy、precision、latency、FLOPs、classification accuracy、PER。 PDF p.9

所提出的系统不仅优于竞争的数据驱动通信方法,而且在适应新任务时,其性能也与专用单任务系统的固定任务的性能相匹配,并优于多任务通信系统。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“自适应联合信源信道编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach 架构/方法图
架构/方法图|来源:《Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach》,原 PDF p.5,Fig. 1 The framework of TASC-f. Ui is the specific semantic prompt for the i-th semantic tasks, such as classification and instance segmentation。 核对论文
Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach 关键实验结果图/表
关键实验结果图/表|来源:《Task-Adaptive Semantic Communication With Feedback: A Conditional Rate-Distortion Approach》,原 PDF p.8,Fig. 4 Comparison of rate-distortion performance under fixed known semantic tasks。 核对论文
核心纳入2026图像传输、压缩或生成

Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders

DOI / IEEE 页面

作者Simin Dai; Xuechen Chen; Xiaoheng Deng; Siyu Lin

出版信息Vol. 12 · pp. 7983-7996

DOI / IEEE ID10.1109/tccn.2026.3691535 / 11513519

通信位置任务导向联合信源信道设计

一句话主旨:HMAE 面向图像传输、压缩或生成,把问题放在“任务导向联合信源信道设计”层处理;本调研把主接口判断为“连续神经 JSCC latent / 实复信道符号”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:基于深度学习的联合信源信道编码(DeepJSCC)在面向任务的语义通信方面表现出了巨大的潜力。 PDF p.1
  2. 仍然存在的问题:然而,现有的DeepJSCC框架在多任务间表现出有限的泛化能力。 PDF p.1
  3. 为什么已有方法解决不了:像素级重建是比下游决策更强、也更昂贵的目标;但只压缩 feature 又可能丢掉决定任务的少量证据,因此需要把任务 loss 与通信瓶颈联合设计。 PDF p.1
  4. 为什么这个问题重要:有限信道使用迫使系统决定哪些视觉内容值得保护;低 SNR 或高压缩率下,任务/感知关键结构往往比平均像素误差更重要。 PDF p.1
  5. 本文提出什么:针对这一问题,本文提出一种新的任务可泛化DeepJSCC框架TGDJSCC。 PDF p.1
  6. 方案为何可能有效:具体来说,我们引入了一种新的内容感知树建立层次结构,沿着与双自监督掩模图像建模计划学习可转移的层次表示。 PDF p.1
  7. 作者希望证明什么:这些复杂度分析结果证实了所提出的TGDJSCC框架在引入最小的额外复杂度的同时提高了性能,使其非常适合于实际部署。 PDF p.13

方法与端到端信息流

为了克服这一挑战,我们提出了一个新的任务泛化DeepJSCC框架TGDJSCC,该框架引入了一种新的内容感知树来建立层次结构,沿着引入了一种双重自监督的掩模图像建模方法来学习可转换的层次表示。 PDF p.1

输入输入是图像传输、压缩或生成所需的图像及其视觉/任务语义。
发送端发送端采用 HMAE:为了克服这一挑战,我们提出了一个新的任务泛化DeepJSCC框架TGDJSCC,该框架引入了一种新的内容感知树来建立层次结构,沿着引入了一种双重自监督的掩模图像建模方法来学习可转换的层次表示。
实际发送实际发送对象是功率归一化的实数或复数神经信道符号。
信道信道作用方式按“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”解释。
接收端接收端从AWGN/衰落作用后的带噪连续符号开始,再执行语义解码、任务推理或生成。
输出最终输出为重建/生成图像或视觉任务输出。
它在通信系统中的位置:只传下游任务需要的信息,并以任务质量而不是逐 bit 正确作为最终目标。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:连续神经 JSCC latent / 实复信道符号

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“连续神经 JSCC latent / 实复信道符号”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:HMAE 的主传输单位应归为“连续神经 JSCC latent / 实复信道符号”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

我们将B = Lc × Dc表示为用于传输的符号的数目。 PDF p.3

\[CBR=\frac{N_{complex\ channel\ symbols}}{N_{source\ samples}},\qquad R_{bit}\ \text{未定义(连续映射)}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 3:连续语义变量直接经过有噪声信道并端到端恢复

所有的比较实验都是在AWGN信道和Rayleigh衰落信道下进行的。 本调研据此归为“类别 3:连续语义变量直接经过有噪声信道并端到端恢复”。 PDF p.9

语义 decoder 实际面对的是:带噪连续 channel symbol / latent,经神经 decoder 恢复任务输出。 PDF p.9

是否真正处理离散变量出错:不适用 VQ index/bit 跳变;论文处理的是连续扰动和信道失配。

实验设置与主要结论

数据集/场景Kodak、DIV2K、ImageNet、CIFAR-10、CIFAR10、CIFAR-100、CIFAR100

BaselineJSCC

评价指标PSNR、MSE、mAP、Top-1、accuracy、precision、classification accuracy、IoU

信道与工作点AWGN、Rayleigh、wireless channel、fading channel

数据集为Kodak、DIV2K、ImageNet、CIFAR-10、CIFAR10、CIFAR-100、CIFAR100;实验小节中明确出现的比较对象包括JSCC;指标包括PSNR、MSE、mAP、Top-1、accuracy、precision、classification accuracy、IoU;信道/链路条件包括AWGN、Rayleigh、wireless channel、fading channel。 PDF p.9

这些复杂度分析结果证实了所提出的TGDJSCC框架在引入最小的额外复杂度的同时提高了性能,使其非常适合于实际部署。 PDF p.13

通信价值、局限与 Codex 判断

该工作位于“任务导向联合信源信道设计”:通信价值要由相同 CBR、功率和信道条件下的质量/任务收益证明,而不是只由神经网络指标提升证明。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders 架构/方法图
架构/方法图|来源:《Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders》,原 PDF p.6,Fig. 4 An overall framework of the hierarchical masked autoencoder (HMAE), which learns hierarchical representation via a dual self-supervised objective: masked image reconstruction (MIR) and masked hierarchical tree prediction (MHTP)。 核对论文
Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders 关键实验结果图/表
关键实验结果图/表|来源:《Task-Generalizable Deep Joint Source-Channel Coding via Hierarchical Masked Autoencoders》,原 PDF p.11,Fig. 9 extends our evaluation to super-resolution tasks, comparing the reconstruction performance under different scaling factors and channel conditions. The PSNR results for 2× 核对论文
核心纳入2026通用语义通信系统

Topic Enhanced Semantic Communication System for Reliable Semantic Recovery

DOI / IEEE 页面

作者Yuyuan Zhang; Yichi Zhang; Haitao Zhao; Peng Luo; Kaiwen Tan; Jiewen Deng; Jibo Wei

出版信息Vol. 12 · pp. 2814-2828

DOI / IEEE ID10.1109/tccn.2025.3579558 / 11036535

通信位置联合信源信道编码(JSCC)

一句话主旨:TESC 面向通用语义通信系统,把问题放在“联合信源信道编码(JSCC)”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:语义通信,有效地提取和传输关键的语义特征的能力,在支持智能任务和个性化的通信显示出诱人的潜力。 PDF p.1
  2. 仍然存在的问题:虽然现有的研究已经取得了显着的性能,利用局部语义关系来重建数据,全局语义信息的重要作用,语义恢复仍然没有得到探索。 PDF p.1
  3. 为什么已有方法解决不了:分离压缩与信道编码优化的是中间 bit 可靠性,未必等价于本文关心的语义/任务质量;反过来,只做端到端网络而不交代带宽、功率和信道作用点也无法形成公平通信比较。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:在本文中,我们引入了一个重要的全局语义信息,主题,语义通信,以提高语义恢复,这在确保上下文一致性和语义理解起着至关重要的作用。 PDF p.1
  6. 方案为何可能有效:具体来说,我们提出了一个主题增强的语义通信系统(TESC),集成了主题和内容表示,以确保可靠的通信。 PDF p.1
  7. 作者希望证明什么:与其他基准测试相比,所提出的TESC在不增加传输数据量的情况下显著提高了通信可靠性。 PDF p.1

方法与端到端信息流

为了提高语义恢复能力,在语义通信中引入全局语义信息--主题,提出了一种主题增强的语义通信系统(topic enhanced semantic communication system,TESC),该系统将主题和内容的表示有机地结合起来,以保证可靠的通信。 PDF p.1

输入输入是通用语义通信系统所需的信源数据和接收端任务。
发送端发送端采用 TESC:为了提高语义恢复能力,在语义通信中引入全局语义信息--主题,提出了一种主题增强的语义通信系统(topic enhanced semantic communication system,TESC),该系统将主题和内容的表示有机地结合起来,以保证可靠的通信。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为重建内容或任务输出。
它在通信系统中的位置:在同一系统中共同设计压缩、语义保真和抗信道噪声机制。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:TESC 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.9

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.9

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.9

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景Europarl

BaselineWITT、LDPC、VAE、VQ-VAE、DeepSC、Huffman、BERT、OFDM

评价指标mAP、accuracy、precision、FLOPs、BLEU、semantic similarity、BER、SER

信道与工作点AWGN、Rayleigh、Rician、MIMO、OFDM、fading channel

数据集为Europarl;实验小节中明确出现的比较对象包括WITT、LDPC、VAE、VQ-VAE、DeepSC、Huffman、BERT、OFDM;指标包括mAP、accuracy、precision、FLOPs、BLEU、semantic similarity、BER、SER;信道/链路条件包括AWGN、Rayleigh、Rician、MIMO、OFDM、fading channel。 PDF p.9

与其他基准测试相比,所提出的TESC在不增加传输数据量的情况下显著提高了通信可靠性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“联合信源信道编码(JSCC)”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Topic Enhanced Semantic Communication System for Reliable Semantic Recovery 架构/方法图
架构/方法图|来源:《Topic Enhanced Semantic Communication System for Reliable Semantic Recovery》,原 PDF p.6,Fig. 2 The proposed two topic-semantic fusion mechanisms: (a) Word-level attention-based fusion mechanism; (b) Sentence-level attention-based fusion mechanism。 核对论文
Topic Enhanced Semantic Communication System for Reliable Semantic Recovery 关键实验结果图/表
关键实验结果图/表|来源:《Topic Enhanced Semantic Communication System for Reliable Semantic Recovery》,原 PDF p.10,Fig. 5 BLEU score versus SNR for comparison of TESC with and without ensure a fair comparison. topic over various channels。 核对论文
核心纳入2026多模态检索与任务通信

Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework

DOI / IEEE 页面

作者Xupeng Niu; Weijie Yuan; Long Tan; Jun Wu; Xianbin Wang

出版信息Vol. 12 · pp. 6988-7000

DOI / IEEE ID10.1109/tccn.2026.3677174 / 11455551

通信位置生成式语义信源编码

一句话主旨:Toward Intelligent IoT Services 面向多模态检索与任务通信,把问题放在“生成式语义信源编码”层处理;本调研把主接口判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:核心原则在于赋予设备解释数据语义的能力,从而为它们配备一个认知大脑。 PDF p.1
  2. 仍然存在的问题:然而,物联网设备的快速扩散正在给现有的通信基础设施带来前所未有的压力。 PDF p.1
  3. 为什么已有方法解决不了:把生成模型放在接收端并不等于通信开销自然降低;仍需明确发送什么条件、条件占多少资源,以及信道破坏条件时怎样约束幻觉和时延。 PDF p.1
  4. 为什么这个问题重要:语义质量必须在真实的带宽、功率和时延预算下成立,否则模型收益不能转化为通信系统收益。 PDF p.1
  5. 本文提出什么:为了解决这些限制,我们提出了一个生成AI(GenAI)辅助的多模态语义通信系统,该系统以自适应对抗扩散模型(AADM)为中心,用于高效的跨设备数据传输。 PDF p.1
  6. 方案为何可能有效:在发送端,我们的框架利用预先训练好的具有丰富世界知识的大规模人工智能模型来生成语义嵌入。 PDF p.3
  7. 作者希望证明什么:语义感知智能对于支持人工智能的物联网(IoT)服务至关重要,以实现跨异构设备的广泛覆盖和高可靠性。 PDF p.1

方法与端到端信息流

为了解决这些局限性,我们提出了一个生成式AI(GenAI)辅助的多模态语义通信系统,该系统以自适应对抗扩散模型(AADM)为中心,用于高效的跨设备数据传输。在发送器处,我们的框架利用具有丰富世界知识的预训练大规模AI模型来生成语义嵌入。 PDF p.1 PDF p.3

输入输入是多模态检索与任务通信所需的图像、文本或其他模态的任务特征。
发送端发送端采用 Toward Intelligent IoT Services:为了解决这些局限性,我们提出了一个生成式AI(GenAI)辅助的多模态语义通信系统,该系统以自适应对抗扩散模型(AADM)为中心,用于高效的跨设备数据传输。在发送器处,我们的框架利用具有丰富世界知识的预训练大规模AI模型来生成语义嵌入。
实际发送实际发送对象是语义 feature 或未完整规定 bit 映射的 latent。
信道信道作用方式按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释。
接收端接收端从论文假设已经恢复的语义特征开始,再执行语义解码、任务推理或生成。
输出最终输出为跨模态检索、匹配或联合推理结果。
它在通信系统中的位置:利用接收端生成先验,把可预测细节从空口发送对象中移除。

数字化方案与真实传输开销

是否属于严格数字语义通信:否/不适用:主接口为连续 JSCC 或上层模型

表示判断:语义 feature/latent;量化到 bitstream 的接口未完整报告

全文没有给出可复核的 VQ/codebook/index-to-bit 接口。根据系统模型,本调研将传输表示判断为“语义 feature/latent;量化到 bitstream 的接口未完整报告”;不能把网络 latent 的每个浮点维度直接当成固定 bit。 独立判断:Toward Intelligent IoT Services 的主传输单位应归为“语义 feature/latent;量化到 bitstream 的接口未完整报告”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.2

论文未同时报告输入尺寸、encoder 输出尺寸、量化精度/码本大小和帧级开销,因此不能从全文唯一重建总 bit 数。页面保留论文实际使用的 CBR、bpp、token 数或信道使用次数;缺失项不作臆测。 PDF p.2 PDF p.8

\[N_{tx}=N_{payload}+N_{side}+N_{protection};\quad \text{缺失项必须标记为未知}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 0:信道作用点不足,或由外部传统链路抽象承担

正文未给出可单句摘录的更细信道流程;结合题名、摘要、方法与实验,本调研按“类别 0:信道作用点不足,或由外部传统链路抽象承担”解释信道作用点。 本调研据此归为“类别 0:信道作用点不足,或由外部传统链路抽象承担”。 PDF p.2 PDF p.8

语义 decoder 实际面对的是:由论文系统模型定义的语义 feature、任务状态或传统译码后数据。 PDF p.2 PDF p.8

是否真正处理离散变量出错:未形成可复核的 bit/index/token 错误闭环。

实验设置与主要结论

数据集/场景全文未稳定定位

BaselineJPEG、LDPC、Turbo、QAM、DeepSC、JSCC

评价指标MSE、accuracy、latency、classification accuracy、F1-score

信道与工作点AWGN、Rayleigh、channel estimation、fading channel、SNR of 12 dB

实验小节中明确出现的比较对象包括JPEG、LDPC、Turbo、QAM、DeepSC、JSCC;指标包括MSE、accuracy、latency、classification accuracy、F1-score;信道/链路条件包括AWGN、Rayleigh、channel estimation、fading channel;正文可定位的代表性工作点有SNR of 12 dB。 PDF p.8

语义感知智能对于支持人工智能的物联网(IoT)服务至关重要,以实现跨异构设备的广泛覆盖和高可靠性。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“生成式语义信源编码”:价值应由论文在明确带宽/信道预算下对任务或重建质量的改善来判断,同时区分提出方法与传统链路 baseline。

局限:没有完整离散接口,无法直接回答 bit/index/token 跳变问题。 未显式注入离散误码/丢包,鲁棒性结论不应外推到真实数字链路。

Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework 架构/方法图
架构/方法图|来源:《Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework》,原 PDF p.9,Fig. 3 Accuracy comparison of various methods in Multimodal Sentiment Recognition (MSR) tasks。 核对论文
Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework 关键实验结果图/表
关键实验结果图/表|来源:《Toward Intelligent IoT Services: A Generative AI-Assisted Semantic-Aware Framework》,原 PDF p.10,Fig. 6 Visualization of the denoising performance of AADM on image, text, and audio signals in MSR tasks over AWGN channels。 核对论文
核心纳入2026语义感知资源分配与网络优化

VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission

DOI / IEEE 页面

作者Jianqiao Chen; Nan Ma; Xiaodong Xu; Tingting Zhu; Huishi Song; Chen Dong; Wenkai Liu; Rui Meng; Ping Zhang

出版信息Vol. 12 · pp. 10060-10077

DOI / IEEE ID10.1109/tccn.2026.3712380 / 11605130

通信位置数字语义编码与物理层接口

一句话主旨:VQ-DSC-R 面向语义感知资源分配与网络优化,把问题放在“数字语义编码与物理层接口”层处理;本调研把主接口判断为“显式数字语义表示:bit、离散 token 或码本 index”。

Motivation|Introduction 怎样导出本文方案

  1. 现有进展:数字语义通信承诺与现有的基础设施无缝集成,但面临着关键的挑战,在协调连续的语义功能与离散的多径衰落信道的传输约束。 PDF p.1
  2. 仍然存在的问题:在本文设定中,现有方法不能同时满足“语义感知资源分配与网络优化”的语义目标与通信、计算或资源约束;后续方案需要补齐这一具体瓶颈。 PDF p.1
  3. 为什么已有方法解决不了:连续 latent 或独立设计的传统链路没有回答语义特征怎样量化、映射为有限符号,以及 bit/index 出错后为何不会跳到完全不同的语义。仅改进信源网络无法补上这一接口。 PDF p.1
  4. 为什么这个问题重要:功率、带宽、算力和时延是共享资源;若调度器不知道语义效用,它可能增加吞吐量却没有改善任何用户真正关心的任务。 PDF p.1
  5. 本文提出什么:为了解决这些问题,我们提出了一个基于正交频分复用(OFDM)的健壮数字语义通信框架VQ-DSC-R。 PDF p.1
  6. 方案为何可能有效:首先,我们设计了一个层次化的语义编解码器,利用Swin Transformer骨干,再加上一个新的微分VQ与自适应噪声方差(ANDVQ)计划。 PDF p.1
  7. 作者希望证明什么:在3GPP EPA信道上的大量实验表明,VQ-DSC-R具有更优的性能,在0.02比特压缩比(BCR)下,峰值信噪比(PSNR)为29.22 dB,多尺度结构相似性(MSSSIM)为0.959。 PDF p.1

方法与端到端信息流

为了解决这些问题,我们提出了VQ-DSC-R,一个鲁棒的数字语义通信框架,建立在正交频分复用(OFDM)。首先,我们设计了一个分层的语义编解码器,利用Swin Transformer骨干,再加上一个新的可微分VQ与自适应噪声方差(ANDVQ)计划。 PDF p.1

输入输入是语义感知资源分配与网络优化所需的用户、任务、信道和资源状态。
发送端发送端采用 VQ-DSC-R:为了解决这些问题,我们提出了VQ-DSC-R,一个鲁棒的数字语义通信框架,建立在正交频分复用(OFDM)。首先,我们设计了一个分层的语义编解码器,利用Swin Transformer骨干,再加上一个新的可微分VQ与自适应噪声方差(ANDVQ)计划。
实际发送实际发送对象是量化 bit、离散 token 或码本 index。
信道信道作用方式按“类别 4:离散 bit/index/packet error 被显式建模或联合训练”解释。
接收端接收端从解调/信道译码后的 bit 或 index;残余错误是否进入语义 decoder 需单独判断开始,再执行语义解码、任务推理或生成。
输出最终输出为资源/部署策略及其语义效用。
它在通信系统中的位置:连接神经语义 bottleneck 与 bit、码本 index、有限星座、OFDM 或数据包。

数字化方案与真实传输开销

是否属于严格数字语义通信:是:存在明确的离散/有限数字接口

表示判断:显式数字语义表示:bit、离散 token 或码本 index

现有的矢量量化(VQ)方案存在码本崩溃和梯度失配的问题,而信道估计误差会导致灾难性的解码失败。 独立判断:VQ-DSC-R 的主传输单位应归为“显式数字语义表示:bit、离散 token 或码本 index”。只有论文明确给出量化和映射时,才能把 token/index 数换算成总 bit;连续 channel symbol 只能按 channel uses/CBR 比较。 PDF p.1

论文用激活码字数占总码本大小的比例(CUR)检查码本利用率,并用 bit compression ratio 衡量空口负担;完整开销还包括 index-to-bit、QAM、OFDM 导频和信道编码。 PDF p.13

\[N_{tx}=N_{idx}\lceil\log_2 K\rceil+N_{side},\qquad CR=\frac{N_{src}}{N_{tx}}\]

换算边界:该公式按论文定义复核;若未计入包头、FEC、重传或侧信息,仍不能直接当作真实空口总开销。

信道怎样作用,以及 decoder 实际拿到什么

信道处理类别:类别 4:离散 bit/index/packet error 被显式建模或联合训练

VQ index 被转换为 bit/QAM 符号并通过 OFDM 与 3GPP EPA 多径信道;接收端先进行 CSI refinement、均衡和数字解调,再以共享码本反量化,Stage-3 含噪训练用于降低 BER/index propagation error。 本调研据此归为“类别 4:离散 bit/index/packet error 被显式建模或联合训练”。 PDF p.2 PDF p.11

语义 decoder 实际面对的是:OFDM 均衡与数字解调后的 VQ bit/index sequence,再经共享 codebook 反量化。 PDF p.2 PDF p.11

是否真正处理离散变量出错:是:codebook index 被转换为 bit/QAM 符号并经过 3GPP EPA 多径信道;正文报告 BER/index propagation error,并以 CSI refinement 和信道含噪 Stage-3 训练降低端到端失真。

实验设置与主要结论

数据集/场景DIV2K、ImageNet

BaselineDeepJSCC、JPEG、LDPC、QAM、Swin Transformer、VAE、VQ-VAE、SwinJSCC、ADJSCC、JSCC、SSCC、OFDM

评价指标PSNR、SSIM、MS-SSIM、MSE、mAP、accuracy、latency、FLOPs、goodput、NMSE

信道与工作点wireless channel、MIMO、OFDM、channel estimation、imperfect CSI、fading channel、SNR of 25.66 dB、SNR = 9 dB、SNR of 28 dB、SNR of 29.22dB、SNR of 25.66dB

数据集为DIV2K、ImageNet;实验小节中明确出现的比较对象包括DeepJSCC、JPEG、LDPC、QAM、Swin Transformer、VAE、VQ-VAE、SwinJSCC、ADJSCC、JSCC、SSCC、OFDM;指标包括PSNR、SSIM、MS-SSIM、MSE、mAP、accuracy、latency、FLOPs、goodput、NMSE;信道/链路条件包括wireless channel、MIMO、OFDM、channel estimation、imperfect CSI、fading channel;正文可定位的代表性工作点有SNR of 25.66 dB、SNR = 9 dB、SNR of 28 dB、SNR of 29.22dB、SNR of 25.66dB。 PDF p.11

在3GPP EPA信道上的大量实验表明,VQ-DSC-R具有更优的性能,在0.02比特压缩比(BCR)下,峰值信噪比(PSNR)为29.22 dB,多尺度结构相似性(MSSSIM)为0.959。 PDF p.1

通信价值、局限与 Codex 判断

该工作位于“数字语义编码与物理层接口”:通信价值来自把离散错误的后果纳入语义目标,而不只是降低平均 BER;应重点检查错误模型、保护开销和训练/测试失配。

局限:主要局限取决于训练/测试分布、信道假设和系统开销是否完整公开。

VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission 架构/方法图
架构/方法图|来源:《VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission》,原 PDF p.4,Fig. 1 Architecture of VQ-DSC-R system with OFDM transmission. (a) Overall system architecture; (b) Time-frequency grids of OFDM symbols。 核对论文
VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission 关键实验结果图/表
关键实验结果图/表|来源:《VQ-DSC-R: Robust Vector Quantized-Enabled Digital Semantic Communication With OFDM Transmission》,原 PDF p.13,Fig. 6 PSNR and MS-SSIM performance of SQC update schemes under different channel estimation schemes and BCRs. (a) and (d) correspond to the STE scheme; (b) and (e) correspond to the NSVQ scheme; (c) and (f) correspond to the ANDVQ scheme。 核对论文