Transmissão Semântica de Imagens Adaptativa e Teste Via Ar

A comunicação semântica passou por uma evolução considerável devido ao recente desenvolvimento rápido da inteligência artificial (IA), melhorando significativamente tanto a robustez quanto a eficiência da comunicação. Apesar desses avanços, a maioria dos métodos atuais de comunicação semântica para transmissão de imagens presta pouca atenção à importância diferenciada de objetos e fundos nas imagens. Para resolver essa questão, propomos um novo esquema chamado ASCViT-JSCC, que utiliza transformadores de visão (ViTs) integrados a um sistema de multiplexação por divisão de frequência ortogonal (OFDM). Este esquema aloca adaptativamente largura de banda para objetos e fundos nas imagens de acordo com a ordem de importância de diferentes partes, determinada pela detecção de objetos do you only look once versão 5 (YOLOv5) e a detecção de pontos de recurso da transformação de características invariante de escala (SIFT). Além disso, o esquema proposto adere aos padrões de modulação digital incorporando módulos de quantização. Validamos essa abordagem por meio de uma plataforma de teste via ar (OTA) chamada plataforma de validação de protótipo de comunicação inteligente (ICP) baseada em rádio definido por software (SDR) e kits embarcados da NVIDIA. Nossas descobertas a partir de simulações e medições práticas mostram que o ASCViT-JSCC preserva significativamente os objetos nas imagens e melhora a qualidade de reconstrução em comparação com métodos existentes.