Explore / 内容索引

注意力机制

Token-Wise Attention-Guided Semantic Quality Assessment for Compressed Visual Features

本文针对协作与分布式智能系统中压缩中间特征的语义质量评估问题,提出了一种基于Token级注意力引导的评估方法。该方法利用原始与重建Token之间的内在对应关系,在Token层面进行质量度量,以减少跨Token干扰;同时通过注意力机制区分不同Token对下游任务的重要性,从而更准确地反映压缩特征的语义 …

查看内容 ↗

SSCM: A Spatial-Semantic Consistent Model for Multi-Contrast MRI Super-Resolution

本文提出空间语义一致模型(SSCM),用于多对比度磁共振成像超分辨率。该方法通过动态空间扭曲模块实现对比度间空间对齐,利用语义感知令牌聚合块建模长程依赖,并结合空间-频率融合块恢复高频细节,从而在结构差异和运动干扰下保持解剖结构的空间语义一致性。实验表明SSCM在效率和性能上优于现有方法。

查看内容 ↗

RiO-DETR: DETR for Real-time Oriented Object Detection

本文提出RiO-DETR,一种面向实时旋转目标检测的DETR框架。针对方向语义依赖、角度周期性和搜索空间扩大等挑战,设计了内容驱动的角度估计、旋转校正正交注意力、解耦周期细化以及定向密集O2O机制,在保持实时效率的同时提升角度收敛速度与检测精度。在DOTA-1.0、DIOR-R …

查看内容 ↗

Dome-DETR: DETR with density-oriented feature-query manipulation for efficient tiny object detection

本文提出 Dome-DETR,一种面向微小物体检测的高效框架。针对现有方法特征利用不充分和计算成本高的问题,引入轻量级密度聚焦提取器(DeFE)生成紧凑前景掩码,并基于掩码的窗口注意力稀疏化(MWAS)将计算资源集中于关键区域。同时提出渐进自适应查询初始化(PAQI),自适应调节查询分布,提升检测效 …

查看内容 ↗

Event-based head pose estimation: Benchmark and method

本文针对传统RGB方法在剧烈运动和极端光照下头部姿态估计困难的问题,引入事件相机的高时间分辨率与高动态范围优势。作者构建了两个大规模事件头部姿态数据集,包含282个序列,覆盖不同分辨率与场景;并提出事件头部姿态估计网络EV-HPE,设计了事件时空融合模块和事件运动感知注意力模块,有效结合事件流时空信 …

查看内容 ↗

Estme: Event-driven spatio-temporal motion enhancement for micro-expression recognition

本文针对微表情识别中动作幅度小、持续时间短、难以捕捉的问题,提出了一种事件驱动的时空运动增强网络。该方法引入事件相机捕获的高时间分辨率事件信号,设计事件增强运动提取模块以增强细微运动细节,并利用事件引导注意力模块聚焦特定区域的微小变化,从而获取更精确的空间特征。在合成和真实数据集上的实验结果表明,该 …

查看内容 ↗

A micro-expression recognition system with event cameras

本文提出了一种基于事件相机的微表情识别系统。针对微表情持续时间短、幅度微弱、难以用传统相机捕捉的问题,系统利用事件相机的高时间分辨率特性,设计了事件增强运动提取器(EEME)以放大细微运动,并引入事件引导注意力(EGA)聚焦关键面部区域,从而提升微表情识别的准确性与鲁棒性。该系统为情感计算领域提供了 …

查看内容 ↗

Scene adaptive sparse transformer for event-based object detection

本文针对事件相机目标检测中Transformer计算成本过高的问题,提出场景自适应稀疏Transformer(SAST)。该方法通过窗口-令牌协同稀疏化与场景特定稀疏优化,在保持低计算量的同时实现高检测性能,并能根据场景复杂度自适应调整稀疏程度,有效平衡了检测精度与效率。

查看内容 ↗

Panacea: Panoramic and controllable video generation for autonomous driving

本文提出Panacea,一种面向自动驾驶场景的全景可控视频生成方法。该方法通过创新的4D注意力机制和两阶段生成流程,有效解决了生成视频中的时间与跨视角一致性问题;同时引入ControlNet框架,利用鸟瞰图(BEV)布局对生成内容进行精细控制。在nuScenes数据集上的实验表明,Panacea能够 …

查看内容 ↗

Attention-guided contrastive masked image modeling for transformer-based self-supervised learning

本文提出注意力引导的对比掩码图像建模方法(ACoMIM),融合对比学习与掩码图像建模两种自监督范式,并利用视觉Transformer的注意力机制提升表征能力。该方法包含两个预训练任务:一是根据注意力引导预测掩码区域的特征,二是比较掩码图像与未掩码图像的全局特征。两个任务相互补充,有效缓解了图像信息稀 …

查看内容 ↗

Eoformer: Edge-oriented transformer for brain tumor segmentation

本文提出边缘导向Transformer(EoFormer),用于脑肿瘤MRI图像分割。该方法采用CNN-Transformer混合编码器,CNN提取局部低级特征,Transformer建模长距离依赖以生成全局高级特征;解码器集成边缘导向Sobel与Laplacian锐化模块,增强边缘信息。同时引入高 …

查看内容 ↗