发布时间:2026/8/29 5:19:39
AAAI 2026 | CSSP:级联光谱-空间联合感知模块,跨模态特征交互让遥感小目标无处遁形! 论文: MODA: The First Challenging Benchmark for Multispectral Object Detection in Aerial Images作者: Shuaihao Han, Tingfa Xu*, Peifu Liu, Jianan Li发表: AAAI 2026论文链接: https://arxiv.org/abs/2512.09489代码链接: https://github.com/shuaihao-han/MODA一、引言遥感图像目标检测在现实场景中面临小目标密集、背景干扰强等严峻挑战,传统RGB检测器仅依赖空间信息,在复杂环境下辨识能力严重不足。多光谱图像(MSIs)通过捕获多个波段的额外光谱线索,为目标检测提供了全新的维度——不同物体的独特光谱曲线即使在外观相似时也能可靠区分目标与背景。然而,多光谱目标检测的发展长期受限于两个瓶颈:一是缺乏大规模训练数据,现有HOD-1和HOD3K数据集规模小、场景单一;二是缺乏高效的光谱-空间特征融合方法,现有方法采用PCA降维或双流网络解耦光谱与空间信息,导致计算开销大、光谱信息损失严重。针对上述问题,本文提出了MODA数据集(首个大规模多光谱遥感目标检测基准)和OSSDet框架(面向目标的光谱-空间学习框架)。其中,级联光谱-空间联合感知模块(CSSP)是OSSDet中优化目标感知能力的核心组件,通过级联的光谱-空间交互调制,显著提升模型对目标区域的关注度。二、核心动机现有方法在处理多光谱遥感图像时存在三个关键问题:空间混叠效应:顶层特征提取中的连续下采样导致空间混叠(spatial aliasing),使背景杂波干扰目标区域,降低模型注意力光谱-空间解耦损失:传统方法(如PCA降维、双流网络)将光谱和空间信息分离处理,既丢失了光谱间的关联性,又增加了计算复杂度缺乏交互调制:简单拼接或相加无法充分挖掘光谱与空间模态之间的互补关系关键观察:光谱和空间注意力分别从不同维度聚焦目标特征,但两者之间存在天然的互补性——光谱注意力关注"是什么"(通道维度),空间注意力关注"在哪里"(空间维度),如果能让两者进行双向交互调制,可以同时增强目标的光谱辨识度和空间定位精度。解决思路:CSSP设计了一种级联的双向交互调制机制,通过计算光谱-空间互相关矩阵,让光谱感知特征和空间感知特征在嵌入空间中相互"询问"和"增强",实现真正的联合感知。三、方法3.1 模块整体设计CSSP模块以主干网络的顶层特征F 5 ∈ R C × H × W F_5 \in \mathbb{R}^{C \times H \times W}F5​∈RC×H×W作为输入,通过三个关键步骤完成特征重构:图1:OSSDet整体框架与CSSP结构(图b)图注说明:上图(b)部分展示了CSSP的内部结构。首先对顶层特征分别施加光谱注意力和空间注意力,得到两个感知特征;随后通过级联的跨模态交互调制,让光谱和空间特征在嵌入空间中进行双向信息交换;最后将调制后的特征融合输出。前向过程总述:光谱注意力提取:通过全局平均池化压缩光谱维度,生成光谱注意力权重,对输入特征进行通道维度的加权空间注意力提取:沿光谱维度平均池化,生成空间注意力图,增强显著空间区域级联交互调制:将光谱和空间感知特征重塑为序列形式,计算双向互相关矩阵,实现跨模态信息交互特征融合:将调制后的特征重塑回原始空间并融合,得到重构特征F ^ 5 \hat{F}_5F^5​3.2 核心算法:级联光谱-空间交互调制CSSP的核心创新在于级联的双向交互调制机制。具体数学推导如下:Step 1:光谱注意力对顶层特征F 5 F_5F5​沿空间维度做全局平均池化(GAP),通过可学习权重w e \boldsymbol{w}_ewe​和偏置b e \boldsymbol{b}_ebe​生成光谱注意力图:F e = f s ( w e ⋅ GAP ( F 5 ) + b e ) ⊙ F 5 F_e = f_s(\boldsymbol{w}_e \cdot \text{GAP}(F_5) + \boldsymbol{b}_e) \odot F_5Fe​=fs​(we​⋅GAP(F5​)+be​)⊙F5​其中f s ( ⋅ ) f_s(\cdot)fs​(⋅)为 Sigmoid 激活函数,⊙ \odot⊙为逐元素乘法。这一步让网络关注"哪些光谱通道对目标更重要"。Step 2:空间注意力沿光谱维度做平均池化(AVG),通过可学习权重图w a \boldsymbol{w}_awa​和偏置图b a \boldsymbol{b}_aba​生成空间注意力图:F a = f s ( w a ⋅ AVG ( F 5 ) + b a ) ⊙ F 5 F_a = f_s(\boldsymbol{w}_a \cdot \text{AVG}(F_5) + \boldsymbol{b}_a) \odot F_5Fa​=fs​(wa​⋅AVG(F5​)+ba​)⊙F

相关新闻

2026/8/23 13:01:03

如何为 Hermit 贡献包清单:加入开源生态的完整指南

如何为 Hermit 贡献包清单:加入开源生态的完整指南 【免费下载链接】hermit 🐚 Hermit manages isolated, self-bootstrapping sets of tools in software projects. 项目地址: https://gitcode.com/gh_mirrors/her/hermit 想要为开源项目 Hermit…

2026/8/29 0:33:01

@hapi/lab 终极指南:Node.js 测试框架的完整解决方案

hapi/lab 终极指南:Node.js 测试框架的完整解决方案 【免费下载链接】lab Node test utility 项目地址: https://gitcode.com/gh_mirrors/lab2/lab 在当今快速发展的Node.js生态系统中,一个强大且易用的测试框架对于保证代码质量至关重要。hapi/l…

2026/8/29 5:16:56

全栈开发工程师就是个神话

在企业招募人员的职务说明里边, 常常会出现“全栈开发工程师(full stack)”这个词语。然而, Hello的联合创办人兼首席技術官Scott, 于最近发布的一篇网络日志里表明, 全栈开发工程师乃是一个虚构的传说, 就算不全是这样, 出钱找人员的一方也很难寻觅到这…

2026/8/29 5:16:56

数学建模实战:从VRP问题到遗传算法求解的完整流程与代码实现

简介:本资源为2026年第十六届MathorCup数学应用挑战赛(“妈妈杯”)B题的全流程参赛解决方案,面向高校数学建模参赛队、竞赛指导教师及建模入门学习者,旨在解决赛题理解难、模型构建慢、代码实现卡点、论文撰写不规范等…

2026/8/29 5:16:56

如何用python做界面_如何使用Python建立有窗口、按钮之类的图形界面

截至当下, 无一例外我们一切的输入以及产出都仅仅是IDLE之内的简易文本。然而当代的计算机还有程序会运用海量的图形。要是我们的程序之中存在若干图形那就棒极了。诸如以下图片所展现的那般的图形。GUI乃User(图形用户界面)的缩写情况体现, 于GUI当中, …

2026/8/29 5:16:56

百度2019校招存储系统笔试题深度解析:从缓存到分布式一致性

作为一个在存储行业摸爬滚打了快十年、也深度参与过校招面试的老兵,看到“百度2019校招计算与存储系统研发工程师笔试题(第三批)”这个标题,第一反应是亲切,第二反应是感慨。亲切是因为这套题基本定调了国内互联网大厂…

2026/8/29 5:16:56

Python经典面试题(附答案)

所要熟知的是入门基础知识, 这篇文章分享了一些内容, 这些内容是关于面试的, 包括基础问题, 还包括高级问题, 另外也有答案。包括 开发问题、编程问题、数据结构问题、和 脚本问题。希望能对你们有所帮助。的特点和优点是什么?可以说是最适合作为入门编程的选择,因…

2026/8/29 5:11:55

第22章 Java 基础技术回顾:21 章精华速览

第22章 Java 基础技术回顾:21 章精华速览 从"Hello World"到"学生信息管理系统",Java 基础入门系列 21 章已经全部讲完。这一章不教新知识,而是把 21 章的内容串成一条线,做一次系统回顾。把这一章的每一条都…

2026/8/28 16:16:17

[光学原理与应用-521]:对光的错误理解与纠偏

首先光是一种能量的载体和形态,宏观上观察到的光是由无数个微观的光量子组成的,每个光子在产生的瞬间,其在真空的空间中以确定不变的速度沿着一个初始的方向一直向前,在微观层面,每个光量子的运动轨迹是以波函数所展现…

2026/8/28 16:16:21

SIP通话转接原理与REFER方法实战解析

1. 通话转接不是“挂断再拨号”,而是SIP会话的动态重定向你有没有遇到过这样的场景:客服坐席A正在和客户通电话,突然需要把这通对话无缝转给专家坐席B,客户完全感知不到中间的断连——既没听到忙音,也没被要求重新拨号…

2026/8/28 16:16:22

Kolla-ansible单节点OpenStack部署实战:从环境准备到排坑指南

1. 为什么选择Kolla-ansible来部署单节点OpenStack?如果你正在寻找一种能把OpenStack从“概念”快速变成“可用的实验环境”的方法,那么Kolla-ansible几乎是当前最主流、最省心的选择。我见过太多人卡在手动编译依赖、配置服务、处理版本冲突的泥潭里&am…

2026/8/29 0:01:10

etc目录下的profile.d文件目录设置环境变量和全局脚本shell

一、设置环境变量etc目录下的profile.d文件目录 /etc/profile.d1、编写 vi test.sh文件内容# jdk变量 export ZHK_HOME/root export PATH$PATH:$ZHK_HOME/test # 可以取出来ZHK_HOME变量给ZZZ_HOME赋值 export ZZZ_HOME${ZHK_HOME}/test2、刷新 执行source /etc/profile 命令使…

2026/8/29 0:01:10

【JavaScript】内存管理-垃圾回收机制-内存泄露

内存管理 C 语言这样的底层语言一般都有底层的内存管理接口,比如 malloc()和free()。 而 JavaScript 是在创建变量(对象,字符串等)时自动进行了分配内存,并且在不使用它们时“自动”释放。释放的过程称为垃圾回收。 整…

2026/8/29 0:01:10

Labgrid-MCP:为嵌入式硬件实验室接入AI Agent操控能力

Labgrid-MCP 的目标是把 MCP(Model Context Protocol)能力延伸到真实嵌入式硬件实验室:AI Agent 通过一个标准化的 MCP Server,就能查看目标板状态、控制上电断电、复位开发板、读取串口日志,甚至执行镜像刷写。对于经…

2026/8/28 16:16:48

实测才敢推 AI论文网站 2026最新测评与推荐

2026年真正好用的AI论文网站,核心看生成的论文质量、低AI味、格式正确、学术适配四大指标。综合实测,千笔AI、ThouPen、豆包、DeepSeek、Grammarly 是当前最值得推荐的梯队,覆盖从免费到付费、从中文到英文、从文科到理工的全场景需求。一、综…

2026/8/28 16:16:50

2026必备!AI论文网站测评:最新推荐与深度对比

2026年真正好用的AI论文网站,核心看生成的论文质量、低AI味、格式正确、学术适配四大指标。综合实测,千笔AI、ThouPen、豆包、DeepSeek、Grammarly 是当前最值得推荐的梯队,覆盖从免费到付费、从中文到英文、从文科到理工的全场景需求。 一、…

2026/8/28 11:06:45

摆脱论文困扰!盘点2026年全网爆红的的AI论文写作工具

一天写完毕业论文在2026年已不再是天方夜谭。2026年最炸裂、实测能大幅提速的AI论文写作工具,覆盖选题构思、文献整理、内容生成、格式排版等核心场景,真正帮你高效搞定论文难题。 一、全流程王者:一站式搞定论文全链路(一天定稿首…