GCD-DDPM:用擴散模型重塑變化檢測,精準捕捉細粒度變化
1. 一眼概覽
GCD-DDPM 提出了一種 基于差分特征引導(dǎo)的去噪擴散概率模型(DDPM) 進行 變化檢測(CD) 的方法,采用 生成式方式 直接生成變化檢測(CD)圖,而非傳統(tǒng)的判別式分類方式。在四個高分辨率遙感數(shù)據(jù)集上,該方法展現(xiàn)了優(yōu)越的檢測性能。
2. 核心問題
目前主流變化檢測(CD)方法大多依賴 CNN 或 Transformer 進行判別式特征學(xué)習(xí),但它們在 同時捕獲局部細節(jié)信息和長距離依賴關(guān)系 方面存在局限,導(dǎo)致 變化檢測精度不足,尤其是對于 復(fù)雜場景的細粒度變化 無法精準捕捉。本文提出 GCD-DDPM,以生成式方法替代判別式方法,通過 迭代推理過程 逐步 生成高質(zhì)量變化檢測圖,提高檢測精度并抑制噪聲。
3. 技術(shù)亮點
- 生成式變化檢測框架:提出 GCD-DDPM,利用 DDPM 的 去噪生成能力,逐步優(yōu)化變化檢測結(jié)果,相較于判別式方法更能捕捉 微小、復(fù)雜和不規(guī)則的變化。
- 差分條件編碼器(DCE):設(shè)計 DCE 提取多層次的變化信息,并將其引入擴散模型的采樣過程,以精細捕捉變化區(qū)域。
- 基于噪聲抑制的語義增強器(NSSE):通過 自適應(yīng)頻域濾波 降低當(dāng)前步驟的噪聲,提高變化檢測的魯棒性和準確性。
4. 方法框架
GCD-DDPM 采用 擴散模型的前向去噪和反向恢復(fù)過程,在此基礎(chǔ)上引入 DCE 進行差分信息提取,并結(jié)合 NSSE 進行噪聲抑制,最終生成精確的變化檢測圖:
- 前向擴散過程:對初始 CD 標(biāo)簽添加 逐步增強的高斯噪聲。
- 反向去噪過程:通過 神經(jīng)網(wǎng)絡(luò)預(yù)測噪聲 并恢復(fù) CD 圖,借助變分推理(VI)進行 自適應(yīng)校準。
- 差分條件編碼器(DCE):從 變化前后圖像 提取 多層次差分特征,結(jié)合 DDPM 的采樣過程 指導(dǎo) CD 圖生成。
- 噪聲抑制語義增強器(NSSE):采用 頻域自適應(yīng)濾波 處理 當(dāng)前步驟的噪聲特征,增強 CD 結(jié)果。
5. 實驗結(jié)果速覽
GCD-DDPM 在四個高分辨率變化檢測數(shù)據(jù)集(CDD、WHU-CD、LEVIR-CD、GVLM)上進行評測,與多個先進方法(CNN、Transformer、DDPM 變體)對比,表現(xiàn)優(yōu)越:
? CDD 數(shù)據(jù)集(季節(jié)性變化檢測):
a. F1-score 提升至 94.93%,IoU 90.56%,超過 DDPM-CD 和 Transformer 方法。
? WHU-CD 數(shù)據(jù)集(城市建筑變化檢測):
? F1-score 92.54%,IoU 86.52%,精準檢測城市建筑變化。
? LEVIR-CD 數(shù)據(jù)集(建筑變化檢測):
? F1-score 90.96%,IoU 83.56%,減少小目標(biāo)遺漏,提高邊界保留能力。
? GVLM 數(shù)據(jù)集(滑坡檢測):
? F1-score 94.02%,IoU 89.09%,顯著降低噪聲,精準檢測復(fù)雜地貌變化。
6. 實用價值與應(yīng)用
GCD-DDPM 在多個關(guān)鍵領(lǐng)域展現(xiàn)潛力:
? 城市發(fā)展監(jiān)測:可用于 建筑物新增/拆除監(jiān)測,助力 城市規(guī)劃和基礎(chǔ)設(shè)施建設(shè)。
? 自然災(zāi)害評估:可精準 檢測滑坡、洪水、地震等災(zāi)害前后的地表變化,為 災(zāi)害響應(yīng) 提供決策支持。
? 生態(tài)環(huán)境監(jiān)測:用于 森林砍伐、濕地變化、冰川消融等生態(tài)環(huán)境變化檢測。
? 農(nóng)業(yè)與土地利用分析:可 精準分析農(nóng)田變化、土地退化,提高 農(nóng)業(yè)管理 水平。
7. 開放問題
- GCD-DDPM 是否可以泛化到其他類型的變化檢測任務(wù),如醫(yī)學(xué)影像變化檢測?
- 當(dāng)前 GCD-DDPM 計算量較大,是否可以引入輕量級架構(gòu)優(yōu)化推理速度?
- 噪聲抑制語義增強器(NSSE)能否推廣到其他生成模型以提升圖像重建效果?