重磅干貨,第一時(shí)間送達(dá)
由于輸入圖像存在噪聲,可能會(huì)降低圖像的語(yǔ)義分割能力,但在分割前先進(jìn)行圖像去噪是有幫助的。隨著深度學(xué)習(xí)的發(fā)展,圖像去噪和語(yǔ)義分割都得到了長(zhǎng)足的發(fā)展。因此,作者對(duì)它們之間的協(xié)同作用感興趣,通過使用一個(gè)整體的深度模型。作者觀察到去噪不僅有助于對(duì)抗由于噪聲導(dǎo)致的分割精度下降,而且像素級(jí)語(yǔ)義信息也提高了去噪的能力。然后,作者提出了一種增強(qiáng)網(wǎng)絡(luò)交替進(jìn)行去噪和分割。該網(wǎng)絡(luò)由多個(gè)分割和去噪塊(SDBs)組成,每個(gè)塊估計(jì)語(yǔ)義圖,然后利用語(yǔ)義圖進(jìn)行正則化去噪。實(shí)驗(yàn)結(jié)果表明,去噪后的圖像質(zhì)量顯著提高,分割精度接近純凈圖像。
論文創(chuàng)新點(diǎn)
綜上所述,作者在本文中做出了以下貢獻(xiàn):
作者研究了在有噪聲的圖像上進(jìn)行語(yǔ)義分割的問題,并提出利用去噪來(lái)對(duì)抗由于噪聲而導(dǎo)致的分割精度下降。噪聲圖像是影響圖像性能下降的一個(gè)常見因素。因此,作者的方法是有用的現(xiàn)實(shí)圖像分割。
作者提出利用語(yǔ)義分割結(jié)果作為額外條件對(duì)圖像去噪網(wǎng)絡(luò)進(jìn)行正則化。作者驗(yàn)證了額外的信息有助于提高圖像去噪的能力。去噪后的圖像不僅視覺質(zhì)量得到了改善,分割感知的去噪圖像也能得到更好的分割。
作者提出了一種替代的增強(qiáng)網(wǎng)絡(luò)來(lái)利用去噪和分割之間的協(xié)同效應(yīng)。在不同噪聲條件下的城市景觀[7]和戶外seg[34]數(shù)據(jù)集上的實(shí)驗(yàn)結(jié)果表明了該方法的優(yōu)越性。
(a)先去噪后分割;(b)分割后去噪;(c)提出的分割和去噪交替增強(qiáng)網(wǎng)絡(luò)(sabn),它是一系列分割和去噪塊(SDBs)的拼接。y, s, x分別代表有噪圖像,分割(概率)圖,去噪圖像。
噪聲水平σ = 50時(shí)DMS[20]和作者方法的分割結(jié)果
最上面一行:城市景觀集的一張圖片;下面一行:一張來(lái)自戶外的照片。
噪聲水平σ = 50時(shí)ddfn3[5]的去噪結(jié)果和作者的方法
最上面一行:城市景觀集的一張圖片;下面一行:一張來(lái)自戶外的照片。
作者通過使用一個(gè)整體的深度模型來(lái)探索圖像去噪和語(yǔ)義分割之間的協(xié)同作用,該模型是一個(gè)級(jí)聯(lián)的SDBs。從實(shí)驗(yàn)中作者發(fā)現(xiàn),隨著單元數(shù)的增加,去噪和分割都有明顯的改善。特別是,增強(qiáng)的好處不僅是連續(xù)降噪,而且是連續(xù)的分割模塊。在boosting過程中,分割提高了去噪性能,去噪有助于提高分割精度。
每日?qǐng)?jiān)持論文分享不易,如果喜歡我們的內(nèi)容,希望可以推薦或者轉(zhuǎn)發(fā)給周圍的同學(xué)。
- END -
#投 稿 通 道#
讓你的論文被更多人看到
如何才能讓更多的優(yōu)質(zhì)內(nèi)容以更短路徑到達(dá)讀者群體,縮短讀者尋找優(yōu)質(zhì)內(nèi)容的成本呢?答案就是:你不認(rèn)識(shí)的人。
總有一些你不認(rèn)識(shí)的人,知道你想知道的東西。深度學(xué)習(xí)愛好者 或許可以成為一座橋梁,促使不同背景、不同方向的學(xué)者和學(xué)術(shù)靈感相互碰撞,迸發(fā)出更多的可能性。
深度學(xué)習(xí)愛好者 鼓勵(lì)高校實(shí)驗(yàn)室或個(gè)人,在我們的平臺(tái)上分享各類優(yōu)質(zhì)內(nèi)容,可以是最新論文解讀,也可以是學(xué)習(xí)心得或技術(shù)干貨。我們的目的只有一個(gè),讓知識(shí)真正流動(dòng)起來(lái)。
?? 來(lái)稿標(biāo)準(zhǔn):
· 稿件確系個(gè)人原創(chuàng)作品,來(lái)稿需注明作者個(gè)人信息(姓名+學(xué)校/工作單位+學(xué)歷/職位+研究方向)
· 如果文章并非首發(fā),請(qǐng)?jiān)谕陡鍟r(shí)提醒并附上所有已發(fā)布鏈接
· 深度學(xué)習(xí)愛好者 默認(rèn)每篇文章都是首發(fā),均會(huì)添加“原創(chuàng)”標(biāo)志
聯(lián)系客服