化工儀器網(wǎng)手機(jī)版
移動(dòng)端訪問更便捷
今日焦點(diǎn) Today's Focus
查看更多+-
北京大學(xué)團(tuán)隊(duì)提出LargePNet網(wǎng)絡(luò)，以大視野統(tǒng)計(jì)信息提升熒光圖像復(fù)原精度
針對(duì)現(xiàn)有深度學(xué)習(xí)復(fù)原網(wǎng)絡(luò)因小圖訓(xùn)練丟失全局信[詳細(xì)]
北京大學(xué)團(tuán)隊(duì)提出LargePNet網(wǎng)絡(luò)，以大視野統(tǒng)計(jì)信息提升熒光圖像復(fù)原精度
2026年06月22日 13:59:44
來源：化工儀器網(wǎng) 作者：宋池 點(diǎn)擊量：216
針對(duì)現(xiàn)有深度學(xué)習(xí)復(fù)原網(wǎng)絡(luò)因小圖訓(xùn)練丟失全局信息的問題，北京大學(xué)團(tuán)隊(duì)提出LargePNet，采用大核卷積與金字塔結(jié)構(gòu)聚合大視野統(tǒng)計(jì)信息，在多項(xiàng)熒光成像任務(wù)中兼顧精度與效率，并已實(shí)現(xiàn)長(zhǎng)時(shí)程活細(xì)胞及多色超分辨成像應(yīng)用。
北京大學(xué)未來技術(shù)學(xué)院席鵬教授團(tuán)隊(duì)近日在熒光成像技術(shù)領(lǐng)域取得重要進(jìn)展，提出了一種名為L(zhǎng)argePNet的新型通用熒光成像復(fù)原網(wǎng)絡(luò)。相關(guān)研究成果于2026年4月7日發(fā)表于國(guó)際學(xué)術(shù)期刊《自然·通訊》(Nature Communications)。
近年來，深度學(xué)習(xí)技術(shù)在熒光顯微鏡成像增強(qiáng)方面取得了顯著進(jìn)展。UNet、RCAN和SwinIR等廣泛應(yīng)用于自然圖像處理的網(wǎng)絡(luò)架構(gòu)被遷移至熒光成像領(lǐng)域，通過學(xué)習(xí)從低質(zhì)量圖像到高質(zhì)量圖像的映射關(guān)系，有效降低了顯微成像所需的光子劑量。
然而，研究團(tuán)隊(duì)指出，現(xiàn)有方法大多沿用自然圖像的處理方式——通過隨機(jī)裁剪將大圖分割成小圖塊(通常為128×128像素)進(jìn)行訓(xùn)練。這一做法在熒光成像中存在問題：熒光圖像中大視野范圍內(nèi)的生物結(jié)構(gòu)具有長(zhǎng)程關(guān)聯(lián)性，例如一根微管蛋白纖維可能蜿蜒貫穿整張圖像。將圖像切碎后訓(xùn)練，會(huì)導(dǎo)致關(guān)鍵的全局結(jié)構(gòu)上下文信息丟失，進(jìn)而影響網(wǎng)絡(luò)在大圖復(fù)原時(shí)的保真度和抗噪性能。
針對(duì)上述問題，研究團(tuán)隊(duì)開發(fā)了LargePNet網(wǎng)絡(luò)。其核心思路是直接使用大于512×512像素的大視野圖像進(jìn)行訓(xùn)練，使模型在訓(xùn)練階段即可學(xué)習(xí)細(xì)胞結(jié)構(gòu)的完整上下文關(guān)聯(lián)和全局統(tǒng)計(jì)信息。
在技術(shù)實(shí)現(xiàn)上，團(tuán)隊(duì)面臨兩個(gè)挑戰(zhàn)：一是建立足夠大的有效感受野以理解全局結(jié)構(gòu)，二是控制大視野圖像的計(jì)算量。為此，研究者采用重參數(shù)化大核卷積(RepLKConv)作為長(zhǎng)程建模的主要方式，同時(shí)通過金字塔結(jié)構(gòu)設(shè)計(jì)引入傳統(tǒng)深度網(wǎng)絡(luò)的低頻分支來彌補(bǔ)大核卷積非線性表達(dá)能力不足的問題，并引入實(shí)例歸一化提高大圖訓(xùn)練時(shí)的穩(wěn)定性。消融實(shí)驗(yàn)驗(yàn)證了兩個(gè)分支的互補(bǔ)作用。
在此基礎(chǔ)上，團(tuán)隊(duì)還開發(fā)了多個(gè)拓展版本以適應(yīng)不同任務(wù)需求，包括生成式復(fù)原架構(gòu)LargeP-GAN、視頻超分架構(gòu)LargeP-TISR、三維數(shù)據(jù)復(fù)原架構(gòu)3D-LargePNet以及自監(jiān)督降噪架構(gòu)LargeP-SN2N。
研究團(tuán)隊(duì)在涉及不同顯微模態(tài)的降噪、去模糊、單圖和視頻超分、采樣恢復(fù)和背景去除等八項(xiàng)典型熒光圖像任務(wù)上驗(yàn)證了LargePNet的性能。結(jié)果顯示，LargePNet的峰值信噪比(PSNR)較當(dāng)前最優(yōu)的小圖塊網(wǎng)絡(luò)提升0.5至2分貝。在大圖推理方面，其計(jì)算效率約為先進(jìn)卷積網(wǎng)絡(luò)的4倍、Transformer網(wǎng)絡(luò)的20倍。
依托LargePNet的性能優(yōu)勢(shì)，研究團(tuán)隊(duì)在活細(xì)胞成像領(lǐng)域取得了兩項(xiàng)重要應(yīng)用突破：其一，實(shí)現(xiàn)了長(zhǎng)達(dá)30小時(shí)、分辨率200納米的活細(xì)胞亞細(xì)胞器動(dòng)態(tài)成像，能夠穩(wěn)定監(jiān)測(cè)細(xì)胞骨架的動(dòng)態(tài)變化過程。其二，完成了小時(shí)量級(jí)的三色STED超分辨成像，能夠清晰解析內(nèi)質(zhì)網(wǎng)、線粒體和微管三種細(xì)胞器之間的相互作用細(xì)節(jié)。
研究團(tuán)隊(duì)還基于灰度共生矩陣(GLCM)統(tǒng)計(jì)量對(duì)LargePNet的適用條件進(jìn)行了分析：當(dāng)小圖塊與大視圖的統(tǒng)計(jì)信息偏差越大時(shí)，LargePNet相較于傳統(tǒng)小圖訓(xùn)練網(wǎng)絡(luò)的復(fù)原優(yōu)勢(shì)就越顯著。這為研究人員根據(jù)自身數(shù)據(jù)特點(diǎn)判斷是否適用該模型提供了參考。
目前，研究團(tuán)隊(duì)已將全部Python源碼、訓(xùn)練數(shù)據(jù)集與訓(xùn)練模型在GitHub平臺(tái)開源，以供全球同行使用和進(jìn)一步開發(fā)。
相關(guān)閱讀 Related Reading
查看更多+-
預(yù)算超4400萬元！中國(guó)科學(xué)院廣州生物醫(yī)藥與健康研究院發(fā)布科研設(shè)備采購(gòu)意向
中國(guó)科學(xué)院廣州生物醫(yī)藥與健康研究院集中發(fā)布多批次生物醫(yī)藥科研儀器設(shè)備采購(gòu)意向，預(yù)算金額達(dá)4431萬元。2026-06-18 11:18:11 -
預(yù)算超2億元！大連理工大學(xué)采購(gòu)大批科研儀器設(shè)備
大連理工大學(xué)發(fā)布多項(xiàng)儀器采購(gòu)意向，預(yù)算總金額20835.66萬元。2026-06-12 14:10:30 -
小動(dòng)物活體多功能成像系統(tǒng)中標(biāo)結(jié)果公告
項(xiàng)目名稱：小動(dòng)物活體多功能成像系統(tǒng)，項(xiàng)目編號(hào)：0625-264026005001，招標(biāo)范圍：小動(dòng)物活體多功能成像系統(tǒng)，招標(biāo)機(jī)構(gòu)：浙...2026-06-12 11:31:30 -
預(yù)算455萬 中國(guó)水產(chǎn)科學(xué)研究院黑龍江水產(chǎn)研究所采購(gòu)基因組學(xué)實(shí)驗(yàn)室科研儀器
中國(guó)水產(chǎn)科學(xué)研究院黑龍江水產(chǎn)研究所委托中審潤(rùn)奧項(xiàng)目管理有限公司就淡水魚類基因組學(xué)與基因編輯創(chuàng)新實(shí)驗(yàn)室儀器設(shè)備購(gòu)置項(xiàng)目進(jìn)行公開招標(biāo)，...2026-06-04 09:27:17 -
結(jié)構(gòu)光全景成像系統(tǒng)中標(biāo)結(jié)果公告
項(xiàng)目名稱：上海市農(nóng)業(yè)科學(xué)院結(jié)構(gòu)光全景成像系統(tǒng)，項(xiàng)目編號(hào)：1825-264A20260052，招標(biāo)范圍：上海市農(nóng)業(yè)科學(xué)院結(jié)構(gòu)光全景成...2026-05-08 14:01:43
版權(quán)與免責(zé)聲明
- ①凡本網(wǎng)注明“來源：化工儀器網(wǎng)”的所有作品，均為浙江興旺寶明通網(wǎng)絡(luò)有限公司-化工儀器網(wǎng)合法擁有版權(quán)或有權(quán)使用的作品，未經(jīng)本網(wǎng)授權(quán)不得轉(zhuǎn)載、摘編或利用其他方式使用上述作品。已經(jīng)本網(wǎng)授權(quán)使用作品的，應(yīng)在授權(quán)范圍內(nèi)使用，并注明“來源：化工儀器網(wǎng)”。違反上述聲明者，本網(wǎng)將追究其相關(guān)法律責(zé)任。
- ②本網(wǎng)轉(zhuǎn)載并注明自其他來源（非化工儀器網(wǎng)）的作品，目的在于傳遞更多信息，并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)，不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。其他媒體、網(wǎng)站或個(gè)人從本網(wǎng)轉(zhuǎn)載時(shí)，必須保留本網(wǎng)注明的作品第一來源，并自負(fù)版權(quán)等法律責(zé)任。
- ③如涉及作品內(nèi)容、版權(quán)等問題，請(qǐng)?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系，否則視為放棄相關(guān)權(quán)利。
