一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

高光譜成像系統(tǒng):深度學習機載高光譜影像樹種分類研究

萊森光學 ? 來源:萊森光學 ? 作者:萊森光學 ? 2024-05-06 14:57 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

傳統(tǒng)的樹種識別主要依靠人工實地踏勘,費時費力。遙感技術的快速發(fā)展彌補了人工調(diào)查方法的不足,與其他數(shù)據(jù)源相比,機載高光譜影像具有豐富的光譜信息和空間信息,能探測到不同樹種間細微的差異,可實現(xiàn)高精度的樹種識別。

基于

一、引言

樹種識別是森林資源監(jiān)測的重要內(nèi)容之一,及時準確地獲取樹種信息是可持續(xù)森林管理和資源評估的基礎。傳統(tǒng)的樹種識別主要依靠人工實地踏勘,費時費力。遙感技術的快速發(fā)展彌補了人工調(diào)查方法的不足,與其他數(shù)據(jù)源相比,機載高光譜影像具有豐富的光譜信息和空間信息,能探測到不同樹種間細微的差異,可實現(xiàn)高精度的樹種識別。傳統(tǒng)的高光譜圖像分類算法(如支持向量機、隨機森林)需要提前對特征進行選擇,會造成信息損失并降低分類精度。深度學習提供一種端到端的學習范式,可以自主地從大量數(shù)據(jù)中學習復雜非線性特征,避免了傳統(tǒng)算法提取特征的復雜性和局限性。本文利用機載高光譜影像和深度學習方法對三個研究區(qū)中的樹種進行分類研究。

二、研究區(qū)概況

鐵崗水庫位于中國廣東省深圳市寶安區(qū)東南部(22°36′30″N,113°54′30″E),地理位置如圖1所示。該地區(qū)屬亞熱帶季風氣候,氣候溫和,光照充足,雨量豐沛。多年平均氣溫 21.7℃,平均降水量 1664mm。平均海拔高度為23-76m。鐵崗水庫庫區(qū)的自然地帶性植被為季風常綠闊葉林,現(xiàn)存植被以人工次生林和人工林為主,在局部地區(qū)保存少量的次生灌木叢和濕地草甸,主要樹種有水松、樟樹、小葉榕、側柏、紅錐木、桉樹和高山榕等。濕地草甸主要由喬本科和莎草科構成。本研究選擇鐵崗水庫內(nèi)一塊森林樣地作為研究區(qū)域,區(qū)域范圍如圖1紅框標注所示。

wKgZomY4fz2AKx0_AAUuOdjnHJo519.png

圖1鐵崗水庫研究區(qū)位置概況圖

2.1數(shù)據(jù)獲取

高光譜影像于2022年8月16日在晴朗無云的條件下獲取。本研究利用某研究院自主集成的無人機高光譜系統(tǒng)對研究區(qū)進行數(shù)據(jù)采集。高光譜系統(tǒng)搭載在四旋翼無人機上,由高光譜成像儀、IMU和GPS三大部分組成,具備體積小、重量輕、靈活機動、實時性強等優(yōu)勢。高光譜傳感器是一種推掃式掃描儀,在400-1000nm光譜范圍內(nèi)記錄112個波段,光譜分辨率5nm。表2-2總結了高光譜傳感器的詳細參數(shù)。飛行高度設置為離地面約100m,空間分辨率為0.1m,飛行速度設置為4m/s。在飛行期間,共產(chǎn)生了7條航帶,旁向重疊度為30%地面實測數(shù)據(jù)在飛行活動結束后進行集,共記錄了7種樹木。此外,本研究還利用高分辨率影像圖進行目視解譯,進一步擴充實地樣本。具體的地面真實標簽情況如表1示。

表1 鐵崗水庫數(shù)據(jù)集的地面真實標簽情況。

wKgaomY4fz2AHCgcAACFLuOkgQs808.png

2.2數(shù)據(jù)處理

利用無人機高光譜系統(tǒng)獲取的數(shù)據(jù)有原始高光譜數(shù)據(jù)、POS信息數(shù)據(jù)和時間同步數(shù)據(jù)。原始數(shù)據(jù)無法直接使用,需進行一定的數(shù)據(jù)預處理,如異常值去除、輻射定標、幾何校正、大氣校正等。流程圖如圖2所示。

wKgZomY4fz2AG3KKAABF6OpWrTg411.png

圖 2高光譜數(shù)據(jù)預處理流程圖

(1)去除異常值

利用無人機高光譜系統(tǒng)采集圖像的過程中,會在某些像元中產(chǎn)生異常值,如圖3所示,在某個波段處DN值會突然升高或突然降低。為此,需要通過算法對這些異常值進行去除。觀察異常值可發(fā)現(xiàn)其有兩大特點:①不是中位數(shù);②與周圍的DN值相差較大。本文根據(jù)異常值的特點提出了一種算法對其進行去除。

以某一含有異常值的像元為例,去除的主要步驟如下:

①依次遍歷波段值,取其左右像素組成一個列表[xi-1,xi,xi+1]

②若該值為中位數(shù),則繼續(xù)遍歷,若該值不是中位數(shù),則計算與左右像素的相差值。

③如果Mean(xi- xi-1+ xi- xi+1)>n′ xi+1- xi-1(其中n為閾值),則判斷該值為異常值,使用xi-1和xi+1的平均值來替代。

本文通過不同的算法對某一植被像元進行異常值去除,結果如圖3所示?!?/p>

wKgaomY4fz6AObqrAAHVwve6SLY737.png

圖 3異常值去除

可以看出,中值濾波雖然可以對異常值進行去除,但該算法會更改其他光譜值。SG濾波對異常值起到平滑作用,并不能完全去除異常值。MAD算法相比前兩種算法來說效果更好,但會將非異常值判斷為異常值。與其他算法相比,本文提出的去除算法效果更好,在去除異常值的過程中,不會更改其他非異常值。本研究利用該算法對整幅圖像進行處理,去除光譜曲線中的異常值。

(2)輻射定標

高光譜傳感器記錄的是數(shù)字量化值(DN值),其無單位,是非物理量。為此,需要進行輻射定標來將圖像的DN值轉化為輻射亮度值或者反射率值等物理量。本文利用高光譜傳感器廠商提供的定標公式和定標文件對圖像進行輻射定標。定標公式如式(9)所示

wKgZomY4fz6AcYmSAAA1WRuVMWw446.png

其中:L是傳感器測得地面目標的總輻射亮度,單位為mW/(cm2×sr× nm);calibration_gain為輻射定標系數(shù),由傳感器廠商提供,某一位置的定標系數(shù)如圖3(a)所示;

wKgaomY4fz6AIDKGAAEvsQq5YMo717.png

圖 3輻射定標參數(shù)

image_DN為傳感器記錄的原始DN值;dark_DN為對應像元的暗電流DN值,在采集高光譜數(shù)據(jù)時會同步記錄暗電流數(shù)據(jù),某一位置的暗電流DN值如圖3(b)所示;integration_time為積分時間。圖4展示了植被像元輻射定標前后的光譜曲線差異。

wKgZomY4fz-AL_NuAADJKZlgvKs321.png

圖 4輻射定標

(3)幾何校正

利用無人機高光譜系統(tǒng)獲取的原始數(shù)據(jù)不包含地理坐標信息,且在飛行過程中,由于無人機的姿態(tài)(俯仰、翻滾、偏航)、高度、速度和傳感器自身特性等因素,會造成高光譜原始影像中地物形狀扭曲和反向。因此需要對圖像進行幾何校正。本研究首先通過無人機平臺搭載的GPS和IMU解算出航跡坐標信息,然后利用航跡坐標信息、高精度DEM數(shù)據(jù)、時間同步文件構建模型,為高光譜影像賦予地理坐標信息并進行幾何校正。第7航帶幾何校正前后的影像如圖5。

wKgaomY4fz-ARHXrAAPOjBBKrQ0711.png

圖 5幾何校正

(4)大氣校正

在數(shù)據(jù)采集的過程中,高光譜傳感器最終測得的地面目標的總輻射亮度并不是地表真實反射率的反映,其中包含了由大氣吸收,尤其是散射作用造成的輻射量誤差。大氣校正就是消除這些由大氣影響所造成的輻射誤差,反演地物真實的表面反射率的過程。本研究利用ENVI軟件自帶的FlAASH大氣校正模塊對每一條航帶進行大氣校正。圖6展示了植被像元大氣校正前后的光譜曲線差異。

wKgZomY4fz-AXJUCAADRhCU_TMY125.png

圖 6大氣校正

(5)圖像掩膜與圖像拼接

本文的研究對象是森林樹種,但獲取的高光譜影像中含有水體、道路等非植被地物。為消除非植被地物對分類結果的影響,本研究首先計算影像的NDVI值,通過設置合適的閾值(如NDVI≥0.5),創(chuàng)建NDVI掩膜;然后將NDVI掩膜應用于高光譜影像中;最后得到只含有植被的高光譜影像圖。最后本研究利用ENVI軟件中自帶的鑲嵌模塊,對各個航帶進行拼接。最終得到的高光譜影像圖如圖7所示。各樹種的光譜曲線差異如圖8所示。

wKgaomY4f0CAUHrxAAL6awyuu8o203.png

圖 7鐵崗水庫研究區(qū)高光譜影像圖

wKgZomY4f0CAN9_6AAFNyRfqWfY444.png

圖 8鐵崗水庫數(shù)據(jù)集的樹種光譜曲線

三、小結

針對鐵崗水庫數(shù)據(jù)集,本文提出了一種異常值去除算法,與其他經(jīng)典去噪算法相比,本文提出的方法效果最好。為避免非植被地物對分類結果的影響,本文分別創(chuàng)建CHM掩膜和NDVI掩膜對TEF數(shù)據(jù)集和鐵崗水庫數(shù)據(jù)集進行處理,得到只包含植被的高光譜影像圖。

四、基于改進 Mask R-CNN 的單木分割

4.1 實驗過程與結果

4.1.1 數(shù)據(jù)集標注與劃分

本研究將正射影像圖作為神經(jīng)網(wǎng)絡的輸入。數(shù)據(jù)集標注的流程如圖9所示,由于圖像中除樹木外,還包含草地、裸地等非樹種地物,它們會對數(shù)據(jù)的標注和模型的訓練造成干擾,如圖10(a)中紅框部分,其實際為草地,但在進行標注過程中,容易將其判別為樹木。

wKgaomY4f0GAWq4vAAHR8VALC0o431.png

圖 9數(shù)據(jù)集標注流程圖

wKgZomY4f0OAVHScAAXzzviFpHU386.png

圖 10數(shù)據(jù)集標注

為解決這一問題,本文利用CHM數(shù)據(jù)生成高度掩膜(CHM≥5),去除草地、裸地等地物,掩膜后的結果如圖10(b)所示,可以看到圖像中只保留了樹木。然后在圖像中隨機選擇大小為512×512的子圖像制作數(shù)據(jù)集,其中選擇100張子圖像作為訓練集,20張子圖像作為測試集。最后利用圖像標注工具對子圖像進行實例標注。然而,由于本研究使用的數(shù)據(jù)是具有地理坐標信息的RGB圖像(TIF格式),標注工具并不支持這種格式的讀取。因此在數(shù)據(jù)集制作的過程中,本文不僅保存了TIF格的圖像,還保存了對應的PNG格式的圖像。利用標注工具對PNG格式的圖像進行實例標注,之后將獲得的標注結果與TIF圖像進行融合,完成數(shù)據(jù)集的標注。某一圖像的標注結果如圖10(c)所示。

4.1.2實驗結果

本文在特征提取部分選擇ResNet50作為主干網(wǎng)絡,并利用MaskR-CNN在大規(guī)模數(shù)據(jù)集上預先訓練好的模型權重進行訓練。本文從輸入數(shù)據(jù)的類型和是否在網(wǎng)絡中加入注意力機制兩個方面出發(fā),設計了六種不同的分割方案。在網(wǎng)絡中加入注意力機制時,有三種方案,分別針對輸入數(shù)據(jù)為RGB、CHM以及RGB+CHM的情況。同樣地,當網(wǎng)絡中不包含注意力機制時,也有三種方案。六種方案獲得的分割結果如表2所示,

表 2不同設計方案下獲得的單木分割結果

wKgaomY4f0SASvIJAACIj8ZlXD4821.png

可以看出,當輸入數(shù)據(jù)為RGB且在網(wǎng)絡中加入SimAM注意力機制時,獲得的分割性能最好,AP值達到41.5%,其中IoU閾值為0.5時(即AP50),精度最高,有74.5%。除了輸入數(shù)據(jù)為CHM的情況外,其他所有模型對中目標的分割能力最好,APM值高于APS值和APL值,如模型RGB+SimAM的APM值為47.6%,高于APS值(32.4%)和APL值(33.6%)10多個百分點。當在網(wǎng)絡中加入SimAM注意力機制時,分割性能均得到提升。其中,當輸入數(shù)據(jù)為RGB且網(wǎng)絡中不加入注意力機制時,獲得的AP50值為72.3%,加入注意力機制后,AP50值提高到74.5%,增加了2.2個百分點。這證明了SimAM注意力機制的有效性。模型獲得的分割效果如圖11所示,

wKgaomY4f0SAX80WAAt7f4wtdTE672.png

wKgZomY4f0WADy88AAbvIMZ2zvo970.png

圖 11單木分割結果

可以看出,網(wǎng)絡能夠準確地識別并分割出圖像中的樹木,但也存在一定的問題,比如欠分割的情況。如圖11(c)所示的預測掩膜圖,紅框部分應為多棵樹,但模型將其分割為同一棵樹。此外,模型對圖像邊緣部分的分割效果不太良好,如圖11(c)中的藍框部分,其不是一棵完整的樹,模型將其分割為一棵樹。

續(xù)~~

推薦:

便攜式高光譜成像系統(tǒng)iSpecHyper-VS1000

專門用于公安刑偵、物證鑒定、醫(yī)學醫(yī)療、精準農(nóng)業(yè)、礦物地質(zhì)勘探等領域的最新產(chǎn)品,主要優(yōu)勢具有體積小、幀率高、高光譜分辨率高、高像質(zhì)等性價比特點采用了透射光柵內(nèi)推掃原理高光譜成像,系統(tǒng)集成高性能數(shù)據(jù)采集與分析處理系統(tǒng),高速USB3.0接口傳輸,全靶面高成像質(zhì)量光學設計,物鏡接口為標準C-Mount,可根據(jù)用戶需求更換物鏡。

wKgaomY4f0WAbQYeAAG-q9GWvYo534.png

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2566

    文章

    53008

    瀏覽量

    767535
  • 成像系統(tǒng)

    關注

    2

    文章

    205

    瀏覽量

    14262
  • 無人機
    +關注

    關注

    231

    文章

    10845

    瀏覽量

    186831
  • 高光譜
    +關注

    關注

    0

    文章

    422

    瀏覽量

    10329
  • 深度學習
    +關注

    關注

    73

    文章

    5561

    瀏覽量

    122799
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    無人機搭載光譜成像系統(tǒng)

    無人機搭載光譜成像系統(tǒng)是一種先進的遙感技術,結合了無人機(UAV)的便攜性和靈活性以及光譜成像的精確性和詳細性。這種
    的頭像 發(fā)表于 08-09 12:00 ?2052次閱讀
    無人機搭載<b class='flag-5'>高</b><b class='flag-5'>光譜成像</b><b class='flag-5'>系統(tǒng)</b>

    光譜成像光譜儀鏡頭的分類與選擇

    鏡頭是光譜成像光譜儀的關鍵設備,它的質(zhì)量(指標)優(yōu)劣直接影響光譜成像光譜儀的整機指標,因此,
    發(fā)表于 07-03 09:40 ?1823次閱讀

    光譜成像系統(tǒng)的工作方式是什么

    采用集成度的機械設計和校正光學設計,光譜成像系統(tǒng)實現(xiàn)了對圖像的無像差成像
    發(fā)表于 11-30 11:21 ?745次閱讀

    什么是光譜成像技術?

    ,例如:我們可以把400nm-1000nm分為300個通道。因此,通過高光譜設備獲取到的是一個數(shù)據(jù)立方,不僅有圖像的信息,并且在光譜維度上進行展開,結果不僅可以獲得圖像上每個點的光譜數(shù)據(jù),還可以獲得任一個譜段的
    發(fā)表于 12-21 15:34 ?3237次閱讀

    無人機載光譜成像設備的研究及應用進展

    無人機載光譜成像設備因其機動靈活、操作簡單等優(yōu)點,被應用于諸多研究領域,具有廣泛的發(fā)展前景。本文對當前無人機載
    的頭像 發(fā)表于 05-05 10:19 ?7576次閱讀
    無人<b class='flag-5'>機載</b><b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>設備的<b class='flag-5'>研究</b>及應用進展

    光譜成像技術有哪些顯著的優(yōu)勢?

    光譜成像技術是基于非常多窄波段的影像數(shù)據(jù)技術,它將成像技術與光譜技術相結合,探測目標的二維幾何空間及一維
    的頭像 發(fā)表于 07-28 10:23 ?5145次閱讀
    <b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>技術有哪些顯著的優(yōu)勢?

    光譜成像技術的分類

    光譜成像技術起源于上世紀八十年代,其前身是多光譜遙感成像技術。由于光譜成像具有良好的信息獲取能力,光譜成像技術得到了飛速的發(fā)展,目前已經(jīng)發(fā)展
    的頭像 發(fā)表于 04-18 07:09 ?1331次閱讀
    <b class='flag-5'>光譜成像</b>技術的<b class='flag-5'>分類</b>

    什么是光譜成像技術?光譜成像技術的原理與應用

    光譜信息,為每個像素提供一個連續(xù)的光譜響應曲線。這種技術能夠提供遠超過人眼識別能力的光譜和空間信息,使我們能夠從不同的角度和深度分析目標物體。 二、
    的頭像 發(fā)表于 08-18 16:03 ?6037次閱讀
    什么是<b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>技術?<b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>技術的原理與應用

    避免光譜成像數(shù)據(jù)中的光譜混疊問題

    光譜成像技術在農(nóng)業(yè)、環(huán)境監(jiān)測、醫(yī)學診斷等領域具有廣泛的應用前景。然而,光譜混疊是光譜成像數(shù)據(jù)分析中常見的問題之一,它會影響數(shù)據(jù)的解釋和應
    的頭像 發(fā)表于 02-27 15:27 ?1492次閱讀

    光譜成像技術原理及其優(yōu)勢

    光譜成像技術是一種將成像技術與光譜技術結合的影像數(shù)據(jù)技術。通過高光譜技術可以獲取探測目標的
    的頭像 發(fā)表于 03-27 06:34 ?1483次閱讀
    <b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>技術原理及其優(yōu)勢

    光譜成像技術:從原理到應用的全面指南

    光譜成像技術是當今科學與工程領域中備受矚目的一項創(chuàng)新。它不僅融合了光譜學和成像技術,而且在各個行業(yè)和研究領域都有著廣泛的應用。本文將深入探
    的頭像 發(fā)表于 04-15 17:36 ?3358次閱讀
    <b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>技術:從原理到應用的全面指南

    光譜成像系統(tǒng)解析

    光譜成像技術,一種在多個行業(yè)中愈發(fā)重要的先進技術,提供了一種深入了解物體表面特性的全新方式。本文將詳細探討光譜成像系統(tǒng)的工作原理、應用及
    的頭像 發(fā)表于 04-16 14:59 ?1310次閱讀
    <b class='flag-5'>高</b><b class='flag-5'>光譜成像</b><b class='flag-5'>系統(tǒng)</b>解析

    光譜成像儀的數(shù)據(jù)怎么看

    光譜成像(Hyperspectral Imaging, HSI)是一種先進的成像技術,它結合了成像技術和光譜技術,能夠獲取物體在不同波段下
    的頭像 發(fā)表于 05-17 10:02 ?992次閱讀
    <b class='flag-5'>高</b><b class='flag-5'>光譜成像</b>儀的數(shù)據(jù)怎么看

    無人機機載光譜成像系統(tǒng)的應用及優(yōu)勢

      隨著無人機技術的快速發(fā)展,基于無人機平臺的光譜成像系統(tǒng)在多個領域中得到了廣泛應用。本文將介紹一款小型多旋翼無人機機載
    的頭像 發(fā)表于 08-15 15:03 ?1502次閱讀
    無人機<b class='flag-5'>機載</b><b class='flag-5'>高</b><b class='flag-5'>光譜成像</b><b class='flag-5'>系統(tǒng)</b>的應用及優(yōu)勢

    光譜成像相機:基于光譜成像技術的玉米種子純度檢測研究

    無損檢測領域的研究熱點。中達瑞和作為國內(nèi)光譜成像設備的領先供應商,可實現(xiàn)國產(chǎn)替代,助力科研院校進行光譜成像領域的
    的頭像 發(fā)表于 05-29 16:49 ?175次閱讀