一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

使用張量板進行機器學習模型分析

星星科技指導員 ? 來源:嵌入式計算設計 ? 作者:Aekam Parmar ? 2022-10-24 15:53 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

機器學習正在突飛猛進地發(fā)展,新的神經(jīng)網(wǎng)絡模型定期出現(xiàn)。

這些模型針對特定數(shù)據(jù)集進行了訓練,并經(jīng)過準確性和處理速度的驗證。在部署之前,開發(fā)人員需要評估 ML 模型,并確保其滿足特定的閾值并按預期運行。有很多實驗可以提高模型性能,在設計和訓練模型時,可視化差異變得至關重要。TensorBoard有助于可視化模型,使分析變得不那么復雜,因為當人們可以看到問題所在時,調(diào)試變得更加容易。

訓練 ML 模型的一般做法

一般的做法是使用預先訓練的模型并執(zhí)行遷移學習,以便為類似的數(shù)據(jù)集重新訓練模型。在遷移學習期間,神經(jīng)網(wǎng)絡模型首先在類似于正在解決的問題上進行訓練。然后,在針對感興趣的問題進行訓練的新模型中,將使用訓練模型中的一個或多個層。

大多數(shù)情況下,預訓練模型以二進制格式出現(xiàn),這使得獲取內(nèi)部信息并立即開始工作變得困難。從組織的業(yè)務角度來看,擁有一些工具來深入了解模型以減少項目交付時間表是有意義的。

有幾個可用選項可用于獲取模型信息,例如層數(shù)和相關參數(shù)?!澳P驼焙汀澳P屠L圖”是基本選項。這些選項非常簡單,考慮到很少的實現(xiàn)行,并提供非?;镜脑敿毿畔ⅲ鐚訑?shù),層類型以及每層的輸入/輸出。

但是,模型摘要和模型圖對于以協(xié)議緩沖區(qū)的形式了解任何大型復雜模型的每個細節(jié)并不那么有效。在這種情況下,使用張量板,張量流提供的可視化工具更有意義??紤]到它提供的各種可視化選項,如模型,標量和指標(訓練和驗證數(shù)據(jù)),圖像(來自數(shù)據(jù)集),超參數(shù)優(yōu)化等,它非常強大。

用于可視化自定義模型的模型圖

此選項尤其有助于以協(xié)議緩沖區(qū)的形式接收自定義模型,并且需要在進行任何修改或訓練之前了解它。如下圖所示,連續(xù) CNN 的概覽在電路板上可視化。每個塊代表一個單獨的圖層,選擇其中一個將在右上角打開一個包含輸入和輸出信息的窗口。

pYYBAGNWRIiAcnkVAAE0sYDVU1U464.png

如果需要進一步的信息,關于各個塊內(nèi)部有什么,可以簡單地雙擊塊,這將展開塊并提供更多詳細信息。請注意,一個塊可以包含一個或多個可以逐層擴展的塊。在選擇任何特定操作后,它還將提供有關相關處理參數(shù)的更多信息。

pYYBAGNWRJCAIawuAAMJIm9qc4Q977.png

用于分析模型訓練和驗證的標量和指標

機器學習的第二個重要方面是分析給定模型的訓練和驗證。從精度和速度的角度來看,性能對于使其適用于現(xiàn)實生活中的實際應用非常重要。在下圖中,可以看出模型的準確性隨著 epoch/迭代次數(shù)的增加而提高。如果訓練和測試驗證不符合標準,則表明某些事情不對勁。這可能是欠擬合或過擬合的情況,可以通過修改圖層/參數(shù)或改進數(shù)據(jù)集或兩者來糾正。

poYBAGNWRJmAXKMSAAI169c2dZE463.png

圖像數(shù)據(jù),用于可視化數(shù)據(jù)集中的圖像

顧名思義,它有助于可視化圖像。它不僅限于可視化數(shù)據(jù)集中的圖像,而且還以圖像的形式顯示混淆矩陣。此矩陣指示檢測各個類的對象的準確性。如下圖所示,模特將外套與套頭衫混淆。為了克服這種情況,建議改進特定類的數(shù)據(jù)集,以便將可區(qū)分的特征提供給模型,以便更好地學習,從而提高準確性。

pYYBAGNWRKGAPf7eAAK49yHUzcU591.png

超參數(shù)調(diào)優(yōu)以實現(xiàn)所需的模型準確性

模型的準確性取決于輸入數(shù)據(jù)集、層數(shù)和相關參數(shù)。在大多數(shù)情況下,在初始訓練期間,精度永遠不會達到預期的精度,并且除了數(shù)據(jù)集之外,還需要使用層數(shù),層類型,相關參數(shù)。此過程稱為超參數(shù)優(yōu)化。

在此過程中,提供了一系列超參數(shù)供模型選擇,并且使用這些參數(shù)的組合運行模型。每個組合的準確性都記錄在電路板上并可視化。它糾正了手動訓練模型時會消耗的精力和時間,用于每個可能的超參數(shù)組合。

pYYBAGNWRKmAdY54AAJ_oXA72uk465.png

用于分析模型處理速度的分析工具

除了準確性之外,處理速度也是任何模型的一個同樣重要的方面。有必要分析單個塊消耗的處理時間,以及是否可以通過進行一些修改來減少。分析工具提供了具有不同 epoch 的每個操作所消耗的時間的圖形表示。通過這種可視化,人們可以輕松查明消耗更多時間的操作。一些已知的開銷可能是調(diào)整輸入大小,從Python轉(zhuǎn)換模型代碼,或者在CPU而不是GPU中運行代碼。處理這些事情將有助于實現(xiàn)最佳性能。

poYBAGNWRLCAI1RdAANsGq3qeok731.png

pYYBAGNWRLiAFjf6AAMPiKgpc8E032.png

總體而言,張量板是幫助開發(fā)和訓練過程的絕佳工具。來自標量和指標、圖像數(shù)據(jù)和超參數(shù)優(yōu)化的數(shù)據(jù)有助于提高準確性,而分析工具有助于提高處理速度。TensorBoard還有助于減少所涉及的調(diào)試時間,否則這肯定會是一個很大的時間框架。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器學習
    +關注

    關注

    66

    文章

    8503

    瀏覽量

    134637
  • 數(shù)據(jù)集

    關注

    4

    文章

    1224

    瀏覽量

    25455
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    模型在半導體行業(yè)的應用可行性分析

    的應用,比如使用機器學習分析數(shù)據(jù),提升良率。 這一些大模型是否真的有幫助 能夠在解決工程師的知識斷層問題 本人純小白,不知道如何涉足這方面 應該問什么大
    發(fā)表于 06-24 15:10

    獲取具有三個輸出的自定義模型的輸出張量,運行時錯誤是怎么回事?

    獲取具有三個輸出的自定義模型的輸出張量: 從 openvino.runtime 導入內(nèi)核 內(nèi)核 = 內(nèi)核() model = core.read_model(model=“model.xml
    發(fā)表于 03-05 09:44

    機器學習模型市場前景如何

    當今,隨著算法的不斷優(yōu)化、數(shù)據(jù)量的爆炸式增長以及計算能力的飛速提升,機器學習模型的市場前景愈發(fā)廣闊。下面,AI部落小編將探討機器學習
    的頭像 發(fā)表于 02-13 09:39 ?365次閱讀

    什么是機器學習?通過機器學習方法能解決哪些問題?

    計算機系統(tǒng)自身的性能”。事實上,由于“經(jīng)驗”在計算機系統(tǒng)中主要以數(shù)據(jù)的形式存在,因此機器學習需要設法對數(shù)據(jù)進行分析學習,這就使得它逐漸成為智
    的頭像 發(fā)表于 11-16 01:07 ?965次閱讀
    什么是<b class='flag-5'>機器</b><b class='flag-5'>學習</b>?通過<b class='flag-5'>機器</b><b class='flag-5'>學習</b>方法能解決哪些問題?

    AI大模型與深度學習的關系

    AI大模型與深度學習之間存在著密不可分的關系,它們互為促進,相輔相成。以下是對兩者關系的介紹: 一、深度學習是AI大模型的基礎 技術支撐 :深度學習
    的頭像 發(fā)表于 10-23 15:25 ?2900次閱讀

    使用AI大模型進行數(shù)據(jù)分析的技巧

    使用AI大模型進行數(shù)據(jù)分析的技巧涉及多個方面,以下是一些關鍵的步驟和注意事項: 一、明確任務目標和需求 在使用AI大模型之前,首先要明確數(shù)據(jù)分析的任務目標,這將直接影響
    的頭像 發(fā)表于 10-23 15:14 ?2768次閱讀

    AI大模型與傳統(tǒng)機器學習的區(qū)別

    多個神經(jīng)網(wǎng)絡層組成,每個層都包含大量的神經(jīng)元和權重參數(shù)。 傳統(tǒng)機器學習模型規(guī)模相對較小,參數(shù)數(shù)量通常只有幾千到幾百萬個,模型結(jié)構(gòu)相對簡單。 二、訓練數(shù)據(jù)需求 AI大
    的頭像 發(fā)表于 10-23 15:01 ?2596次閱讀

    使用IBIS模型進行時序分析

    電子發(fā)燒友網(wǎng)站提供《使用IBIS模型進行時序分析.pdf》資料免費下載
    發(fā)表于 10-21 10:00 ?1次下載
    使用IBIS<b class='flag-5'>模型</b><b class='flag-5'>進行</b>時序<b class='flag-5'>分析</b>

    構(gòu)建語音控制機器人 - 線性模型機器學習

    輪子并識別音頻信號,但它仍然無法通過語音命令控制或按預定義路徑行駛。 線性控制模型 首先要解決的問題是實現(xiàn)直線驅(qū)動。為此,我們使用線性模型來控制提供給車輪的電壓。使用線性模型適合對汽車系統(tǒng)進行
    的頭像 發(fā)表于 10-02 16:31 ?581次閱讀
    構(gòu)建語音控制<b class='flag-5'>機器</b>人 - 線性<b class='flag-5'>模型</b>和<b class='flag-5'>機器</b><b class='flag-5'>學習</b>

    【「時間序列與機器學習」閱讀體驗】時間序列的信息提取

    方法為該時間序列填充缺失值。 時間序列的縮放是指對原有的時間序列數(shù)據(jù)進行數(shù)據(jù)范圍的調(diào)整,以便更好地完成后續(xù)的數(shù)據(jù)分析機器學習任務。該節(jié)有講到時間序列的最小最大縮放、時間序列的最大絕對
    發(fā)表于 08-17 21:12

    【《時間序列與機器學習》閱讀體驗】+ 時間序列的信息提取

    之前對《時間序列與機器學習》一書進行了整體瀏覽,并且非常輕松愉快的完成了第一章的學習,今天開始學習第二章“時間序列的信息提取”。 先粗略的翻
    發(fā)表于 08-14 18:00

    【「時間序列與機器學習」閱讀體驗】+ 簡單建議

    這本書以其系統(tǒng)性的框架和深入淺出的講解,為讀者繪制了一幅時間序列分析機器學習融合應用的宏偉藍圖。作者不僅扎實地構(gòu)建了時間序列分析的基礎知識,更巧妙地展示了
    發(fā)表于 08-12 11:21

    【「時間序列與機器學習」閱讀體驗】全書概覽與時間序列概述

    如何通過根因分析技術獲得導致故障的維度和元素,包括基于時間序列異常檢測算法的根因分析、基于熵的根因分析、基于樹模型的根因分析、規(guī)則
    發(fā)表于 08-07 23:03

    【《大語言模型應用指南》閱讀體驗】+ 基礎知識學習

    的信息,提供更全面的上下文理解。這使得模型能夠更準確地理解復雜問題中的多個層面和隱含意義。 2. 語義分析 模型通過訓練學習到語言的語義特征,能夠識別文本中的命名實體、句法結(jié)構(gòu)和語義關
    發(fā)表于 08-02 11:03

    【《大語言模型應用指南》閱讀體驗】+ 基礎篇

    這個程序不需要程序員編寫,而是由計算機自動生成。因此,人工編程方法依賴程序員思考的規(guī)則,而自動編程是計算機算法通過分析數(shù)據(jù)自行創(chuàng)建規(guī)則。 作者通過類比學生準備高考的過程來說明機器學習的過程,如下圖: 此
    發(fā)表于 07-25 14:33