數(shù)據(jù)的數(shù)量和變化對于大多數(shù) ML 模型（例如深度學習神經(jīng)網(wǎng)絡(luò)模型）的性能非常重要。因此，神經(jīng)網(wǎng)絡(luò)模型的訓練需要一個非常大的數(shù)據(jù)集。只有它才能達到生產(chǎn)就緒模型中預期的精度。

假設(shè)您有少量可用的數(shù)據(jù)集，不足以訓練模型，并且您不知道如何生成具有所需數(shù)據(jù)變體的足夠數(shù)據(jù)集。這正是“數(shù)據(jù)增強”有助于實現(xiàn)的目標。

什么是數(shù)據(jù)增強？

數(shù)據(jù)增強是一種通過向現(xiàn)有數(shù)據(jù)集添加某些變體并將其添加到原始數(shù)據(jù)集以生成“略微修改和乘法”數(shù)據(jù)來人為增加數(shù)據(jù)集體積的技術(shù)。您可以獲取數(shù)據(jù)集中的所有可用樣本，并以不同的方式對其進行多次修改，以獲得更大的數(shù)據(jù)集。

數(shù)據(jù)集在模型訓練中的重要性

機器學習管道的第一階段是生成或獲取用于訓練機器學習模型所需的數(shù)據(jù)集。機器學習模型足夠智能，可以識別訓練的對象。但是，如果他們不是培訓的一部分，他們就不那么聰明，無法處理不同的場景。

例如，如果訓練模型時所有訓練圖像僅在一個特定方向上對齊，則它可能無法識別水平和/或垂直翻轉(zhuǎn)圖像中的對象。這樣做的原因是它產(chǎn)生的特征與它在訓練期間學習的特征不同，即使它們屬于同一個對象。

在大多數(shù)情況下，高質(zhì)量數(shù)據(jù)的可用性始終是一個大問題。它可能少量可用，也可能根本不可用。在這種情況下，收集足以達到所需精度的數(shù)據(jù)集將是一個挑戰(zhàn)。如果數(shù)據(jù)集的數(shù)量不足或變化程度不高，則可能導致擬合不足或過度擬合。

為什么數(shù)據(jù)增強很重要？

在機器學習模型中，收集和標記數(shù)據(jù)是一個繁瑣且成本高昂的過程。數(shù)據(jù)增強可以轉(zhuǎn)換為數(shù)據(jù)集，幫助組織降低運營成本。同時，它解決了數(shù)據(jù)集大小有限和數(shù)據(jù)變化有限的問題。這提高了模型在各種方案中的整體性能。

它是如何工作的？

根據(jù)數(shù)據(jù)集的類型，可以使用不同的數(shù)據(jù)增強技術(shù)。有許多數(shù)據(jù)增強技術(shù)可用于圖像/視頻、音頻和文本數(shù)據(jù)。我們將詳細探討圖像/視頻數(shù)據(jù)增強方法。

圖像/視頻中的數(shù)據(jù)增強技術(shù)

圖像/視頻將 RGB 信息存儲在 2D 數(shù)組中。主要的數(shù)據(jù)增強技術(shù)可能是改變圖像的方向、改變圖像的分辨率/大小以及改變 RGB（像素）值。

這些選項的不同組合可以導致更多的增強方法。imgaug庫提供了許多不同的圖像數(shù)據(jù)增強選項，如下所示。

算術(shù)：-此類操作更改整個圖像或其某些部分的像素值。加法和乘法選項將像素值相加和相乘一個隨機數(shù)（在預定義范圍內(nèi)生成）。對于所有像素，此數(shù)字可能相同，對于相鄰像素，此數(shù)字可能不同。有一些選項可以將隨機像素或像素簇設(shè)置為常量值。類似的選項是為整個圖像添加某些噪點。此外，還可以反轉(zhuǎn)像素值

藝術(shù)的：-此類別提供了將圖像樣式轉(zhuǎn)換為卡通圖像的選項

模糊：-此類別提供了不同的選項來模糊圖像內(nèi)容。可能的選項是GaussianBlur，AverageBlur，MedianBlur，BilateralBlur，MotionBlur，MeanShiftBlur

顏色：-此類操作針對色彩空間、亮度、色調(diào)和飽和度。色彩空間選項的一個示例是將 RGB 轉(zhuǎn)換為 HSV，然后將隨機值（每個圖像均勻采樣）添加到 Hue 通道，并轉(zhuǎn)換回 RGB。有一些選項可以對亮度、飽和度和色調(diào)執(zhí)行加法和乘法運算。

反差：-此類操作專用于對比度處理。可用選項包括伽馬對比度、Sigmoid 對比度、對數(shù)對比度、線性對比度

卷 積：-顧名思義，此類操作與具有預定義矩陣值的卷積圖像有關(guān)。它提供了更改清晰度、添加浮雕效果和檢測圖像邊緣的選項

空翻：-這是一個廣泛使用的選項，它具有水平和/或垂直翻轉(zhuǎn)圖像的選項

幾何：-此類操作可以縮放圖像（如放大和縮?。苿訄D像（水平和/或垂直）并向圖像的另一端添加填充，以及旋轉(zhuǎn)圖像

Imgcorruptlike：-此類選項會向圖像添加不同的噪點，例如高斯噪點、散粒噪點、脈沖噪點、散斑噪點。它還提供不同的圖像模糊選項，如高斯模糊、玻璃模糊、散焦模糊、運動模糊、縮放模糊。此外，還可以應(yīng)用霧、霜、雪和飛濺效果

大?。?此類別的選項執(zhí)行與圖像大小相關(guān)的操作?？梢愿鶕?jù)特定的高度和寬度或調(diào)整大小的百分比調(diào)整圖像大小。圖像的裁剪和填充可以應(yīng)用于圖像的特定大小

圖像數(shù)據(jù)增強通過生成所需級別的數(shù)據(jù)集，無疑提高了模型的準確性。

審核編輯：郭婷