最近，開(kāi)源中國(guó) OSCHINA、Gitee 與 Gitee AI 聯(lián)合發(fā)布了《2024 中國(guó)開(kāi)源開(kāi)發(fā)者報(bào)告》。

報(bào)告聚焦 AI 大模型領(lǐng)域，對(duì)過(guò)去一年的技術(shù)演進(jìn)動(dòng)態(tài)、技術(shù)趨勢(shì)、以及開(kāi)源開(kāi)發(fā)者生態(tài)數(shù)據(jù)進(jìn)行多方位的總結(jié)和梳理。

在第二章《TOP 101-2024 大模型觀點(diǎn)》中，蘇州盛派網(wǎng)絡(luò)科技有限公司創(chuàng)始人兼首席架構(gòu)師蘇震巍分析了大模型訓(xùn)練過(guò)程中開(kāi)源數(shù)據(jù)集和算法的重要性和影響，分析其在促進(jìn) AI 研究和應(yīng)用中的機(jī)遇，并警示相關(guān)的風(fēng)險(xiǎn)與挑戰(zhàn)。

全文如下：

大模型訓(xùn)練中的開(kāi)源數(shù)據(jù)和算法：機(jī)遇及挑戰(zhàn)

隨著人工智能（AI）技術(shù)的迅猛發(fā)展，尤其是大模型（如 GPT、OpenAI o1、Llama 等）的崛起，開(kāi)源數(shù)據(jù)和算法在大模型訓(xùn)練中的重要性愈發(fā)顯著。開(kāi)源數(shù)據(jù)集和算法不僅推動(dòng)了 AI 研究的進(jìn)步，也在應(yīng)用層面帶來(lái)了深遠(yuǎn)的影響。然而，伴隨這些機(jī)遇的還有諸多風(fēng)險(xiǎn)與挑戰(zhàn)，如數(shù)據(jù)質(zhì)量、版權(quán)問(wèn)題和算法透明性等。本文將淺析大模型訓(xùn)練過(guò)程中開(kāi)源數(shù)據(jù)集和算法的重要性和影響，分析其在促進(jìn) AI 研究和應(yīng)用中的機(jī)遇，并警示相關(guān)的風(fēng)險(xiǎn)與挑戰(zhàn)。

任何方案都具有兩面性和在特殊環(huán)境下的討論的意義和前提，因此，本文不討論開(kāi)源或?qū)α⒚妫ㄩ]源）的絕對(duì)取舍問(wèn)題，僅對(duì)開(kāi)源的有利之處加以淺析。

重要的開(kāi)源數(shù)據(jù)集和算法在大模型訓(xùn)練中的角色

開(kāi)源數(shù)據(jù)集是大模型訓(xùn)練的基石。沒(méi)有高質(zhì)量的數(shù)據(jù)，大模型的性能和應(yīng)用場(chǎng)景將受到極大限制。ImageNet、COCO、Wikipedia 和 Common Crawl 是非常重要一批高質(zhì)量的開(kāi)源數(shù)據(jù)集。以下是這幾個(gè)數(shù)據(jù)集在大模型訓(xùn)練歷程中的重要角色。

ImageNet：ImageNet 是計(jì)算機(jī)視覺(jué)領(lǐng)域最著名的開(kāi)源數(shù)據(jù)集之一，包含數(shù)百萬(wàn)張帶有標(biāo)簽的圖像。它為圖像分類、物體檢測(cè)等任務(wù)提供了豐富的數(shù)據(jù)資源，使得模型能夠在視覺(jué)理解方面取得突破。它由普林斯頓大學(xué)的計(jì)算機(jī)科學(xué)家李飛飛（Fei-Fei Li）及其團(tuán)隊(duì)在 2009 年創(chuàng)建。ImageNet 包含超過(guò) 1400 萬(wàn)張圖像，這些圖像分為超過(guò) 2 萬(wàn)個(gè)類別，每個(gè)類別都與 WordNet 中的一個(gè)詞條對(duì)應(yīng)。每個(gè)類別的圖像數(shù)量從數(shù)百到數(shù)千不等。ImageNet 每年都會(huì)舉辦一個(gè)大型的視覺(jué)識(shí)別競(jìng)賽，即 ImageNet Large Scale Visual Recognition Challenge （ILSVRC）。該競(jìng)賽吸引了全球眾多研究團(tuán)隊(duì)參與，并在推動(dòng)深度學(xué)習(xí)和卷積神經(jīng)網(wǎng)絡(luò)（CNN）技術(shù)的發(fā)展中發(fā)揮了重要作用。今年的諾貝爾物理學(xué)獎(jiǎng)得主之一 Geoffrey Hinton 帶領(lǐng)的團(tuán)隊(duì)成員 AlexNet 在 2012 年的 ILSVRC 中取得了顯著的成功，使得深度學(xué)習(xí)在計(jì)算機(jī)視覺(jué)領(lǐng)域迅速崛起。也為如今我們看到的種類繁多的視覺(jué)大模型（VLMs）開(kāi)啟了新的篇章。

COCO（Common Objects in Context）：COCO 數(shù)據(jù)集由微軟于 2014 年發(fā)布，涵蓋了數(shù)十萬(wàn)張日常生活中的圖像，并附有詳細(xì)的標(biāo)注信息。雖然 COCO 對(duì)比 ImageNet 具有更少的類別，但每一個(gè)類別擁有更多的實(shí)例，假定這能幫助復(fù)雜模型提高物體定位的準(zhǔn)確率。它的設(shè)計(jì)初衷適用于具有上下文信息的圖片中的物體檢測(cè)和分割，目前在目標(biāo)檢測(cè)、分割等任務(wù)中發(fā)揮了重要作用，推動(dòng)了計(jì)算機(jī)視覺(jué)技術(shù)的進(jìn)步。

Wikipedia 和 Common Crawl：Wikipedia 是一個(gè)由全球用戶共同編輯和維護(hù)的高質(zhì)量在線百科全書(shū)，以文字為主，知識(shí)高度結(jié)構(gòu)化，Common Crawl 是一個(gè)非營(yíng)利組織，定期抓取互聯(lián)網(wǎng)公開(kāi)網(wǎng)頁(yè)，生成大量的網(wǎng)頁(yè)數(shù)據(jù)集，可提供大量的互聯(lián)網(wǎng)用戶知識(shí)及非結(jié)構(gòu)化數(shù)據(jù)。他們的共同點(diǎn)是為模型訓(xùn)練提供了充沛的文字素材。這些大型文本數(shù)據(jù)集為自然語(yǔ)言處理（NLP）模型的訓(xùn)練提供了豐富的語(yǔ)料庫(kù)。像 GPT 這樣的語(yǔ)言模型正是通過(guò)大規(guī)模爬取和處理這些數(shù)據(jù)集，才能在文本生成和理解方面表現(xiàn)出色。

開(kāi)源算法的角色

開(kāi)源算法是 AI 研究和應(yīng)用的核心驅(qū)動(dòng)力。開(kāi)源算法的共享和復(fù)用使得研究者和開(kāi)發(fā)者能夠在前人工作的基礎(chǔ)上迅速迭代和創(chuàng)新。以下是一些在這一輪 AI 大模型浪潮中扮演重要角色的的開(kāi)源算法及其在大模型訓(xùn)練中的角色：

TensorFlow 和 PyTorch：這兩個(gè)深度學(xué)習(xí)框架是當(dāng)前最流行的開(kāi)源工具，提供了強(qiáng)大的計(jì)算能力和靈活的模型構(gòu)建方式。它們?yōu)榇竽Ｐ偷挠?xùn)練和部署提供了基礎(chǔ)設(shè)施支持，使得復(fù)雜的 AI 模型得以實(shí)現(xiàn)。

Transformer 架構(gòu)：Transformer 架構(gòu)是一種用于處理序列數(shù)據(jù)的開(kāi)源算法，廣泛應(yīng)用于 NLP 任務(wù)，也是作為這一輪 AI 浪潮推動(dòng)者 GPT 模型的基礎(chǔ)算法?；?Transformer 的模型，如 BERT 和 GPT，已經(jīng)成為自然語(yǔ)言理解和生成的事實(shí)標(biāo)準(zhǔn)。

GAN（生成對(duì)抗網(wǎng)絡(luò)）：GAN 是一種用于生成數(shù)據(jù)的開(kāi)源算法，廣泛應(yīng)用于圖像生成、數(shù)據(jù)增強(qiáng)等領(lǐng)域。它通過(guò)生成器和判別器的對(duì)抗訓(xùn)練，能夠生成高質(zhì)量的圖像和其他數(shù)據(jù)。

除此以外，如果把 Pre-Train 之后的微調(diào)（Fine-Tuning）等環(huán)節(jié)也看做廣義 “訓(xùn)練” 的一部分，還有一系列開(kāi)源方法及配套的工具，例如比較常見(jiàn)的 LoRA（Low-Rank Adaptation of Large Language Models）。

機(jī)遇

從上述開(kāi)源數(shù)據(jù)和算法在模型訓(xùn)練過(guò)程中所扮演的角色可以看到，大模型訓(xùn)練中的開(kāi)源數(shù)據(jù)和算法為 AI 研究和應(yīng)用帶來(lái)了諸多機(jī)遇，在加速創(chuàng)新、促進(jìn)合作、資源共享等方便提供了廣泛而可靠的基礎(chǔ)條件和資源，圍繞這些資源，技術(shù)人員得以進(jìn)行更加開(kāi)放的交流和合作，并展開(kāi)更加深入的教育和培訓(xùn)，以此不斷提升整個(gè)行業(yè)人才的技術(shù)水平。

由于目前主流的模型訓(xùn)練算法都需要依靠對(duì)訓(xùn)練數(shù)據(jù)（樣本）的統(tǒng)計(jì)（概率），因此，開(kāi)放的數(shù)據(jù)和算法能夠在更大程度上確保樣本的質(zhì)量，從而避免更多未知的風(fēng)險(xiǎn)。例如就在 2024 年 12 月 1 日，用戶發(fā)現(xiàn) ChatGPT 在需要輸出 “David Mayer” 這個(gè)名字的時(shí)候會(huì)突然提示拒絕：

此事件一度被解讀為 GPT 模型在訓(xùn)練過(guò)程中被植入了特定的樣本或算法，以避免討論特定的人名。雖然后續(xù)的一系列測(cè)試表明，這種限制似乎只存在于 ChatGPT 產(chǎn)品中，通過(guò) OpenAI 對(duì)外提供的模型接口并不會(huì)觸發(fā)這樣的屏蔽機(jī)制。

OpenAI 在隨后周二（12 月 3 日）立即確認(rèn) “David Mayer” 這個(gè)名字已經(jīng)被內(nèi)部隱私工具標(biāo)記，其在一份聲明中說(shuō)：“可能有些情況下，ChatGPT 不提供關(guān)于人們的某些信息，以保護(hù)他們的隱私?！?公司不會(huì)提供有關(guān)工具或流程的更多細(xì)節(jié)。

無(wú)論真實(shí)的原因是什么，這個(gè)事件是一個(gè)反例，其顯示了封閉的系統(tǒng)以及中心化的模型提供者所具備的風(fēng)險(xiǎn)，也說(shuō)明了不透明的處理環(huán)節(jié)對(duì)模型的輸出結(jié)果帶來(lái)更多的不確定性。類似的拒絕服務(wù)也是在模型服務(wù)過(guò)程中表現(xiàn)出來(lái)的另外一種偏見(jiàn)（Bias）行為，而偏見(jiàn)也是目前所有模型都在極力避免的情形，要進(jìn)一步解決這個(gè)問(wèn)題，使用更加開(kāi)放的數(shù)據(jù)集和算法是一種更負(fù)責(zé)任的做法。

種種事件的發(fā)生并不是壞事，這是所有技術(shù)在發(fā)展過(guò)程中接受實(shí)踐檢驗(yàn)的必經(jīng)之路，通過(guò)種種嘗試和反饋，目前對(duì)于開(kāi)源數(shù)據(jù)集和算法的呼聲正在越來(lái)越高漲。

除了對(duì)于訓(xùn)練集和算法的開(kāi)源之外，對(duì)于模型的 “開(kāi)源” 定義也經(jīng)受著各種議論。筆者比較認(rèn)同的觀點(diǎn)是：開(kāi)源模型不應(yīng)該只把模型文件公布出來(lái)，同時(shí)應(yīng)該把對(duì)應(yīng)的訓(xùn)練集和算法進(jìn)行公開(kāi)，并能夠提供相應(yīng)的訓(xùn)練流程，是所有人能夠?qū)Y(jié)果進(jìn)行重現(xiàn)。這好比我們討論開(kāi)源項(xiàng)目的時(shí)候，通常不會(huì)指我們只能夠下載某個(gè)應(yīng)用程序，而是我們能夠查看源碼，甚至通過(guò)修改源碼編譯出自己想要的應(yīng)用程序。

在今年 10 月 29 日，開(kāi)放源代碼促進(jìn)會(huì)（Open Source Initiative，OSI）發(fā)布了關(guān)于 “開(kāi)源 AI 定義（OSAID）”1.0 版本，其規(guī)定了 AI 大模型若要被視為開(kāi)源必須具備三個(gè)三個(gè)：訓(xùn)練數(shù)據(jù)透明性、完整代碼、模型參數(shù)。雖然對(duì)比目前市面上的 “開(kāi)源模型”，少有能力較高的模型能完全符合，但這種聲明本身就是一種開(kāi)源開(kāi)放態(tài)度的彰顯。

我相信，在更加透明的數(shù)據(jù)集和算法的支持下，模型將在可控性上獲得更好的發(fā)展機(jī)遇，相關(guān)的技術(shù)社區(qū)也將迎來(lái)更大的發(fā)展。

挑戰(zhàn)

當(dāng)然，大模型訓(xùn)練中的開(kāi)源數(shù)據(jù)和算法也伴隨著一定的風(fēng)險(xiǎn)和挑戰(zhàn)，這些風(fēng)險(xiǎn)需要在模型開(kāi)發(fā)和應(yīng)用的過(guò)程中被認(rèn)真對(duì)待和解決。例如前文提到的 “偏見(jiàn)” 問(wèn)題，以及數(shù)據(jù)質(zhì)量問(wèn)題，可能是最顯著的風(fēng)險(xiǎn)。由于開(kāi)源數(shù)據(jù)集質(zhì)量參差不齊，雖然一些廣泛使用的數(shù)據(jù)集如開(kāi)頭介紹的 ImageNet 和 COCO 被認(rèn)為是高質(zhì)量的數(shù)據(jù)集，但其他開(kāi)源數(shù)據(jù)集可能包含噪聲、錯(cuò)誤標(biāo)簽和不完整的信息。這種數(shù)據(jù)質(zhì)量問(wèn)題會(huì)直接影響模型的訓(xùn)練效果，導(dǎo)致模型性能的下降，甚至可能產(chǎn)生錯(cuò)誤的預(yù)測(cè)結(jié)果。

除此以外，在 GPT 爆火之后，由于相關(guān)法律和政策的滯后，已經(jīng)有大量大模型生成的文字、圖像、視頻、音頻內(nèi)容被發(fā)布于互聯(lián)網(wǎng)，當(dāng)這些內(nèi)容再次被作為開(kāi)放數(shù)據(jù)被采集，并再次進(jìn)行訓(xùn)練，可能會(huì)帶來(lái)更大的數(shù)據(jù)質(zhì)量問(wèn)題。因此，筆者認(rèn)為對(duì) AI 生成的觀點(diǎn)進(jìn)行標(biāo)注再發(fā)布是一種更加負(fù)責(zé)任的做法，當(dāng)然，在實(shí)際操作過(guò)程中，要實(shí)現(xiàn)仍然有極大的難度。

開(kāi)源數(shù)據(jù)集的版權(quán)問(wèn)題也是一個(gè)需要重視的風(fēng)險(xiǎn)。盡管開(kāi)源數(shù)據(jù)集通常是公開(kāi)的，但其使用仍然受版權(quán)法的約束。未經(jīng)授權(quán)使用受版權(quán)保護(hù)的數(shù)據(jù)，可能會(huì)導(dǎo)致法律糾紛。此外，某些數(shù)據(jù)集可能包含敏感信息，涉及個(gè)人隱私甚至危害公共安全。

在使用這些數(shù)據(jù)時(shí)，必須遵守相關(guān)的隱私保護(hù)法規(guī)，如歐盟的《通用數(shù)據(jù)保護(hù)條例》（GDPR）和美國(guó)的《健康保險(xiǎn)可攜性和責(zé)任法案》（HIPAA）。在實(shí)際操作過(guò)程中，出于成本、工藝、能力、時(shí)間的制約，數(shù)據(jù)集的篩選和正確使用仍然將會(huì)是一個(gè)持久的挑戰(zhàn)。對(duì)于這個(gè)問(wèn)題，閉源的數(shù)據(jù)集以及方法并不是不存在，只是更加隱蔽了。

也可能會(huì)有人擔(dān)心，所有的數(shù)據(jù)集和算法開(kāi)放后，模型是否會(huì)面臨更多被操控的風(fēng)險(xiǎn)？筆者認(rèn)為，這確實(shí)是一個(gè)很大的問(wèn)題，例如模型可能會(huì)更容易被 “越獄”，從而被操控或輸出原本不應(yīng)輸出的內(nèi)容，這是一個(gè)需要尤其重點(diǎn)關(guān)注的風(fēng)險(xiǎn)點(diǎn)。

在應(yīng)對(duì)策略方面，這場(chǎng)攻防戰(zhàn)的 “藍(lán)方” 同時(shí)也獲得了更多的信息，可以再次加固相關(guān)能力，在這個(gè)過(guò)程中，模型得以進(jìn)行更加充沛的發(fā)展，就如同當(dāng)下的互聯(lián)網(wǎng)一樣。只有黑暗才能隱藏更多風(fēng)險(xiǎn)尤其中心化的控制風(fēng)險(xiǎn)，只有讓核心數(shù)據(jù)和算法經(jīng)受陽(yáng)光的洗禮，并在所有人的監(jiān)督下不斷完善，才能讓模型在更多場(chǎng)景中被更深入地使用（即便如此，訓(xùn)練完的模型本身對(duì)人類來(lái)說(shuō)也仍然是一個(gè) “黑盒”）。目前我們已經(jīng)看到的大量開(kāi)源的模型在各行各業(yè)中展現(xiàn)出強(qiáng)大的生命力和生產(chǎn)力，相關(guān)的開(kāi)源社區(qū)也正在迎來(lái)新的繁榮期，長(zhǎng)期來(lái)看，大模型將繼續(xù)在各種風(fēng)險(xiǎn)、機(jī)遇、挑戰(zhàn)、倫理等復(fù)雜環(huán)境中不斷發(fā)展。

結(jié)論

開(kāi)源數(shù)據(jù)和算法在大模型訓(xùn)練中的重要性不言而喻，它們?yōu)?AI 研究和應(yīng)用帶來(lái)了前所未有的機(jī)遇。然而，這些機(jī)遇也伴隨著一定的風(fēng)險(xiǎn)和挑戰(zhàn)，需要在模型開(kāi)發(fā)和應(yīng)用的過(guò)程中被認(rèn)真對(duì)待和解決。通過(guò)采取適當(dāng)?shù)膽?yīng)對(duì)策略，我們可以在充分利用開(kāi)源數(shù)據(jù)和算法的同時(shí)，盡量減少其潛在的風(fēng)險(xiǎn)，推動(dòng) AI 技術(shù)的健康發(fā)展。

相信在未來(lái)，隨著技術(shù)的不斷進(jìn)步和相關(guān)政策的完善，開(kāi)源數(shù)據(jù)和算法將在大模型訓(xùn)練中發(fā)揮更加重要的作用，為 AI 及大模型的研究和應(yīng)用帶來(lái)更多的創(chuàng)新和機(jī)遇。