一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

開源項目:根據(jù)語音自動生成動畫人物口型

如意 ? 來源:量子位 ? 作者:量子位 ? 2020-12-23 15:26 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

只需要輸入一段語音,代碼會自動生成與之相對的動畫唇形。

還是毫無違和感的那種。

這是一個在GitHub上擁有501星的開源項目,叫做Rhubarb Lip Sync。

它既可以是Windows和OS X命令行工具,也可以作為軟件的插件使用,能夠根據(jù)語音記錄自動創(chuàng)建2D嘴型動畫。

它可以用于計算機游戲、動畫卡通中的角色,或者用于其他需要基于現(xiàn)有錄音、對嘴部進行動畫處理的的影視項目。

那么,它是怎么實現(xiàn)如此效果的呢?

運作原理

首先,了解一下動畫人物說話的六種嘴型。

上述六種嘴型是由漢娜·巴貝拉(Hanna-Barbera)發(fā)明,已經(jīng)成為2D動畫嘴型的制作標準,被迪士尼和華納兄弟等影視公司在多部影視作品采用。

大多數(shù)的發(fā)音,都可以用這六種嘴型表示出來。

因此,Rhubarb Lip Sync工作的步驟如下:

輸入一段語音

Lip Sync識別這段語音

使用六個基本嘴形和最多三個擴展嘴形與語音匹配

輸出一個固定格式的文件

假如我說個奇怪的方言,它也能輸出相應的嘴型動畫嗎?

當然不是。

目前,Rhubarb Lip Sync只提供了兩個語音識別系統(tǒng):

PocketSphinx:只能識別英語,準確率更高。

Phonetic :能識別所有語言,因為它是依據(jù)個人的聲音和音節(jié)判別的,但準確率不如前者。

那么,這個小工具可以跟哪些視頻軟件融合使用呢?

可適用于多款軟件

Adobe After Effects

可以在下載Rhubarb Lip Sync,并且安裝到AE上,可以直接在AE上運行這個軟件。

Moho and OpenToonz

Rhubarb Lip Sync能夠生成.dat文件,這種文件可以被Moho and OpenToonz識別,并導入使用。

Spine by Esoteric Software

Rhubarb Lip Syn for Spine是一個圖形工具,可讓導入Spine項目,執(zhí)行自動唇形同步,然后將結(jié)果重新導入Spine。

Vegas Pro by Magix

Rhubarb Lip Syn 還附帶了兩個用于Vegas Pro(以前稱為Sony Vegas)的插件腳本,可直接在Vegas中使用。

趕快把這個小工具推薦給你喜歡做視頻的朋友吧~

源代碼地址:

https://github.com/DanielSWolf/rhubarb-lip-sync

最新版本的下載地址:

https://github.com/DanielSWolf/rhubarb-lip-sync/releases

https://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/AdobeAfterEffects/README.adoc

https://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/EsotericSoftwareSpine/README.adoc
責編AJX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 語音識別
    +關(guān)注

    關(guān)注

    39

    文章

    1782

    瀏覽量

    114240
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    3689

    瀏覽量

    43831
  • 源代碼
    +關(guān)注

    關(guān)注

    96

    文章

    2953

    瀏覽量

    68384
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    RT-Thread榮獲2025優(yōu)秀開源項目 | 新聞速遞

    6月底,RT-Thread睿賽德受邀參與由上海開源信息技術(shù)協(xié)會主辦的2025上海開源創(chuàng)新精英薈。上海市商委副主任張杰出席會議并致辭。RT-Thread嵌入式操作系統(tǒng)項目憑借其卓越的技術(shù)創(chuàng)新與
    的頭像 發(fā)表于 07-04 09:04 ?1651次閱讀
    RT-Thread榮獲2025優(yōu)秀<b class='flag-5'>開源</b><b class='flag-5'>項目</b> | 新聞速遞

    零知開源——ESP32語音交互系統(tǒng)(AI小智)開發(fā)教程

    一、功能介紹小智AI聊天機器人是一個基于嵌入式硬件與人工智能技術(shù)深度融合的智能交互系統(tǒng)。該項目以ESP32開發(fā)板為核心,結(jié)合語音喚醒、自然語言處理、音頻解碼播放及圖形化交互界面四大核心模塊,實現(xiàn)
    發(fā)表于 03-29 16:30

    Open Echo:一個開源的聲納項目

    “ ?這是一個還在迭代中的項目開源的回聲測深儀/水深測量儀/聲吶系統(tǒng),適用于水文測繪及科研用途?;贏rduino平臺開發(fā)并具備良好兼容性? ” ? Open Echo 概覽 作為持續(xù)迭代
    的頭像 發(fā)表于 03-20 11:14 ?1001次閱讀
    Open Echo:一個<b class='flag-5'>開源</b>的聲納<b class='flag-5'>項目</b>

    ?Diffusion生成式動作引擎技術(shù)解析

    Diffusion生成式動作引擎 Diffusion生成式動作引擎是一種基于擴散模型(Diffusion Models)的生成式人工智能技術(shù),專注于生成連續(xù)、逼真的人類動作或
    的頭像 發(fā)表于 03-17 15:14 ?1841次閱讀

    階躍星辰開源多模態(tài)模型,天數(shù)智芯迅速適配

    內(nèi)的高度關(guān)注和熱烈討論。 據(jù)悉,這兩款開源模型均具備強大的功能和應用潛力。Step-Video-T2V視頻生成模型能夠根據(jù)文本描述生成高質(zhì)量的視頻內(nèi)容,為視頻創(chuàng)作和編輯領域帶來全新的可
    的頭像 發(fā)表于 02-19 14:30 ?514次閱讀

    字節(jié)跳動發(fā)布OmniHuman 多模態(tài)框架

    栩栩如生的人物視頻。 與傳統(tǒng) AI 模型不同,OmniHuman-1 能夠生成逼真的全身動畫,并且可以精準地將手勢和面部表情與語音或音樂同步,打破了以往只能
    的頭像 發(fā)表于 02-07 17:50 ?791次閱讀

    用DeepSeek-R1實現(xiàn)自動生成Manim動畫

    ? 作者:算力魔方創(chuàng)始人/英特爾創(chuàng)新大使劉力 前面我們分享了在本地運行能與OpenAI-o1 能力相媲美的DeepSeek-R1 模型。本文將介紹如何使用DeepSeek-R1實現(xiàn)自動生成Manim
    的頭像 發(fā)表于 02-07 12:31 ?3357次閱讀
    用DeepSeek-R1實現(xiàn)<b class='flag-5'>自動</b><b class='flag-5'>生成</b>Manim<b class='flag-5'>動畫</b>

    開源鴻蒙榮獲開放原子“2024年度操作系統(tǒng)領域國內(nèi)活躍開源項目

    近日,2024開放原子開發(fā)者大會暨首屆開源技術(shù)學術(shù)大會在武漢圓滿召開。在大會開幕式“2024年度國內(nèi)活躍開源項目&開發(fā)者致謝儀式”上,開放原子開源鴻蒙(OpenAtom OpenHar
    的頭像 發(fā)表于 12-28 15:39 ?902次閱讀

    凌蒙派OpenHarmony開源項目榮獲本期Gitee官方推薦

    近日,我司凌蒙派OpenHarmony開源項目榮獲本期Gitee官方推薦。本期Gitee官方推薦不僅是對凌蒙派OpenHarmony開源項目的高度認可,也是對我司在推動
    的頭像 發(fā)表于 11-20 01:04 ?843次閱讀
    凌蒙派OpenHarmony<b class='flag-5'>開源</b><b class='flag-5'>項目</b>榮獲本期Gitee官方推薦

    如何自動生成verilog代碼

    介紹幾種自動生成verilog代碼的方法。
    的頭像 發(fā)表于 11-05 11:45 ?1033次閱讀
    如何<b class='flag-5'>自動</b><b class='flag-5'>生成</b>verilog代碼

    ElfBoard開源項目|“智慧教室”開源項目技術(shù)文檔

    “智慧教室”項目的目標是實現(xiàn)實時采集環(huán)境中的溫度、濕度及光照信息,并將這些數(shù)據(jù)可視化地呈現(xiàn)在Qt圖形界面上。用戶既可以選擇手動控制風扇與窗簾的開關(guān),也可以設置系統(tǒng)根據(jù)所采集的環(huán)境參數(shù)自動調(diào)節(jié),以達到舒適的室內(nèi)環(huán)境。接下來,將和各
    的頭像 發(fā)表于 09-11 10:51 ?833次閱讀
    ElfBoard<b class='flag-5'>開源</b><b class='flag-5'>項目</b>|“智慧教室”<b class='flag-5'>開源</b><b class='flag-5'>項目</b>技術(shù)文檔

    8月全志芯片開源項目分享合集

    ,接收機則是連接串口通過SBUS和T113直接連接,收到指令信號后由4路PWM直接給電機控制輸出,以實現(xiàn)自穩(wěn)飛行的功能。 太極派LVGL版USB口袋顯示屏 作者:新范者1986 上一期開源項目
    發(fā)表于 09-02 10:25

    Matepad pro12.2 已上市半個月,但是還沒有在開源網(wǎng)站看到該項目開源信息,違背開源精神

    Matepad pro12.2 已上市半個月,本人自己也購買了同款12+256的pad,想要同步學習下這款pad的一些體驗還不錯的功能點,但是目前為止還沒有在開源網(wǎng)站看到該項目開源信息,也查詢不到
    發(fā)表于 08-27 17:25

    普強信息成功中標“語音智檢項目

    普強在智能語音技術(shù)領域深耕多年,成功中標澳門某銀行“語音智檢項目”,彰顯了普強在智能語音技術(shù)的卓越實力與深厚底蘊。
    的頭像 發(fā)表于 07-25 16:35 ?869次閱讀

    關(guān)于Makefile自動生成-autotools的使用

    的Makefile并非日常任務,但遇見需要構(gòu)建大型軟件項目時,利用工具自動生成Makefile就顯得尤為關(guān)鍵。接下來,我們將重點介紹一款自動化構(gòu)建工具——Autoto
    的頭像 發(fā)表于 07-25 15:50 ?1826次閱讀
    關(guān)于Makefile<b class='flag-5'>自動</b><b class='flag-5'>生成</b>-autotools的使用