一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

谷歌I/O在音視頻領(lǐng)域中有哪些技術(shù)值得被關(guān)注?

LiveVideoStack ? 來源:LiveVideoStack ? 作者:LiveVideoStack ? 2021-05-26 10:58 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

時(shí)隔兩年Google I/O大會(huì)再次與大家見面。雖然去年的大會(huì)因新冠疫情被迫取消,但技術(shù)的迭代發(fā)展卻未被打斷,反而因疫情的影響促使了技術(shù)的創(chuàng)新變得愈加以人們的需求為首要考量,從而變得更具人性化也更具智能化。

“在重要的時(shí)刻提供幫助”——是此次谷歌 I/O 2021大會(huì)的主題。從充滿人情味的主題開場(chǎng),并圍繞AI視頻聊天、地圖、醫(yī)療診斷、數(shù)據(jù)安全等方面發(fā)布了一系列最新的技術(shù)進(jìn)展。而在音視頻領(lǐng)域中最值得關(guān)注的是:全息視頻聊天技術(shù)——Project Starline,谷歌AI芯片的最新版本——TPU v4,以及基于AI模型的皮膚病問診應(yīng)用程序。

Project Starline 3D視頻聊天新體驗(yàn)

Project Starline 3D視頻聊天互動(dòng) 演示

該項(xiàng)技術(shù)可以說是本次大會(huì)的絕對(duì)黑科技了,使一些無法進(jìn)行線下見面的人們(如:疫情影響)能夠在同一空間中進(jìn)行實(shí)時(shí)的3D互動(dòng)聊天。據(jù)悉,Project Starline利用全息影像技術(shù)打破人們身處不同空間的隔閡,并與傳統(tǒng)的視頻聊天的區(qū)別在于,讓你想見到的人就“坐”在你對(duì)面,感覺像是真的在你身邊一樣。

而為了實(shí)現(xiàn)這一技術(shù),在硬件部分谷歌采用了65英寸的光場(chǎng)顯示器,并配備了定制高分辨率傳感器和數(shù)十個(gè)景深掃描傳感器,從多個(gè)角度捕捉用戶的外貌和動(dòng)作,然后進(jìn)行融合,并在聯(lián)合驅(qū)動(dòng)下生成流暢細(xì)致的實(shí)時(shí)3D模型。由于其所產(chǎn)生的數(shù)據(jù)每秒高達(dá)數(shù)千兆字節(jié),因此,對(duì)于在現(xiàn)有網(wǎng)絡(luò)上發(fā)送如此之大的圖像,谷歌研發(fā)了新的壓縮和流算法,可將數(shù)據(jù)減少100倍以上。

而在軟件部分則是通過在計(jì)算機(jī)視覺機(jī)器學(xué)習(xí)、空間音頻和數(shù)據(jù)壓縮技術(shù)等方面數(shù)年之久的開發(fā),通過硬件與軟件的整合才得以實(shí)現(xiàn)今天的Project Starline。除此之外,突破性的光場(chǎng)系統(tǒng)也是支持這一技術(shù)的亮點(diǎn),讓人們可以免去佩戴眼鏡、耳機(jī)就能體驗(yàn)到逼真的體積和深度感。

目前Project Starline僅在谷歌的幾個(gè)辦公室中被應(yīng)用,由于它依賴于定制的硬件和高度專業(yè)化的設(shè)備,還未在市場(chǎng)中進(jìn)行推廣。

新定制AI芯片TPU v4:性能提升10倍

在谷歌 I/O大會(huì)中還推出了谷歌最新定制的AI芯片——TPU v4。這類定制芯片對(duì)其所要處理的AI任務(wù)有著數(shù)量級(jí)的性能優(yōu)勢(shì),如圖像識(shí)別、語音助手、視頻、視覺計(jì)算處理等。而TPU v4的動(dòng)力來源于v4芯片,其速度是v3(上一個(gè)TPU版本)的兩倍以上。TPU v4:一個(gè)Pods里面有4069個(gè)v4芯片,可以提供每秒 10^18 次浮點(diǎn)運(yùn)算;并提供一個(gè)exaflop以上的容量,相當(dāng)于一千萬臺(tái)筆記本電腦的計(jì)算能力之和,性能比上一代提升了10倍。Sundar Pichai表示:“這是我們部署過的最快的系統(tǒng),對(duì)我們來說是一個(gè)歷史性的里程碑”。而全球超算TOP 500排行榜第一名的日本富岳的最高性能也只有它的一半。

TPU v4芯片托盤

谷歌TPU之所以能夠做到效率提高是在于:它可將看似相互獨(dú)立的數(shù)百塊芯片轉(zhuǎn)為密切互聯(lián)的單個(gè)系統(tǒng)來使用。Sundar Pichai談到:“每塊芯片的互連帶寬是其他網(wǎng)絡(luò)技術(shù)的10倍”。并透露會(huì)在年底對(duì)開發(fā)者開放使用。

另外,TPU v4在提高效率的同時(shí),其數(shù)據(jù)中心也將以90%(或接近)的無碳能源運(yùn)行。

AI“問診”:針對(duì)皮膚病的診斷新功能

本次谷歌 I/O大會(huì)的另一個(gè)亮點(diǎn)便是AI“問診”。這是一個(gè)由AI驅(qū)動(dòng)的皮膚病學(xué)輔助工具的預(yù)覽,能夠幫助人們了解自身皮膚、頭發(fā)和指甲等有關(guān)的問題。并使用很多與CT掃描相同的技術(shù)來檢測(cè)一些眼部疾病或肺癌??赏ㄟ^手機(jī)的攝像頭來識(shí)別皮膚病,如手臂上的皮疹。

其具體工作原理是基于Web應(yīng)用程序,通過上傳拍攝的圖片,利用AI模型來分析圖片中所出現(xiàn)的癥狀信息,從而為用戶提供與之匹配的條件列表。對(duì)于條件列表中的每個(gè)匹配條件,都源自于皮膚科醫(yī)生審核過的信息和常見問題的答案,以及來自網(wǎng)絡(luò)中的類似匹配圖像。

然而,值得注意的是該應(yīng)用程序所得出的匹配結(jié)果并不能作為診斷依據(jù),也不能替代醫(yī)學(xué)建議,因?yàn)樵S多情況還是需要在醫(yī)院中進(jìn)行專業(yè)的檢查。因此,該應(yīng)用的意義在于希望用戶在此訪問到權(quán)威信息,為下一步做出更為明智的決定。

該款應(yīng)用工具已經(jīng)過3年的機(jī)器學(xué)習(xí)研究和產(chǎn)品開發(fā),并發(fā)表了多篇同行評(píng)審的論文,以驗(yàn)證其AI模型。除此之外,谷歌的深度學(xué)習(xí)方法對(duì)皮膚病的評(píng)估還曾發(fā)表于《自然醫(yī)學(xué)》雜志中,并表明其AI系統(tǒng)可以達(dá)到與美國(guó)董事會(huì)認(rèn)證的皮膚科醫(yī)生相同的準(zhǔn)確性。目前,為該款應(yīng)用程序所提供的AI模型已成功通過了臨床認(rèn)證,其應(yīng)用程序在歐盟也獲得了CE標(biāo)記為I類醫(yī)療設(shè)備。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 芯片
    +關(guān)注

    關(guān)注

    460

    文章

    52510

    瀏覽量

    440856
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35147

    瀏覽量

    279834
  • 計(jì)算機(jī)視覺
    +關(guān)注

    關(guān)注

    9

    文章

    1709

    瀏覽量

    46778
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8503

    瀏覽量

    134612
  • TPU
    TPU
    +關(guān)注

    關(guān)注

    0

    文章

    154

    瀏覽量

    21200

原文標(biāo)題:谷歌 I/O 2021 在音視頻領(lǐng)域中有哪些技術(shù)值得被關(guān)注?

文章出處:【微信號(hào):livevideostack,微信公眾號(hào):LiveVideoStack】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    雷曼光電COB超高清顯示屏落地馬欄山音視頻實(shí)驗(yàn)室

    雷曼光電憑借Micro LED領(lǐng)域的深厚技術(shù)積累和雷曼COB超高清顯示產(chǎn)品的卓越性能,為湖南長(zhǎng)沙馬欄山音視頻實(shí)驗(yàn)室打造了核心顯示方案。
    的頭像 發(fā)表于 07-09 17:05 ?349次閱讀

    泰芯半導(dǎo)體推出星閃音視頻無線SOC芯片TXW828

    短距離無線通信技術(shù)加速迭代的浪潮中,珠海泰芯半導(dǎo)體有限公司全球首先發(fā)布支持星閃(NearLink)標(biāo)準(zhǔn)的音視頻無線SOC芯片——TXW828。這款集WiFi/藍(lán)牙BLE/星閃三模融合音視頻
    的頭像 發(fā)表于 06-20 15:51 ?1232次閱讀

    音視頻一體化解決方案

    隨著數(shù)字化轉(zhuǎn)型加速,音視頻技術(shù)各行業(yè)深度應(yīng)用,傳統(tǒng)音視頻分散式管理系統(tǒng)面臨多源異構(gòu)設(shè)備接入困難、數(shù)據(jù)孤島林立、運(yùn)維復(fù)雜、協(xié)作效率低下等挑戰(zhàn),各行業(yè)對(duì)信息
    的頭像 發(fā)表于 04-24 09:14 ?444次閱讀

    實(shí)用調(diào)試技能:全志T113-i 音視頻測(cè)試

    前言:音視頻功能是現(xiàn)代嵌入式系統(tǒng)中的核心應(yīng)用之一,尤其全志T113-i開發(fā)板中,其豐富的音視頻接口為開發(fā)者提供了強(qiáng)大的開發(fā)能力。本篇文章將帶你快速掌握T113-
    的頭像 發(fā)表于 03-06 08:31 ?1516次閱讀
    實(shí)用調(diào)試技能:全志T113-<b class='flag-5'>i</b> <b class='flag-5'>音視頻</b>測(cè)試

    RCA接口音視頻傳輸?shù)脑?/a>

    有多個(gè)孔,每個(gè)孔對(duì)應(yīng)不同的信號(hào)通道。音視頻傳輸中,常見的RCA接口數(shù)量通常為三個(gè),分別用于左聲道音頻、右聲道音頻和視頻信號(hào)的傳輸。這些接口通常通過顏色進(jìn)行區(qū)分,紅色代表右聲道音頻,白色代表左聲道音頻,黃色代表
    的頭像 發(fā)表于 02-17 15:36 ?1256次閱讀

    RK628H:高端音視頻處理與傳輸芯片詳解

    智能家居、高清顯示、專業(yè)音視頻設(shè)備等領(lǐng)域具有廣泛的應(yīng)用前景。 核心特性解析 高清視頻輸入輸出:RK628H支持HDMI2.0輸入,可接收高達(dá)4k@60fps的高清視頻信號(hào)。同時(shí),它還具
    的頭像 發(fā)表于 02-10 17:56 ?1248次閱讀

    商湯科技推出SenseNova-5o,限時(shí)免費(fèi)實(shí)時(shí)音視頻對(duì)話服務(wù)

    商湯科技近日正式推出了其“日日新”融合大模型的交互版本——SenseNova-5o,并宣布即日起對(duì)外提供限時(shí)免費(fèi)的實(shí)時(shí)音視頻對(duì)話服務(wù)。 SenseNova-5o作為商湯科技的最新力作,集成了強(qiáng)大
    的頭像 發(fā)表于 01-20 15:11 ?727次閱讀

    ptp音視頻傳輸中的重要性

    隨著互聯(lián)網(wǎng)技術(shù)的飛速發(fā)展,音視頻傳輸已經(jīng)成為人們?nèi)粘I钪胁豢苫蛉钡囊徊糠?。點(diǎn)對(duì)點(diǎn)(P2P)技術(shù)作為一種分布式網(wǎng)絡(luò)架構(gòu),因其高效、低成本和可擴(kuò)展性等特點(diǎn),
    的頭像 發(fā)表于 12-29 09:42 ?641次閱讀

    國(guó)科微8K超高清芯片獲評(píng)“音視頻領(lǐng)域關(guān)鍵技術(shù)突破一等獎(jiǎng)”

    12月23日,第五屆“馬欄山杯”國(guó)際音視頻算法大賽-2024音視頻領(lǐng)域關(guān)鍵技術(shù)突破獎(jiǎng)揭曉,國(guó)科微8K超高清視頻系列芯片憑借優(yōu)異的產(chǎn)品性能及示
    的頭像 發(fā)表于 12-27 10:29 ?577次閱讀
    國(guó)科微8K超高清芯片獲評(píng)“<b class='flag-5'>音視頻</b><b class='flag-5'>領(lǐng)域</b>關(guān)鍵<b class='flag-5'>技術(shù)</b>突破一等獎(jiǎng)”

    國(guó)科微榮獲音視頻領(lǐng)域關(guān)鍵技術(shù)突破一等獎(jiǎng)

    近日,第五屆“馬欄山杯”國(guó)際音視頻算法大賽-2024音視頻領(lǐng)域關(guān)鍵技術(shù)突破獎(jiǎng)揭曉,國(guó)科微8K超高清視頻系列芯片憑借優(yōu)異的產(chǎn)品性能及示范性應(yīng)用
    的頭像 發(fā)表于 12-26 15:11 ?616次閱讀

    AMS-WE100P無線延長(zhǎng)器:讓高清音視頻傳輸無界限

    追求高效與便捷的今天,高清音視頻的無縫傳輸已成為我們?nèi)粘I詈凸ぷ髦胁豢苫蛉钡囊徊糠?。深圳市程達(dá)科技有限公司憑借其創(chuàng)新技術(shù)和深厚底蘊(yùn),推出了AMS-WE100P無線延長(zhǎng)器,這款設(shè)備以其卓越的性能和廣泛的應(yīng)用場(chǎng)景,正逐步成為高清
    的頭像 發(fā)表于 11-28 10:07 ?587次閱讀

    AMS-HE120系列:4K HDMI音視頻單網(wǎng)線延長(zhǎng)器,引領(lǐng)傳輸技術(shù)新潮流

    ? ? 隨著科技的迅猛發(fā)展和人們生活品質(zhì)的不斷提升,高清音視頻傳輸技術(shù)已經(jīng)成為現(xiàn)代生活和工作中不可或缺的重要組成部分。在教育、商業(yè)、安防、家庭影院等多個(gè)領(lǐng)域,高清、穩(wěn)定、便捷的音視頻
    的頭像 發(fā)表于 11-27 10:11 ?484次閱讀
    AMS-HE120系列:4K HDMI<b class='flag-5'>音視頻</b>單網(wǎng)線延長(zhǎng)器,引領(lǐng)傳輸<b class='flag-5'>技術(shù)</b>新潮流

    AMS-HE200:HDMI音視頻網(wǎng)絡(luò)延長(zhǎng)器,開啟傳輸新時(shí)代

    傳輸領(lǐng)域的領(lǐng)軍企業(yè),憑借其強(qiáng)大的技術(shù)實(shí)力和創(chuàng)新能力,推出了全新的AMS-HE200 HDMI音視頻網(wǎng)絡(luò)延長(zhǎng)器,旨在為用戶帶來更加高效、穩(wěn)定、便捷的傳輸體驗(yàn)。 一、產(chǎn)品亮點(diǎn)? AMS-HE200作為一款高性能的HDMI
    的頭像 發(fā)表于 11-27 10:04 ?617次閱讀
    AMS-HE200:HDMI<b class='flag-5'>音視頻</b>網(wǎng)絡(luò)延長(zhǎng)器,開啟傳輸新時(shí)代

    Amoonsky創(chuàng)新音視頻連接技術(shù):全新推出AMS-HE200 HDMI網(wǎng)線延長(zhǎng)器

    系統(tǒng),也被稱為200M KVM延長(zhǎng)器器,承諾超越傳統(tǒng)限制,為HDMI音視頻信號(hào)提供無縫、可靠且擴(kuò)展的傳輸距離。 從廣闊距離上傳輸高質(zhì)量?jī)?nèi)容到支持多種信號(hào)傳輸模式,AMS-HE200凝聚了尖端技術(shù)的精髓。其無縫橋接設(shè)備的能力憑借
    的頭像 發(fā)表于 10-24 16:09 ?532次閱讀
    Amoonsky創(chuàng)新<b class='flag-5'>音視頻</b>連接<b class='flag-5'>技術(shù)</b>:全新推出AMS-HE200 HDMI網(wǎng)線延長(zhǎng)器

    盤點(diǎn)那些常見音視頻接口

    我們熟知的一些常見音視頻接口,發(fā)展至今日常使用中已經(jīng)漸漸少了。但是工業(yè)領(lǐng)域音視頻連接,依然能看到其身影。這些看似消失的接口,它們現(xiàn)在發(fā)
    的頭像 發(fā)表于 09-09 14:34 ?1229次閱讀