一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

Google最強模型BERT出爐

電子工程師 ? 來源:未知 ? 作者:工程師李察 ? 2018-10-27 10:37 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

經(jīng)過近幾年的發(fā)展,深度學習給自然語言處理帶來了很多新的變化,包括 Word2Vec、ELMO、OpenAI GPT、Glove、Fasttext 等主流模型也在這一端時間內(nèi)涌現(xiàn)。直到最近 Google 發(fā)布的論文“ Pre-training of Deep Bidirectional Transformers for Language Understanding ”中提到的 BERT 模型又刷新了自然語言處理的 11 項記錄。

在不少人看來,BERT 對自然語言處理的研究具有里程碑式的意義,至少在復旦大學計算機科學技術學院副教授邱錫鵬看來:“證明了一個非常深的模型可以顯著提高 NLP 任務的準確率,而這個模型可以從無標記數(shù)據(jù)集中預訓練得到。”

也正是因為如此,深度學習的不可解釋性,在面對某個具體任務時進行遷移學習是十分困難的,相對而言,基于知識圖譜的自然語言理解則是可解釋性的,更加類似于人類思考過程的技術。BERT 的出現(xiàn)或?qū)μ岣咧R圖譜質(zhì)量,并進一步提高自然語言處理的質(zhì)量將非常有幫助。

于是,在以移動互聯(lián)網(wǎng)為基礎高速發(fā)展的背景之下,人們獲取信息并進行傳播的渠道越來越豐富、數(shù)據(jù)量也越來越巨大,如何更好地進行人機語言交互,讓機器既能聽懂又能學會遷移?如智能客服、對話機器人已作為主要落地方式被應用于電商、游戲、金融等場景。

今年7月,思必馳北京研發(fā)院首先提出了啟發(fā)式對話系統(tǒng)的框架,通過話題路徑規(guī)劃和知識點推薦模型,實現(xiàn)信息傳播和目標引導,可以幫助企業(yè)快速構建信息服務對話機器人,并能大幅提升關鍵信息的用戶觸達能力。

此外,自然語言處理還在搜索、推薦、翻譯等文本類場景上有著更為廣泛的落地,放在目前來看,如國外的 Facebook、微軟必應等,國內(nèi)的阿里、今日頭條等不少門戶類公司都有自己相對完備的搜索、推薦系統(tǒng)。

現(xiàn)在,CSDN 就為大家提供了這樣一個機會,讓你能夠聆聽以上公司在自然語言處理方面的最新技術實踐,并有機會與它們的資深技術人員面對面交流。

2018 年 11 月 8-9 日,由中國 IT 社區(qū) CSDN 與硅谷 AI 社區(qū) AICamp 聯(lián)合出品的 2018 AI 開發(fā)者大會(AI NEXTCon)將于北京召開。

本次大會設有“自然語言處理技術專場”,我們很榮幸邀請到在研究和工業(yè)界都極富盛名的一線技術專家們:思必馳北京研發(fā)院院長、公司副總裁 初敏、Facebook語音識別科學家 Baiyang Liu、字節(jié)跳動高級技術總監(jiān)和杰出科學家 Xiaobing Liu、阿里巴巴智能服務事業(yè)部北京團隊負責人 孫健、微軟(亞洲)互聯(lián)網(wǎng)工程院資深應用科學研發(fā)總監(jiān)陳一寧。

下面重磅介紹自然語言處理技術專題的講師團和他們的議題概要:

初敏:思必馳北京研發(fā)院院長、公司副總裁

演講主題:啟發(fā)式對話助力企業(yè)服務智能化

初敏博士畢業(yè)于中科院聲學所,主要研究方向覆蓋語音識別與合成、自然語言處理、機器學習和數(shù)據(jù)挖掘、大數(shù)據(jù)處理和計算等,在相關領域發(fā)表了近百篇學術論文并取得30多項國內(nèi)外專利。

2000年,初敏博士加入微軟亞洲研究院,從事科學研究近10年,創(chuàng)建并領導語音合成研究小組,研制出了第一個中英文雙語語音合成系統(tǒng)“木蘭”;2009年入職阿里云,承擔過各種大數(shù)據(jù)應用項目。從2014開始,組建阿里iDST智能語音交互團隊,在短短兩年時間,完成語音交互全鏈路技術的研發(fā)和應用落地,他們的技術在淘寶客服、支付寶客服、Yun OS、手機支付寶、手機淘寶、釘釘?shù)犬a(chǎn)品廣泛應用;2017年加入思必馳,擔任思必馳公司副總裁,組建思必馳北京研發(fā)院并擔任院長,負責語音合成、自然語言處理等核心技術的研發(fā),以及智能語音交互技術在企業(yè)服務智能化等新場景的產(chǎn)品研發(fā)和業(yè)務拓展。

Baiyang Liu:Facebook語音識別科學家

演講議題:自然語言理解在Facebook的應用與實踐

Baiyang Liu是Facebook語音識別研究科學家。自2015年初以來,他一直致力于建立眾多支持Facebook AI產(chǎn)品的話語理解和對話系統(tǒng)。在此之前,Baiyang是亞馬遜語音識別系統(tǒng)的早期機器學習工程師之一。他獲得計算機科學博士學位,主攻計算機視覺領域。

Xiaobing Liu:字節(jié)跳動高級技術總監(jiān)和杰出科學家

演講議題:大規(guī)模深度學習和序列模型的研究及應用

Xiaobing Liu,自2014年起擔任Google Brain Staff軟件工程師和機器學習研究員。工作中,他專注于TensorFlow以及一些可以應用深度學習來改進Google產(chǎn)品的關鍵應用,如Google Ads、Google Play推薦、Google翻譯、醫(yī)學大腦等。他的研究興趣從系統(tǒng)到應用機器學習如ASR、機器翻譯、醫(yī)學HER建模、推薦建模。他的研究成果已成功應用于雅虎、騰訊、Google的各類商業(yè)產(chǎn)品。他曾擔任2017年ACL計劃委員會和2017年AAAI會議主席,負責包括一些頂級會議的部分出版物。

孫 ?。喊⒗锇桶椭悄芊帐聵I(yè)部北京團隊負責人

演講議題:關于人機對話交互的反思、實踐和未來展望

孫健,阿里巴巴智能服務事業(yè)部北京團隊負責人。他主導的自然語言處理基礎平臺有力支撐和服務了淘寶搜索、阿里媽媽廣告等核心業(yè)務,主導了阿里巴巴自然交互平臺(Natural User Interface, NUI)的設計開發(fā),NUI平臺廣泛應用于天貓魔盒、互聯(lián)網(wǎng)汽車等各種設備中。目前他正帶領團隊打造面向全行業(yè)的企業(yè)智能服務對話機器人(云小蜜),從而讓每一家企業(yè)/組織能夠及時響應用戶的需求,與用戶進行7*24的自然交互。

陳一寧:微軟(亞洲)互聯(lián)網(wǎng)工程院資深應用科學研發(fā)總監(jiān)

演講議題:搜索中的自然語言先驗知識

陳一寧是清華大學博士,主要研發(fā)方向涵蓋語音識別與合成、自然語言處理、人工智能、大數(shù)據(jù)等方向,并在相關領域發(fā)表多篇論文并取得多項專利。2004年,陳一寧博士加入微軟亞洲研究院,從事語音合成方面的研究。2009年加入阿里巴巴,負責多項算法工作,是神馬搜索的共同創(chuàng)始人,并曾負責iDST智能語音方向的商業(yè)化。2017年加入微軟互聯(lián)網(wǎng)工程院,從事自然語言處理相關的研發(fā)工作。

除了語音技術專題之外,我們還為大家準備了“語音技術”、“機器學習工具”、“數(shù)據(jù)分析”、“機器學習”、“計算機視覺”、“知識圖譜”等技術專題,以及“智慧金融”、“智能駕駛”、“智慧醫(yī)療”等行業(yè)峰會。大會完整日程以及嘉賓議題請查看下方海報。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • Google
    +關注

    關注

    5

    文章

    1789

    瀏覽量

    59047
  • AI
    AI
    +關注

    關注

    88

    文章

    35164

    瀏覽量

    279991
  • 深度學習
    +關注

    關注

    73

    文章

    5561

    瀏覽量

    122796
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    Google Fast Pair服務簡介

    Google Fast Pair 是一項利用低功耗藍牙(Bluetooth LE)技術,實現(xiàn)設備間快速安全配對及提供多種服務的協(xié)議。其主要功能包括: 設備處于配對模式時,顯示半頁通知,便于用戶進行
    發(fā)表于 06-29 19:28

    2025 Google I/O大會演講亮點回顧

    在今年的 Google I/O 大會上,我們展示了如何在 Google 的各個平臺進行應用構建,并利用 Google DeepMind 的卓越 AI 模型實現(xiàn)創(chuàng)新,大展拳腳。以下是開發(fā)
    的頭像 發(fā)表于 05-28 09:34 ?396次閱讀

    Gemini API集成Google圖像生成模型Imagen 3

    開發(fā)者現(xiàn)在可以通過 Gemini API 訪問 Google 最先進的圖像生成模型 Imagen 3。該模型最初僅對付費用戶開放,不久后也將面向免費用戶推出。
    的頭像 發(fā)表于 05-14 16:53 ?443次閱讀

    亞馬遜功能最強模型Amazon Nova Premier現(xiàn)已正式可用

    是目前亞馬遜功能最強大的模型,適用于處理復雜任務,并可作為教師模型來蒸餾定制模型。 作為現(xiàn)有Amazon Nova理解模型家族的新成員,Am
    的頭像 發(fā)表于 05-09 18:18 ?185次閱讀
    亞馬遜功能<b class='flag-5'>最強</b><b class='flag-5'>模型</b>Amazon Nova Premier現(xiàn)已正式可用

    低至¥2.27/h!就能使用全球最強開元模型——千問 QwQ-32B

    ABSTRACT摘要捷智算平臺上新全球最強開元模型——千問QwQ-32B。JAEALOT2025年3月18日3月17日,阿里通義千問發(fā)布的最新開源推理模型QwQ-32B,在國際權威測評榜
    的頭像 發(fā)表于 03-19 12:34 ?538次閱讀
    低至¥2.27/h!就能使用全球<b class='flag-5'>最強</b>開元<b class='flag-5'>模型</b>——千問 QwQ-32B

    Google發(fā)布最新AI模型Gemma 3

    Gemma 開放模型系列是 Google 推動實用 AI 技術普惠大眾的重要基石。上個月,Gemma 迎來了首個生日?;赝^去一年,其成果斐然:全球下載量突破 1 億,社區(qū)欣欣向榮,衍生模型超過 6 萬個1。Gemma 生態(tài)的蓬
    的頭像 發(fā)表于 03-18 09:51 ?853次閱讀

    如何開發(fā)一款Google Find My Tag?

    My 網(wǎng)絡的配件(如 AirTag)。通過結合 GPS、藍牙和眾包網(wǎng)絡,F(xiàn)ind My 提供了高精度的定位功能,同時保護用戶隱私 Google Find My網(wǎng)絡同樣也是由數(shù)億臺運行較新版本
    發(fā)表于 03-05 17:39

    中科馭數(shù)DPU助力大模型訓練和推理

    隨著深度學習技術的快速發(fā)展,大模型(如GPT、BERT等)在自然語言處理、計算機視覺等領域取得了顯著成果。然而,大模型的參數(shù)量和計算量極其龐大,傳統(tǒng)的硬件架構或者單臺設備(如單個GPU)難以滿足其計算需求。
    的頭像 發(fā)表于 02-19 09:48 ?695次閱讀
    中科馭數(shù)DPU助力大<b class='flag-5'>模型</b>訓練和推理

    Google兩款先進生成式AI模型登陸Vertex AI平臺

    新的 AI 模型,包括最先進的視頻生成模型Veo以及最高品質(zhì)的圖像生成模型Imagen 3。近日,我們在 Google Cloud 上進一步推動這一勢頭,客戶可以在Vertex AI平
    的頭像 發(fā)表于 12-30 09:56 ?623次閱讀

    【「大模型啟示錄」閱讀體驗】如何在客服領域應用大模型

    訓練模型BERT、GPT等。這些模型在理解自然語言、生成文本、處理對話等方面具有不同的能力。因此,在選擇模型時,需要了解每個模型的特點和優(yōu)
    發(fā)表于 12-17 16:53

    Google Cloud如何守護大模型安全

    模型就像神通廣大的 "哪吒",能寫文章、畫畫、編程,無所不能。但如果哪吒被惡意操控,后果不堪設想!而且,培養(yǎng)這樣的大模型需要大量投入,如果被 "黑化",損失也是巨大的。
    的頭像 發(fā)表于 11-15 13:36 ?796次閱讀
    <b class='flag-5'>Google</b> Cloud如何守護大<b class='flag-5'>模型</b>安全

    Google AI Edge Torch的特性詳解

    我們很高興地發(fā)布 Google AI Edge Torch,可將 PyTorch 編寫的模型直接轉(zhuǎn)換成 TFLite 格式 (.tflite),且有著優(yōu)異的模型覆蓋率和 CPU 性能。TFLite
    的頭像 發(fā)表于 11-06 10:48 ?945次閱讀
    <b class='flag-5'>Google</b> AI Edge Torch的特性詳解

    Google Gemma 2模型的部署和Fine-Tune演示

    Google 近期發(fā)布了最新開放模型 Gemma 2,目前與同等規(guī)模的開放模型相比,取得了明顯的優(yōu)勢,同時在安全可控性上得到了顯著的增強。
    的頭像 發(fā)表于 08-09 17:04 ?1311次閱讀
    <b class='flag-5'>Google</b> Gemma 2<b class='flag-5'>模型</b>的部署和Fine-Tune演示

    AWG和BERT常見問題解答

    隨著信號的速率越來越高,調(diào)制格式越來越復雜,對測試儀器的性能要求也越來越高。是德科技也一直在推出業(yè)界領先的高帶寬、高采樣率的AWG和高性能的BERT
    的頭像 發(fā)表于 08-06 17:27 ?1279次閱讀

    Meta Llama 3.1系列模型可在Google Cloud上使用

    我們很高興宣布,Llama 3.1 系列模型已添加到 Vertex AI Model Garden,這包括全新的 405B,即 Meta 迄今為止功能最強大、用途最廣泛的模型。這些模型
    的頭像 發(fā)表于 08-02 15:42 ?739次閱讀