一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

微軟研究院推出一種引起因果思考和分析的Python庫:DoWhy

zhKF_jqr_AI ? 來源:未知 ? 作者:李倩 ? 2018-08-27 09:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著計算機系統(tǒng)在各領域(例如醫(yī)療、教育、政府機關)的應用,正確預測并理解這些設備的因果影響是非常重要的。沒有A/B測試,建立在模式識別和相關性分析上的傳統(tǒng)的機器學習方法,是不足以解釋因果推理的。

與用來預測的機器學習庫類似,微軟研究院推出的DoWhy是一種引起因果思考和分析的Python庫,它提供了一個統(tǒng)一的界面進行因果推理,并對許多假設進行自動測試,讓非專業(yè)人士也能進行推理。該成果在最近舉辦的KDD 2018上做出了展示,以下是論智對其進行的大概介紹。

在《告別曲線擬合:因果推斷和do-Calculus簡介》一文中我們講到,因果推斷區(qū)分了人們可能想要估計的兩種條件分布。在機器學習中,我們通常只會估計一種分布,但在某種情況下,我們可能也需要估計第二種。因果推斷關注的是一些基礎問題,它能幫我們回答“如果我們對x做了什么,那……”的問題,而這些問題通常需要對照試驗和明確的干預措施來解決。

幾十年來,社會科學和生物醫(yī)學中,因果推斷方法的使用十分廣泛。隨著計算機在我們的工作和日常生活中所占比例越來越大,因果關系問題在計算機科學中的重要性也不斷增加。為了解決這個廣泛的問題,我們推出了一個新的軟件庫——DoWhy(名稱來源于Judea Pearl的do-calculus)。除了為常見的因果推斷方法提供一個程序設計界面,DoWhy的設計還是為了顯示常被忽略的因果分析假設。所以,DoWhy的特點之一就是會讓潛在的假設更容易理解。另外,DoWhy可以進行敏感度分析和其他魯棒性檢查。我們的目的是讓人們關注他們在對因果推斷做假設時的思考而不是其中的細節(jié)

過去幾年對因果推斷的研究,讓我們產(chǎn)生了創(chuàng)造DoWhy的想法,不論是估計推薦系統(tǒng)的影響,還是預測可能的成果,都對此有所啟發(fā)。在每項研究中,我們總會重復以下步驟:找到正確的辨別策略、設計最合適的估計器、檢查魯棒性,每次都要從頭開始。有時,面對大量有關因果推理的材料,進行實證推理就非常困難。想要理解我們的假設并證明它們,是很有挑戰(zhàn)性的工作。

所以我們思考,能否創(chuàng)建一個軟件庫,通過簡單的界面進行因果推斷。但不幸的是,因果推斷取決于對未知數(shù)量的估計,這也是因果推斷的基本問題。與監(jiān)督學習不同,我們無法從現(xiàn)有的測試集中得出客觀的評估,所以,在因果推斷中無法建立即時可用的方法。例如,對任何方法來說,例如新的算法或醫(yī)療處理過程,人們可以觀察當他們被干預時發(fā)生了什么,或不被干預時會發(fā)生什么,但無法同時觀察兩種情況。所以,因果分析和數(shù)據(jù)生成過程中的假設有著重要的關系。

為了達到我們的目標,我們明白假設應該是因果推斷庫中最重要的因素。我們在設計DoWhy時考慮了兩個指導原則——讓因果假設易于理解,同時測試預測對違反假設的魯棒性。

首先,DoWhy對辨別(identification)和估計(estimation)做了區(qū)分。對因果效應進行標人需要對數(shù)據(jù)生成過程做假設,同時還要從虛擬表示中具體說明目標被估量。估計過程完全是數(shù)據(jù)問題,所以辨別過程是最耗時的。為了正式表示假設,DoWhy利用貝葉斯圖模型框架,從中用戶可以詳細了解他們想知道的東西,更重要的是,知道他們此前不知道的有關數(shù)據(jù)生成過程的事。對于估計,我們提供了基于潛在輸出框架的方法,例如匹配、分層和輔助變量。使用DoWhy時還有一個“愉悅”的副作用,那就是你會發(fā)現(xiàn)看似分散的圖模型和潛在輸出框架其實是互通對等的。

將對因果影響的辨別和估計區(qū)分開

然后,一旦做出了假設,DoWhy會提供魯棒性檢測和敏感性檢查,來檢查估計的可靠性。由于潛在的假設多種多樣,你可以測試估計是如何變化的,例如,通過加入一個新的干擾項或用“安慰劑”進行替換。不論哪種方法,DoWhy庫都會基于圖模型的假設自動檢查得出的估計的有效性。不過我們依然知道自動檢測不完美。所以,DoWhy會著重對輸出進行解讀。在分析的任何階段,你都可以查看未經(jīng)測試的假設、經(jīng)過辨認的被估量以及得出的估計(如果有的話)。

在四行代碼中進行因果推斷。DoWhy的簡單運行

未來,我們期待在庫里增加更多特征,包括支持更多的估計和敏感性的方法,以及與其他可用的估算軟件進行互通。

Jupyter notebook:causalinference.gitlab.io/dowhy/

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 微軟
    +關注

    關注

    4

    文章

    6686

    瀏覽量

    105767
  • 機器學習
    +關注

    關注

    66

    文章

    8503

    瀏覽量

    134619
  • python
    +關注

    關注

    56

    文章

    4827

    瀏覽量

    86753

原文標題:KDD 2018 | 微軟推出用于因果推斷的Python庫——DoWhy

文章出處:【微信號:jqr_AI,微信公眾號:論智】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    勇藝達人工智能研究院迎大咖加盟

    近日,深圳勇藝達總部隆重舉行 “數(shù)智融合 聚賢賦能 —— 勇藝達人工智能研究院高端人才聘任儀式”,正式聘請黃道權先生與吳天準先生加盟,為研究院注入頂尖智慧力量,此舉標志著勇藝達在人工智能領域的戰(zhàn)略布局邁出關鍵步,也是踐行 “人
    的頭像 發(fā)表于 07-10 18:04 ?332次閱讀

    導遠科技與清華大學無錫應用技術研究院達成合作

    近日,導遠科技與清華大學無錫應用技術研究院(以下簡稱:研究院)達成合作。導遠科技將提供高精度定位產(chǎn)品及解決方案,以支持研究院在L4級自動駕駛和人形機器人領域的技術研發(fā)及轉(zhuǎn)化落地。
    的頭像 發(fā)表于 06-12 16:34 ?398次閱讀

    國家管網(wǎng)集團研究院選購我司HS-TH-3500炭黑含量測試儀

    在能源輸送管網(wǎng)建設與維護領域,對材料質(zhì)量的嚴格把控至關重要。國家管網(wǎng)集團研究院直致力于提升管網(wǎng)材料的性能與安全性,在眾多檢測環(huán)節(jié)中,測定管材中炭黑含量是確保材料質(zhì)量的關鍵環(huán)。?國家管網(wǎng)集團
    的頭像 發(fā)表于 03-26 09:15 ?341次閱讀
    國家管網(wǎng)集團<b class='flag-5'>研究院</b>選購我司HS-TH-3500炭黑含量測試儀

    中石化(大連)石油化工研究院有限公司選購我司熱重分析

    中石化(大連)石油化工研究院有限公司作為行業(yè)內(nèi)的重要科研機構,直致力于石油化工領域的技術創(chuàng)新與研發(fā)。在其眾多科研項目推進過程中,熱重分析儀是必不可少的關鍵設備。經(jīng)過多方嚴謹考察與比對,最終選擇了我
    的頭像 發(fā)表于 01-22 15:45 ?361次閱讀
    中石化(大連)石油化工<b class='flag-5'>研究院</b>有限公司選購我司熱重<b class='flag-5'>分析</b>儀

    浪潮信息與智源研究院攜手共建大模型多元算力生態(tài)

    人工智能技術的快速發(fā)展。浪潮信息與智源研究院將充分整合各自在算力、算法和技術創(chuàng)新方面的優(yōu)勢資源,共同探索大模型多元算力的新應用和新模式。 目前,智源研究院的Triton算子FlagGems已正式接入浪潮信息的元腦企智EPAI企
    的頭像 發(fā)表于 12-31 11:49 ?603次閱讀

    安謀科技與智源研究院達成戰(zhàn)略合作,共建開源AI“芯”生態(tài)

    12月25日,安謀科技(中國)有限公司(以下簡稱“安謀科技”)與北京智源人工智能研究院(以下簡稱“智源研究院”)正式簽署戰(zhàn)略合作協(xié)議,雙方將面向多元AI芯片領域開展算子優(yōu)化與適配、編譯器與工具鏈
    發(fā)表于 12-26 17:06 ?415次閱讀
    安謀科技與智源<b class='flag-5'>研究院</b>達成戰(zhàn)略合作,共建開源AI“芯”生態(tài)

    清新電源研究院榮獲深圳市5A級社會組織

    12月18日,2024年度市級社會組織等級評估授牌儀式在深圳市福田區(qū)深科技城順利舉行。深圳市清新電源研究院作為2024年度深圳市5A級社會組織接受授牌。深圳市清新電源研究院黨支部書記、副院長楊洪青
    的頭像 發(fā)表于 12-18 19:37 ?832次閱讀
    清新電源<b class='flag-5'>研究院</b>榮獲深圳市5A級社會組織

    微軟在東京開設日本首個研究基地

    近日,微軟在東京正式啟用了其日本首個研究基地——微軟亞洲研究院東京分院。作為微軟在全球技術實驗室網(wǎng)絡中的最新成員,該基地將專注于人工智能和機
    的頭像 發(fā)表于 11-19 16:26 ?613次閱讀

    天馬與武進南大未來技術創(chuàng)新研究院達成戰(zhàn)略合作

    近日,天馬新型顯示技術研究院(廈門)有限公司、上海天馬微電子有限公司與武進南大未來技術創(chuàng)新研究院就Micro LED業(yè)務、非顯傳感業(yè)務達成戰(zhàn)略合作。
    的頭像 發(fā)表于 11-14 11:53 ?767次閱讀

    一種基于因果路徑的層次圖卷積注意力網(wǎng)絡

    機電系統(tǒng)中的故障檢測對其可維護性和安全性至關重要。然而,系統(tǒng)監(jiān)測變量往往具有復雜的聯(lián)系,很難表征它們的關系并提取有效的特征。本文開發(fā)了一種基于因果路徑的層次圖卷積注意力網(wǎng)絡(HGCAN),以提高復雜
    的頭像 發(fā)表于 11-12 09:52 ?1071次閱讀
    <b class='flag-5'>一種</b>基于<b class='flag-5'>因果</b>路徑的層次圖卷積注意力網(wǎng)絡

    商湯醫(yī)療與上海臨床創(chuàng)新轉(zhuǎn)化研究院簽署戰(zhàn)略合作協(xié)議

    近日, 商湯醫(yī)療與上海臨床創(chuàng)新轉(zhuǎn)化研究院(以下簡稱“臨轉(zhuǎn)院”)簽署戰(zhàn)略合作協(xié)議 。
    的頭像 發(fā)表于 11-07 14:45 ?881次閱讀

    陳天橋雒芊芊腦科學研究院在人工智能領域取得重大突破

    及AutoGPT共同發(fā)起的GAIA(通用人工智能助手)基準測試中榮登榜首。這壯舉超越了包括微軟研究院在內(nèi)的眾多國際頂尖機構的框架,彰顯了TCCI的卓越實力。
    的頭像 發(fā)表于 11-01 11:11 ?958次閱讀

    藍思科技將新增昆山創(chuàng)新研究院,重點服務蘋果

    藍思科技近日宣布,將新增個重點研發(fā)機構,即藍思昆山創(chuàng)新研究院,目前正在緊鑼密鼓地建設中。該研究院的成立,標志著藍思科技在研發(fā)領域的進步拓展和深化。
    的頭像 發(fā)表于 10-28 16:25 ?901次閱讀

    廣東省智能科學與技術研究院選購我司批熱分析儀設備

    HS-TGA-101熱重分析儀、HS-DSC-101A低溫差示掃描量熱儀、HS-DR-5快速導熱系數(shù)測試儀,這舉措不僅展現(xiàn)了研究院對于科研硬件的高要求,更標志著雙方在智能科
    的頭像 發(fā)表于 09-13 09:54 ?496次閱讀
    廣東省智能科學與技術<b class='flag-5'>研究院</b>選購我司<b class='flag-5'>一</b>批熱<b class='flag-5'>分析</b>儀設備

    摩爾線程攜手智源研究院完成基于Triton的大模型算子適配

    近日,摩爾線程與北京智源人工智能研究院(簡稱:智源研究院)已順利完成基于Triton語言的高性能算子FlagGems的適配工作。得益于摩爾線程自研統(tǒng)系統(tǒng)計算架構MUSA,雙方在短短
    的頭像 發(fā)表于 08-02 11:06 ?1434次閱讀