<sup id="k62se"></sup>
<xmp id="k62se"><option id="k62se"></option>
<object id="k62se"><tr id="k62se"></tr></object><rt id="k62se"><wbr id="k62se"></wbr></rt>
<tt id="k62se"></tt>
<bdo id="k62se"><label id="k62se"></label></bdo>
  • <menu id="k62se"><sup id="k62se"></sup></menu>
    您正在使用IE低版瀏覽器,為了您的雷鋒網賬號安全和更好的產品體驗,強烈建議使用更快更安全的瀏覽器
    人工智能 正文
    發私信給黃善清
    發送

    0

    如何高效驗證深度神經網絡的學習行為?看看 Facebook 是怎么做的

    本文作者:黃善清 2019-03-12 14:07
    導語:能夠比當前 state-of-the-art 程序更快識別應用安全水平的最新技術。

    雷鋒網 AI 科技評論按:Facebook AI 昨日推薦了一款能夠比當前 state-of-the-art 程序更快識別應用安全水平的最新技術。過去我們從計算機視覺、強化學習以及語音識別等領域發掘了深度學習的巨大潛力,然而對于一些安全性要求較高的應用(如自動駕駛)來說,在模型得到有效驗證以前,并無法真正受惠。Facebook提供的新方法適用于深度學習,能夠對無法確定輸出結果的輸入內容進行有效驗證,從而杜絕不當決策的產生。雷鋒網 AI 科技評論將該開源文章編譯如下。

    如何高效驗證深度神經網絡的學習行為?看看 Facebook 是怎么做的

    在具體操作上,我們先利用分段線性(這里使用的是 ReLU )激活的結構來構建一組可能輸出的 convex overapproximation 。該 overapproximation 可通過線性編程(LP)求解器獲得,且能讓我們迅速判斷輸出是否所需。為了避免操作趨于保守,我們會將輸入集重復劃分為更小的子集以及對應較小的 convex overapproximations ,從而細化 overapproximation。

    對于這種“劃分-處理”類型的操作程序,輸入集分區的生成方式選擇將對驗證問題的時間長短產生重大的影響。現有的技術主要通過遞歸的方式將輸入集劃分為較小的子集,以確認一組輸入的安全性。而我們的技術則使用 LP 的最優原和雙變量(在 convex overapproximation 過程中生成)來計算靈敏度的度量(所謂的影子價格),因此得以估計新的分區將如何影響隨后的overapproximations,從而減少分裂的數量。最后的結果是,我們擁有一個能以快速且資源有效方式來驗證深度神經網絡的算法,有效減少了計算所需的時間。

    如何高效驗證深度神經網絡的學習行為?看看 Facebook 是怎么做的

    通過更有效的算法將輸入集劃分為更小的子集。 在這種情況下,來自初始集的輸入不會產生歸屬危險集的輸出(由感嘆號表示)。

    總的來說,該結果為我們當下各種機器學習應用(包括視覺與控制)的驗證方法改進提供了一條全新思路。如何高效、可靠地對深度神經網絡的學習行為進行驗證,是將這些技術集成到對安全要求較高的領域的重要一步。我們的未來工作將集中在如何將驗證能力擴展至更常見的神經網絡以及具備任意拓撲的輸入集。

    論文鏈接:

    https://l.facebook.com/l.php?u=https%3A%2F%2Farxiv.org%2Fabs%2F1902.07247&h=AT19u-xX03Ad5gQjrdBK0CFYk9UtXTeUSlm1oyigm1L3jnyxMuwv3AYszT3NgXoKV84Y8Rn7TvFbHSqpcIHqaaXEaYcsAV7-lCPajQHC5FUpxFFdjC2Yl12oCN-GNyRKZmKa6ccHQf5ewLZLaYv146sum0G7v1gF6P7l2kVR

    via https://ai.facebook.com/blog/faster-more-efficient-neural-network-verification/

    雷鋒網(公眾號:雷鋒網) AI 科技評論

    雷鋒網原創文章,未經授權禁止轉載。詳情見轉載須知

    分享:
    相關文章

    文章點評:

    表情
    最新文章
    請填寫申請人資料
    姓名
    電話
    郵箱
    微信號
    作品鏈接
    個人簡介
    為了您的賬戶安全,請驗證郵箱
    您的郵箱還未驗證,完成可獲20積分喲!
    請驗證您的郵箱
    立即驗證
    完善賬號信息
    您的賬號已經綁定,現在您可以設置密碼以方便用郵箱登錄
    立即設置 以后再說
    江苏11选5投注