国产chinesehdxxxx老太婆,办公室玩弄爆乳女秘hd,扒开腿狂躁女人爽出白浆 ,丁香婷婷激情俺也去俺来也,ww国产内射精品后入国产

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

VtWH_馭勢未 ? 來源:djl ? 2019-09-19 11:02 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

給定目標硬件,如何確定最優(yōu)的速度-精度折衷邊界?換言之:給定推斷延時的限制,模型能達到的最高精度是多少?給定精度要求,模型所需的最短延時是多少?

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

為此,馭勢科技AI研究院聯(lián)合新加坡國立大學提出了偏序關系剪枝(Partial Order Pruning)方法,直接考慮模型在目標硬件上的延時,利用偏序關系假設對搜索空間進行剪枝,平衡模型的寬度與深度,以提高速度-精度折衷的邊界。應用該方法所得的東風(DF)骨干網(wǎng)絡,取得了目標硬件(TX2)上的最優(yōu)速度-精度折衷。應用該方法于語義分割網(wǎng)絡Decoder的結構搜索,所得的東風分割網(wǎng)絡(DF-Seg)也取得了TX2/1080Ti上最優(yōu)的速度-精度折衷。

在實際運用當中,具備多重實用價值,主要體現(xiàn)在以下幾個方面:

(一)DF/DF-Seg網(wǎng)絡的實用價值

(1)DF網(wǎng)絡取得了目標硬件(TX2)上最優(yōu)的速度-精度折衷。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(2)DF網(wǎng)絡節(jié)約顯存。以DF2A網(wǎng)絡為例,其精度介于ResNet50/101之間,而僅需1/3至1/2的顯存(以BVLC Caffe測試)。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(3)DF網(wǎng)絡結構簡單,僅使用基本的殘差模塊,相當于更“精耕細作”的ResNet。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(4)DF-Seg網(wǎng)絡是TX2/1080Ti/Titan X(Maxwell)上速度-精度折衷最好的分割網(wǎng)絡。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

省時間、省顯存、結構簡單,使得DF/DF-Seg網(wǎng)絡有助于在嵌入式設備TX2上部署高精度、低延時、多路圖像并行處理的CNN模型;有助于高端GPU上的視頻處理、大規(guī)模圖像數(shù)據(jù)處理等任務的部署;有助于科研人員,尤其是計算資源不足的科研人員,節(jié)省計算資源,實現(xiàn)更復雜的算法。

(二)偏序關系剪枝算法的實用價值

DF網(wǎng)絡更適合GPU平臺,我們也利用偏序關系剪枝算法,在驍龍845 CPU平臺上進行了骨干網(wǎng)絡結構與分割網(wǎng)絡Decoder結構的搜索,所得語義分割網(wǎng)絡得到了目前CPU平臺上最好速度-精度折衷。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

以下為該論文內(nèi)容翻譯:

一、偏序關系剪枝算法

(一)搜索空間設計與模型結構編碼

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

圖2(a)為本文的模型搜索空間,圖2(b)為本文使用的殘差模塊結構。網(wǎng)絡由6個Stage構成,Stage1~5均通過設步長為2降低輸入特征的分辨率,Stage6通過全局池化與全連接層產(chǎn)生分類結果。本文的模型搜索不搜索基本模塊的結構,而是在基本殘差模塊的基礎上,對網(wǎng)絡整體的寬度與深度進行平衡。在Stage3~5,模型分別包含L/M/N個殘差模塊,Stage s中的第i個殘差模塊的寬度記為,因此本文將一個結構表示為:

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(二)模型延時估計與子搜索空間

圖2(a)所表達的搜索空間記為s,實踐中我們僅關心延時在中的子集,即。為估計各網(wǎng)絡的延時,我們使用TensorRT提供的性能分析工具,在目標硬件TX2上,測量了不同的殘差模塊所需的延時,并建立一個查找表

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

。這里,分別是輸入輸出特征的通道數(shù),而

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

是相應的空間尺寸。利用該查找表將各殘差模塊延時進行加和記為對一個網(wǎng)絡延時的估計。在圖3(a)中,我們對若干網(wǎng)絡的估計延時與實際延時進行了比較,可見估計延時與實際延時基本一致。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(三)偏序關系假設

我們借用集合論中的偏序(Partial Order)關系來描述模型結構之間的聯(lián)系:集合中的元素為不同的模型結構(見圖2(a)),集合中的二元關系定義為:若x比y更淺且更窄,則稱x是y的前序,記為。如此,整個搜索空間中的模型結構就滿足了嚴格偏序關系,包括反自反性、反對稱行、傳遞性。圖4給出了若干模型結構間偏序關系的示意圖。偏序關系假設為:若x是y的前序(意味著x比y更淺且更窄),則x的速度更快,精度更低。這可以寫為:

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

在圖3(b)中,我們基于已訓練的模型,對偏序關系假設的合理性進行了驗證,其中,

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

。可見,在本實驗所關心的模型子空間中,偏序關系假設是合理的。

(四)偏序關系剪枝

基于偏序關系假設,我們可以在模型搜索中對搜索空間進行剪枝。圖5是該剪枝過程的一個示意圖。集合為已訓練的模型結構,集合中的模型代表了當前迭代中所能達到的最優(yōu)速度-精度折衷邊界。對于一個非邊界模型

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

,其任意前序模型

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

,應有:

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

而我們已有速度-精度折衷更好的邊界點:

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

因此w的部分前序元素,延時將比高,而精度將比低,也即處于圖5的陰影部分。這些中的模型結構無法提供更好的速度-精度折衷,可以據(jù)此對搜索空間進行剪枝:。如此反復迭代,在迭代中不斷對搜索空間進行剪枝,直至速度-精度折衷的邊界趨于穩(wěn)定,如算法1所描述。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(五)語義分割網(wǎng)絡的Decoder設計

本文中語義分割網(wǎng)絡的結構設計如圖6所示,在Stage 5中加入了pyramid pooling module,使用圖6(b)所示的Fusion node融合不同分辨率的特征,其中Channel Controller(CC)為1x1卷積,用以控制Decoder在不同分辨率下的寬度。不同的,構成了不同復雜度的Decoder結構。這些Decoder結構之間也存在著偏序關系假設,因此也可以使用偏序關系剪枝算法對搜索空間進行剪枝。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

二、實驗數(shù)據(jù)

(一)TX2上的骨干網(wǎng)絡搜索

我們在TX2上進行骨干網(wǎng)絡的搜索,最終選取3個最有代表性的網(wǎng)絡,記為3個東風(DF)骨干網(wǎng)絡。如圖7與表1所示,DF網(wǎng)絡取得了TX2上最好的速度-精度折衷。

DF1網(wǎng)絡FLOPs明顯高于MobileNet于ShuffleNet等,但在TX2上實際延時更低。這是因為FLOPs作為間接指標,僅考慮了浮點計算量而沒有考慮內(nèi)存訪問的延時。以ShuffleNetV2與DF1為例,其內(nèi)存訪問代價(也即中間層的特征),分別為4.9M與2.9M。

NASNet與PNASNet在網(wǎng)絡結構搜索中均未考慮模型延時,所得模型結構復雜,內(nèi)存訪問量大,實際延時較高。有一些同期工作(ProxylessNAS/FBNet)也在模型搜索中考慮了模型延時,DF網(wǎng)絡在速度-精度折衷上也優(yōu)于這些模型。這是因為:一、這些模型未針對TX2平臺進行模型搜索;二、這些網(wǎng)絡均基于MobileNetV2的inverted bottleneck模塊,相比本文使用的殘差模塊,內(nèi)存訪問量更高。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

(二)TX2/1080Ti上的Decoder網(wǎng)絡結構搜索

基于TX2上搜索的東風骨干網(wǎng)絡,我們也在TX2/1080Ti上分別進行了Decoder結構搜索。如表3所示,東風分割網(wǎng)絡(DF-Seg)是目前1080Ti上速度-精度折衷最好的語義分割網(wǎng)絡。DF-Seg網(wǎng)絡的速度(FPS)與精度(mIoU)均在1024x2048的分辨率下,使用TensorRT提供的性能分析工具在1080Ti上進行測試。為與ICNet公平對比,在FPS(Caffe)欄中使用“Caffe Time”工具,在Titan X(Maxwell)上進行速度測試。表4與表5分別為Titan X(Maxwell)/TX2上的速度測試,DF-Seg的速度大幅優(yōu)于現(xiàn)有結果,能夠在TX2上實現(xiàn)對720P分辨率圖像的30FPS的語義分割。

回顧馭勢聯(lián)合新加坡國立大學推出東風網(wǎng)絡的理解

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4710

    瀏覽量

    95409
  • 網(wǎng)絡
    +關注

    關注

    14

    文章

    7815

    瀏覽量

    90974
  • 結構
    +關注

    關注

    1

    文章

    119

    瀏覽量

    21996
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    光庭信息受邀出席新加坡AI產(chǎn)學研論壇

    7月11日,“AI驅動網(wǎng)絡安全:產(chǎn)學研論壇”將在新加坡舉辦。本次活動由大陸汽車新加坡公司與IEEE電路與系統(tǒng)學會聯(lián)合主辦,并得到新加坡
    的頭像 發(fā)表于 07-10 16:49 ?277次閱讀

    意法半導體Lab-in-Fab廠內(nèi)實驗室進入新階段

    ????????新一期廠內(nèi)實驗室合作項目包括與新加坡科技研究局屬下材料研究與工程研究所(A*STAR IMRE)以及新加坡國立大學(NUS)的合作項目 ?此為新加坡半導體行業(yè)迄今為止最
    的頭像 發(fā)表于 06-03 10:28 ?638次閱讀

    首款概念跑車亮相2025上海車展

    2025上海國際車展,騰首款概念跑車——騰Z震撼全球首秀,采用Pure Emotion“心流形·本真之境”全新設計理念,并將搭載中國首款全棧自研的線控轉向系統(tǒng)、云輦-M、全線控底盤、易三方等
    的頭像 發(fā)表于 04-25 16:22 ?318次閱讀

    黑芝麻智能聯(lián)合東風汽車、均聯(lián)智行實現(xiàn)艙駕一體方案量產(chǎn)突破,東風多款車型搭載C1296芯片

    有限公司(以下簡稱“均聯(lián)智行”)共同宣布,三方聯(lián)合開發(fā)的艙駕一體化方案正式進入量產(chǎn)階段?;诤谥ヂ橹悄芪洚擟1296芯片打造的該方案,將率先搭載于東風汽車旗下多款新車型,計劃于2025年底達到量產(chǎn)狀態(tài)。 黑芝麻智能、東風汽車、均
    的頭像 發(fā)表于 04-24 10:40 ?270次閱讀
    黑芝麻智能<b class='flag-5'>聯(lián)合</b><b class='flag-5'>東風</b>汽車、均聯(lián)智行實現(xiàn)艙駕一體方案量產(chǎn)突破,<b class='flag-5'>東風</b>多款車型搭載C1296芯片

    反電動到底如何來理解?(可下載)

    電機中的反電動是如何產(chǎn)生的呢?要了解這個問題,我們需要回顧一下高中時學過的電磁學知識,在電磁學中我們學到過感應電動,感應電動又分為動生電動
    發(fā)表于 03-04 14:25 ?1次下載

    東風日產(chǎn)聯(lián)合Momenta打造全場景高階智駕

    近日, “NI好——東風日產(chǎn)最家技術發(fā)布會”在廣州長隆舉行。作為東風日產(chǎn)新能源技術首秀,本次發(fā)布會以“最家”為主題,集中展示東風日產(chǎn)新能源轉型的創(chuàng)新成果。
    的頭像 發(fā)表于 03-04 10:22 ?653次閱讀
    <b class='flag-5'>東風</b>日產(chǎn)<b class='flag-5'>聯(lián)合</b>Momenta打造全場景高階智駕

    新加坡云服務器網(wǎng)絡中斷的常見原因有哪些

    新加坡云服務器網(wǎng)絡中斷的常見原因包括以下幾方面: 硬件故障,網(wǎng)絡設備故障:數(shù)據(jù)中心內(nèi)部的路由器、交換機等網(wǎng)絡設備出現(xiàn)故障,會導致云服務器無法正常連接
    的頭像 發(fā)表于 01-13 17:03 ?604次閱讀

    清華大學深圳國際研究生院、新加坡國立大學:研發(fā)新型的超材料生物傳感器件最新設計制備

    研究背景 隨著交通運輸?shù)目焖侔l(fā)展和汽車數(shù)量的激增,交通安全問題日益受到關注。根據(jù)統(tǒng)計數(shù)據(jù),人類因素如嗜睡、疲勞等每年導致美國約10萬起交通事故,嚴重影響了公眾的生命安全和社會穩(wěn)定。因此,研究如何提高駕駛安全性,尤其是通過監(jiān)測駕駛員的生理狀態(tài),成為了一個重要的研究領域。在這一背景下,生物傳感器技術作為一種新興的監(jiān)測手段,引起了科學家的廣泛關注。 生物傳感器是能夠檢測生物標志物并提供實時反饋的設備,主要用于監(jiān)
    的頭像 發(fā)表于 01-02 18:14 ?735次閱讀
    清華<b class='flag-5'>大學</b>深圳國際研究生院、<b class='flag-5'>新加坡</b><b class='flag-5'>國立大學</b>:研發(fā)新型的超材料生物傳感器件最新設計制備

    東風日產(chǎn)與Momenta合作推出高階智駕方案

    日前,東風日產(chǎn)官宣攜手全球領先的自動駕駛公司Momenta,聯(lián)合打造基于端到端智駕大模型的行業(yè)領先高階智駕方案。東風日產(chǎn)與Momenta的合作,是東風日產(chǎn)智能化轉型的關鍵一步,標志其正
    的頭像 發(fā)表于 11-22 16:56 ?1262次閱讀

    新加坡到深圳:南洋理工大學(NTU)與VoiceAI的深度對話

    近日,來自新加坡南洋理工大學的數(shù)十名師生到訪聲揚科技深圳總部,與聲揚科技“硬核科研團”展開深度交流。公司聯(lián)合創(chuàng)始人、總經(jīng)理張偉彬博士出席交流會,與新加坡南洋理工
    的頭像 發(fā)表于 11-13 14:29 ?934次閱讀
    從<b class='flag-5'>新加坡</b>到深圳:南洋理工<b class='flag-5'>大學</b>(NTU)與VoiceAI的深度對話

    【廈門同昌源】受邀參加中國-新加坡健康電子先進材料雙邊論壇(S3AM-2024)

    (IMRE)執(zhí)行院長羅賢俊院士、廈門大學柔性電子(未來技術)研究院(廈大IFE)常務副院長霍峰蔚教授、新加坡國立大學劉小鋼院士擔任大會主席。廈門同昌源電子受邀參加本次
    的頭像 發(fā)表于 11-12 01:06 ?662次閱讀
    【廈門同昌源】受邀參加中國-<b class='flag-5'>新加坡</b>健康電子先進材料雙邊論壇(S3AM-2024)

    Commvault與Pure Storage聯(lián)合推出網(wǎng)絡就緒解決方案

    混合云網(wǎng)絡彈性和數(shù)據(jù)保護解決方案的領先提供商Commvault(納斯達克代碼:CVLT)宣布與Pure Storage聯(lián)合推出一項網(wǎng)絡就緒解決方案。該解決方案能夠在幫助企業(yè)遵守不斷變化的嚴格法規(guī)方面發(fā)揮關鍵作用。
    的頭像 發(fā)表于 10-15 09:16 ?869次閱讀

    比亞迪騰D9登陸新加坡,正式進軍右舵國家市場

    10月11日最新消息,比亞迪騰汽車于昨日在新加坡市場正式亮相,標志著其正式進軍右舵駕駛國家。   昨日,右舵版騰D9在新加坡正式發(fā)布,其售價區(qū)間為296,888新元至341,
    的頭像 發(fā)表于 10-11 17:07 ?1305次閱讀

    中科數(shù)受邀出席中國科學院大學校友論壇

    近日,第五屆中國科學院大學校友創(chuàng)新論壇正式舉行,本次論壇聚焦科技前沿領域,旨在搭建高端對話平臺,促進產(chǎn)學研深度融合。在大算力時代——AI技術前沿沙龍上,中科數(shù)高級副總裁、CTO盧文巖博士受邀
    的頭像 發(fā)表于 09-29 09:45 ?658次閱讀

    中科數(shù)分析DPU在云原生網(wǎng)絡與智算網(wǎng)絡中的實際應用

    CCF Chip 2024,精彩不能停!7月21日下午,中科數(shù)在第二屆中國計算機學會(CCF)芯片大會的“數(shù)專屬時刻”仍在繼續(xù),數(shù)組織承辦“DPU技術趨勢和應用——DPU在云原生與智算網(wǎng)
    的頭像 發(fā)表于 08-02 11:21 ?1171次閱讀