二維碼
        企資網(wǎng)

        掃一掃關(guān)注

        當(dāng)前位置: 首頁 » 企資快訊 » 匯總 » 正文

        字節(jié)跳動開源最新 GAN 壓縮算法,算力消耗可

        放大字體  縮小字體 發(fā)布日期:2021-08-30 11:27:35    作者:史舒文    瀏覽次數(shù):58
        導(dǎo)讀

        8月27日消息,字節(jié)跳動近期開源了一項(xiàng)代號為OMGD的壓縮技術(shù)。這是字節(jié)自研的GAN(生成對抗網(wǎng)絡(luò))壓縮算法,在保證生成效果不變的前提下,算力消耗最低可以減少到原來的1/46,相比之前業(yè)界的最佳壓縮效果提升一倍多。

        8月27日消息,字節(jié)跳動近期開源了一項(xiàng)代號為OMGD的壓縮技術(shù)。這是字節(jié)自研的GAN(生成對抗網(wǎng)絡(luò))壓縮算法,在保證生成效果不變的前提下,算力消耗最低可以減少到原來的1/46,相比之前業(yè)界的最佳壓縮效果提升一倍多。據(jù)悉,這項(xiàng)技術(shù)的論文已入選國際計(jì)算機(jī)視覺會議ICCV 2021。

        圖_字節(jié)跳動技術(shù)團(tuán)隊(duì)發(fā)表的自研GAN壓縮算法論文

        GAN是人工智能領(lǐng)域重要的深度學(xué)習(xí)模型,在圖像生成、音樂生成和視頻生成等方面應(yīng)用廣泛,還可以提高圖像質(zhì)量,實(shí)現(xiàn)圖像風(fēng)格化、圖像著色等任務(wù)。漫畫特效等人們常用的短視頻道具,就是通過GAN實(shí)現(xiàn)的。

        由于GAN對計(jì)算資源和存儲空間的需求巨大,模型難以直接部署到手機(jī)、Pad等移動設(shè)備上,業(yè)界一直在努力改進(jìn)GAN的壓縮方法。2021年,麻省理工學(xué)院、Adobe和上海交通大學(xué)的研究者們提出一種GAN壓縮算法,將算力消耗成功減少到1/21。此次字節(jié)跳動提出的OMGD方法則進(jìn)一步提升了壓縮能力。

        OMGD(online Multi-Granularity Distillation)意為“在線多粒度蒸餾”。據(jù)字節(jié)跳動技術(shù)團(tuán)隊(duì)的論文顯示,該算法能靈活地在訓(xùn)練過程中優(yōu)化并壓縮GAN模型,從而實(shí)現(xiàn)更好的圖像效果和更少的計(jì)算成本。

        測試數(shù)據(jù)表明,OMGD壓縮算法對Pix2Pix和CycleGAN這兩種常用的GAN解決方案效果顯著。Pix2Pix和CycleGAN主要應(yīng)用于圖像到圖像的“翻譯”,比如將照片轉(zhuǎn)換為繪畫,對黑白圖片著色等。OMGD壓縮算法可使其算力消耗分別減少到原來的1/40和1/46。

        目前,OMGD壓縮算法已在抖音等產(chǎn)品中落地,為用戶提供更豐富的視頻創(chuàng)作能力。相關(guān)技術(shù)代碼也已發(fā)布在開源社區(qū),以幫助從業(yè)者提升GAN的創(chuàng)新和應(yīng)用效率。迄今,字節(jié)跳動已開源了機(jī)器學(xué)習(xí)平臺Klever、聯(lián)邦學(xué)習(xí)平臺Fedlearner、高性能分布式訓(xùn)練框架BytePS 、LightSeq推理和訓(xùn)練引擎等重磅項(xiàng)目。

        節(jié)能環(huán)保是字節(jié)跳動一個(gè)重要的技術(shù)研究方向。在不久前的自然語言處理領(lǐng)域國際頂會ACL 2021上,字節(jié)跳動的詞表學(xué)習(xí)方案獲得年度唯一的“最佳論文”大獎(jiǎng),該論文同樣極具節(jié)能價(jià)值,相比主流詞表可以節(jié)約92_的算力。

        OMGD論文鏈接_https://arxiv.org/abs/2108.06908

        開源項(xiàng)目鏈接_https://github.com/bytedance/OMGD

        作者_(dá)小智 責(zé)編_小智

         
        (文/史舒文)
        免責(zé)聲明
        本文僅代表作發(fā)布者:史舒文個(gè)人觀點(diǎn),本站未對其內(nèi)容進(jìn)行核實(shí),請讀者僅做參考,如若文中涉及有違公德、觸犯法律的內(nèi)容,一經(jīng)發(fā)現(xiàn),立即刪除,需自行承擔(dān)相應(yīng)責(zé)任。涉及到版權(quán)或其他問題,請及時(shí)聯(lián)系我們刪除處理郵件:weilaitui@qq.com。
         

        Copyright ? 2016 - 2025 - 企資網(wǎng) 48903.COM All Rights Reserved 粵公網(wǎng)安備 44030702000589號

        粵ICP備16078936號

        微信

        關(guān)注
        微信

        微信二維碼

        WAP二維碼

        客服

        聯(lián)系
        客服

        聯(lián)系客服:

        在線QQ: 303377504

        客服電話: 020-82301567

        E_mail郵箱: weilaitui@qq.com

        微信公眾號: weishitui

        客服001 客服002 客服003

        工作時(shí)間:

        周一至周五: 09:00 - 18:00

        反饋

        用戶
        反饋

        主站蜘蛛池模板: 国产精品乱码一区二区三区| 狠狠做深爱婷婷综合一区| 无码午夜人妻一区二区不卡视频| 日本香蕉一区二区三区| 亚洲国产一区二区三区青草影视| 日韩伦理一区二区| 亚洲视频在线一区二区三区| 久久成人国产精品一区二区| 国产在线精品一区二区| 亚洲精品无码一区二区| 亚洲综合在线成人一区| 国产婷婷色一区二区三区| 综合久久一区二区三区| 亚洲av区一区二区三| 色多多免费视频观看区一区| 国产成人欧美一区二区三区| 精品深夜AV无码一区二区老年| 无码精品国产一区二区三区免费| 国产色情一区二区三区在线播放| 日本夜爽爽一区二区三区| 视频一区在线播放| 波多野结衣一区二区免费视频| 日韩在线一区二区三区视频| 日本一区二区三区爆乳| 精品香蕉一区二区三区| 国产精品视频一区| 色屁屁一区二区三区视频国产| 多人伦精品一区二区三区视频| 中文字幕精品一区二区2021年| 欧美日本精品一区二区三区| 中文字幕日韩欧美一区二区三区| 亚洲sm另类一区二区三区| 蜜臀AV无码一区二区三区| 日本高清一区二区三区| 精品国产一区二区三区久久狼 | 日本一区二区三区在线看| 黑巨人与欧美精品一区| 日韩经典精品无码一区| 国产一区二区视频在线播放 | 99精品国产高清一区二区| 久久精品免费一区二区|