二維碼
        企資網(wǎng)

        掃一掃關(guān)注

        當(dāng)前位置: 首頁 » 企資快訊 » 匯總 » 正文

        字節(jié)跳動開源最新 GAN 壓縮算法,算力消耗可

        放大字體  縮小字體 發(fā)布日期:2021-08-30 11:27:35    作者:史舒文    瀏覽次數(shù):57
        導(dǎo)讀

        8月27日消息,字節(jié)跳動近期開源了一項代號為OMGD的壓縮技術(shù)。這是字節(jié)自研的GAN(生成對抗網(wǎng)絡(luò))壓縮算法,在保證生成效果不變的前提下,算力消耗最低可以減少到原來的1/46,相比之前業(yè)界的最佳壓縮效果提升一倍多。

        8月27日消息,字節(jié)跳動近期開源了一項代號為OMGD的壓縮技術(shù)。這是字節(jié)自研的GAN(生成對抗網(wǎng)絡(luò))壓縮算法,在保證生成效果不變的前提下,算力消耗最低可以減少到原來的1/46,相比之前業(yè)界的最佳壓縮效果提升一倍多。據(jù)悉,這項技術(shù)的論文已入選國際計算機視覺會議ICCV 2021。

        圖_字節(jié)跳動技術(shù)團隊發(fā)表的自研GAN壓縮算法論文

        GAN是人工智能領(lǐng)域重要的深度學(xué)習(xí)模型,在圖像生成、音樂生成和視頻生成等方面應(yīng)用廣泛,還可以提高圖像質(zhì)量,實現(xiàn)圖像風(fēng)格化、圖像著色等任務(wù)。漫畫特效等人們常用的短視頻道具,就是通過GAN實現(xiàn)的。

        由于GAN對計算資源和存儲空間的需求巨大,模型難以直接部署到手機、Pad等移動設(shè)備上,業(yè)界一直在努力改進GAN的壓縮方法。2021年,麻省理工學(xué)院、Adobe和上海交通大學(xué)的研究者們提出一種GAN壓縮算法,將算力消耗成功減少到1/21。此次字節(jié)跳動提出的OMGD方法則進一步提升了壓縮能力。

        OMGD(online Multi-Granularity Distillation)意為“在線多粒度蒸餾”。據(jù)字節(jié)跳動技術(shù)團隊的論文顯示,該算法能靈活地在訓(xùn)練過程中優(yōu)化并壓縮GAN模型,從而實現(xiàn)更好的圖像效果和更少的計算成本。

        測試數(shù)據(jù)表明,OMGD壓縮算法對Pix2Pix和CycleGAN這兩種常用的GAN解決方案效果顯著。Pix2Pix和CycleGAN主要應(yīng)用于圖像到圖像的“翻譯”,比如將照片轉(zhuǎn)換為繪畫,對黑白圖片著色等。OMGD壓縮算法可使其算力消耗分別減少到原來的1/40和1/46。

        目前,OMGD壓縮算法已在抖音等產(chǎn)品中落地,為用戶提供更豐富的視頻創(chuàng)作能力。相關(guān)技術(shù)代碼也已發(fā)布在開源社區(qū),以幫助從業(yè)者提升GAN的創(chuàng)新和應(yīng)用效率。迄今,字節(jié)跳動已開源了機器學(xué)習(xí)平臺Klever、聯(lián)邦學(xué)習(xí)平臺Fedlearner、高性能分布式訓(xùn)練框架BytePS 、LightSeq推理和訓(xùn)練引擎等重磅項目。

        節(jié)能環(huán)保是字節(jié)跳動一個重要的技術(shù)研究方向。在不久前的自然語言處理領(lǐng)域國際頂會ACL 2021上,字節(jié)跳動的詞表學(xué)習(xí)方案獲得年度唯一的“最佳論文”大獎,該論文同樣極具節(jié)能價值,相比主流詞表可以節(jié)約92_的算力。

        OMGD論文鏈接_https://arxiv.org/abs/2108.06908

        開源項目鏈接_https://github.com/bytedance/OMGD

        作者_小智 責(zé)編_小智

         
        (文/史舒文)
        免責(zé)聲明
        本文僅代表作發(fā)布者:史舒文個人觀點,本站未對其內(nèi)容進行核實,請讀者僅做參考,如若文中涉及有違公德、觸犯法律的內(nèi)容,一經(jīng)發(fā)現(xiàn),立即刪除,需自行承擔(dān)相應(yīng)責(zé)任。涉及到版權(quán)或其他問題,請及時聯(lián)系我們刪除處理郵件:weilaitui@qq.com。
         

        Copyright ? 2016 - 2025 - 企資網(wǎng) 48903.COM All Rights Reserved 粵公網(wǎng)安備 44030702000589號

        粵ICP備16078936號

        微信

        關(guān)注
        微信

        微信二維碼

        WAP二維碼

        客服

        聯(lián)系
        客服

        聯(lián)系客服:

        在線QQ: 303377504

        客服電話: 020-82301567

        E_mail郵箱: weilaitui@qq.com

        微信公眾號: weishitui

        客服001 客服002 客服003

        工作時間:

        周一至周五: 09:00 - 18:00

        反饋

        用戶
        反饋

        主站蜘蛛池模板: 精品国产一区二区三区不卡 | 无码中文字幕一区二区三区 | 午夜视频在线观看一区二区| 色国产精品一区在线观看| 日韩在线一区二区三区视频| 亚洲一区免费观看| 亚洲一区二区三区香蕉| 国产成人无码精品一区二区三区| 狠狠色成人一区二区三区| 精品在线视频一区| 国内偷窥一区二区三区视频| 亚洲V无码一区二区三区四区观看| 欧洲无码一区二区三区在线观看| 亚洲福利视频一区二区三区| 国产福利一区二区三区在线视频| 日韩美女视频一区| 日韩精品一区二区午夜成人版| 欧美激情一区二区三区成人| 日本一区二区三区在线网| 国产精品xxxx国产喷水亚洲国产精品无码久久一区 | 精品91一区二区三区| 日本一区二区在线免费观看| 中文字幕亚洲乱码熟女一区二区 | 2021国产精品视频一区| 免费无码A片一区二三区| 日韩精品久久一区二区三区| 一区五十路在线中出| 中文字幕一区二区三区久久网站| 射精专区一区二区朝鲜| 冲田杏梨AV一区二区三区| 精品一区二区三区四区在线| 91香蕉福利一区二区三区| 国产成人精品日本亚洲专一区| 亚洲一区电影在线观看| 尤物精品视频一区二区三区| 国产成人av一区二区三区在线观看 | 538国产精品一区二区在线| a级午夜毛片免费一区二区| 中文字幕AV一区二区三区| 国模视频一区二区| 秋霞日韩一区二区三区在线观看|