2014年几月出生的马宝宝最好命(把马变成斑马需要几步)

问:一匹棕色马如何变成一匹斑马?一个可能的答案是:深度学习模型。运用类似的模型,还可以将莫奈的绘画作品变成真实的风景照片。这种模型名为生成式对抗网络(简称“GAN”),最早出现于2014年,被认为是深度学习领域的一项革命性成果。经过多年发展,GAN衍生出一个庞大的“家

2014年几月出生的马宝宝最好命(把马变成斑马需要几步)

问:一匹棕色马如何变成一匹斑马?

一个可能的答案是:深度学习模型。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

运用类似的模型,还可以将莫奈的绘画作品变成真实的风景照片。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

这种模型名为生成式对抗网络(简称“GAN”),最早出现于2014年,被认为是深度学习领域的一项革命性成果。经过多年发展,GAN衍生出一个庞大的“家族”,包括CycleGAN、Pix2Pix、StyleGAN等。它们可以用于图片风格迁移、图像编辑、图片生成等场景。

前面提到的马变成斑马,莫奈画作变照片,正是运用了CycleGAN模型。

一只高跟鞋的轮廓,通过Pix2Pix模型,则可以复原成真实的鞋子。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

虽然GAN模型应用广泛,优点很多,但需要很高的输入分辨率,对计算资源和存储空间需求大。因此,业界一直在努力改进GAN的压缩方法。

2020年,麻省理工学院、Adobe和上海交通大学技术人员提出一种GAN压缩算法,将算力消耗成功减少到1/21。

最近,字节跳动技术团队推出了一项自研GAN压缩算法,名为“在线多粒度蒸馏技术”,简称OMGD。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

这项算法能够极大降低CycleGAN和Pix2Pix模型的算力消耗,分别降至原来的1/40和1/46。不仅参数和计算量更少,图像生成效果也更好。

以下图为例。MACs代表消耗的计算量,FID代表生成效果,数值越小,效果越好。在靴子轮廓变成真靴子的过程中,OMGD消耗的计算量仅为1.219G,相比于原始状态的56.8G,计算量大幅减少,生成效果也更优。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

目前,OMGD技术已经应用在多款抖音智能特效中。比如“三屏人生”。过去、现在和未来在同一个屏幕里,像是不同阶段的自己在对话。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

数据显示,OMGD压缩能力(MACs)和生成效果(FID)都排在首位

又比如火遍抖音的动态照片。很多网友使用这款特效,让老相册里的家人动了起来。有的同学用工牌试了下,看到照片上的自己露出笑容。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

还有特效“变胖的你”,可以让大家感受一下变月半之后的样子。

把马变成斑马需要几步?字节跳动这项开源技术节省了97.8%算力

大幅提升的压缩能力,加上抖音的使用体量,将节约大量的计算成本。同时,这也可以给广大用户提供更加流畅的体验。

另外,这篇论文已入选国际计算机视觉会议ICCV 2021。相关技术代码也已发布在开源社区,帮助从业者提升GAN的创新和应用效率。

论文链接:

https://arxiv.org/abs/2108.06908

开源链接:

https://github.com/bytedance/OMGD

免责声明:本站部分内容和图片转载自互联网,该文观点仅代表原作者本人,文章内容仅供参考,不构成建议,也不代表本站赞同其观点。详情参阅本站的“免责声明”栏目。

相关内容

推荐阅读

  • 4两三钱女命(19岁女孩分享抗癌经历)

    “既然上了生活的贼船,何不做一个快乐的海盗呢?”这句话夏夏一直深深记在脑海里虽还有多个化疗疗程等着她但她仍然用乐观的态度安慰网友和自己近日19岁女孩夏夏在网上发...

    算命 2022-11-04 10

  • 20集电视剧命运剧情介绍(人世间结局前瞻)

    《人世间》的大火又再一次开启了全民追剧的热潮,每天熬夜等更新的追剧热情已经很有没有过了。不得不说,《人世间》实在太好看了,周家一家人的未来也深深地牵动了每一位观...

    算命 2022-11-04 18

  • 2004年猴几时生好(2004年出生的孩子是什么命)

    同一属相出生时间不同各有其运那2004年猴几时生好呢2004年猴几时生好2004年为农历甲申猴年六十甲子纳音泉中水此年出生之人属猴在子时丑时辰时巳时出生为好一生...

    算命 2022-11-04 18

  • 4月3日出生的人很可怕(李云龙你真他娘的天才)

    大家好啊,我是你们的老朋友清欢吴雩。很久都没发过文章了现在又找到了新的素材。或许大家都会有意无意的看到一些面容精致的哥哥们。我们看见他们时很大可能会觉得他们帅气...

    算命 2022-11-04 11

发表评论

版权声明:本站部分内容和图片源于互联网,本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。转载文章版权属于原作者所有,若有权属异议及违法违规内容请联系我们删稿。详情参阅本站“版权声明”及“举报投诉”栏目。

猜你喜欢