河南梦之网网络科技有限公司
梦之网科技出品
扫描关注梦之网科技微信公众账号

扫小程序码联系客服

京东黑科技AI视频换脸火爆 技术创新打造首部全民定制大片-梦之网科技

梦之网科技2019-10-01文章动态

在全国人民喜迎新中国成立70周年的欢庆日子里,一部名为“70年,我是主角”的微电影瞬间刷爆朋友圈。200秒时长浓缩了新中国70年的辉煌成就、风雨沧桑,网友们纷纷大呼过瘾。人民日报新媒体还上线了由京东AI和京东云提供技术支持的视频换脸应用,让每位网友只用一张自己的照片就可以成为电影里的主角,穿越70年,过一把明星瘾——中国第一部全民定制大片在国庆前夕描绘出浓墨重彩的一笔。

视频换脸背后的黑科技

近一段时间以来,多款AI换脸的游戏在网上出现,逼真的换脸效果不禁让人们感叹技术的神奇。尤其是这个全民定制大片中京东支持的AI视频换脸,效果更可以用惊艳来形容。与很多静态图片或者超短小视频换脸不同,“70年,我是主角”提供网友用于换脸的视频片段包含了大量的奔跑镜头和频繁的姿态变化,要实现高质量的换脸效果,这就需要背后有非常强大的技术支持体系。

据京东AI研发人员介绍,视频换脸对于AI算法提出很高的要。电影主角的连续奔跑及姿态变化,给脸部定位带来较大困难。针对此需求,京东AI开发了基于RefineDet的阶段选择性改进版人脸检测网络算法,在业界顶级人脸检测榜单“WIDER FACE”三项评测集中均以优异性能排名第一,展现出京东AI出色的人脸检测技术实力。

照片中的人脸是平面的,到了视频中各种角度展现,就需要立体化,人脸3D关键点检测技术是此次视频换脸中的关键环节。京东AI利用3D关键点检测技术来定位人脸区域的5万多个关键点,并基于这些关键点对人脸进行重构。即使当演员的脸部完全侧转时,换脸效果也能保持流畅,你会看到自己侧脸的完美呈现。

在微电影中,男主角频繁在火车车厢、室内、户外、夜间等不同场景下穿梭,视频中的光影极为多变。尤其男主角脸部的明暗差异变化非常大,这就给人脸关键点检测及渲染都带来了困难。对此京东AI采用了在纹理图上进行融合处理的手法,让纹理的生成独立于头部姿态的变化,从而使换脸更加的连贯和自然。

京东黑科技AI视频换脸火爆 技术创新打造首部全民定制大片-梦之网科技

AI视频换脸的人脸解析过程

京东集团副总裁、京东人工智能事业部总裁、京东人工智能研究院院长周伯文博士表示,很高兴与人民日报在人工智能+融媒体方面达成全面的合作,特别是这次合作的创新项目落地让大众可以通过AI技术“跨时空光影”感受祖国70年变迁的宏伟历程。同时,应用于此次活动的AI技术已经系统性、大规模、全流程地部署在零售、市政服务、融媒体等场景中,以AI技术为代表的前沿科技正在赋能并助力传统经济转型升级。

视频换脸对系统产生的技术压力非比寻常,与近期比较流行的照片换脸相比,一个用户定制大片视频换脸所需运算量就相当于数百次次照片换脸。要实现对海量用户的高质量支持,除了要在AI视觉算法上有非常全面的技术能力,还需要高水平、高可用的云计算支持体系。

为了支持此次京东与人民日报新媒体合作的AI电影换脸,京东云定制化调配了大量的服务器、GPU集群、CDN网络加速等技术支持资源。针对海量视频应用的高并发需求,京东云在图片、视频的存储、智能分析、融合处理等方面定制了高效能的解决方案,并对图像、视频处理的算法进行持续优化,从每一秒、每一帧入手提升AI换脸过程的效率和体验。

京东黑科技AI视频换脸火爆 技术创新打造首部全民定制大片-梦之网科技

京东云数据中心

京东云拥有中国最大的GPU集群之一,京东云GPU服务器结合京东丰富的应用场景资源优势及技术实力,为企业面向人工智能等新业务、新商业模式转型提供稳定、可靠、灵活并低成本的发展环境,能够提供深度学习、科学计算、全方位运维等支持,这些能力均在此次视频换脸项目中发挥了重要作用。对于每一位网友来说,AI换脸仅是点击几下手机屏幕,但背后体现的是京东在云计算、大数据、人工智能等领域强大的技术能力。

他们已经在享受换脸背后的黑科技

看起来非常炫酷的视频换脸应用中的AI和云计算技术实际上是京东的“看家本领”,不仅帮助京东更好地服务消费者,也帮助大量合作伙伴进入技术创新的快车道。例如这次换脸应用中核心的GPU集群,正是京东云为影视行业提供全面的云计算解决方案与服务之一。针对视频渲染领域,京东云与国内领先的云渲染平台渲云进行深度合作,为渲云定制了渲染解决方案。渲云所需的云主机可实现弹性扩张,并能按需提供卓越计算性能。利用自身GPU和云主机计算能力充裕的优势,京东云可以根据不同的渲染场景需求,提供最具性价比的云主机和GPU配合,为用户节省每一分钱。

文章关键词
人工智能
京东
黑科技
技术创新
京东云
京东ai