9月5日-9日,2020年中国国际服务贸易交易会(以下简称:服贸会)在京举办,深圳天盟智能互动科技有限公司携行业领先的RT-AIHS(Real Time-AI Head Swapping, 实时人工智能头部替换)技术参加本次服贸会,并将其应用于时下火热的直播领域。
利用深度合成技术规避企业损失
当前,以大数据、虚拟现实、AI人工智能、物联网等为核心的新科技无一不在颠覆着人们设计和创造事物的方式。短视频与直播带货已经成为近两年来一直热度不减的话题,针对短视频拍摄与直播带货产生的主播职业,现在也形成了一套完整的主播培养体系。但是当MCN机构投入大量的人力物力培养出一个成熟的主播之后,爆红的网红或艺人跳槽也几乎成为所有MCN机构面临的风险。而无论是针对MCN机构由于主播人员流失而造成的收益受损问题,还是经纪公司由于明星流失而造成的流量受损问题,RT-AIHS应用,可以帮助这些公司将损失降到最低。
-服贸会现场利用RT-AIHS技术直播-
RT-AIHS依托的深度合成技术(Deep Synthesis),是由天盟智能互动科技的母公司天工未来科技建立的一套机器深度学习影像算法模型,主要基于自动编码机(autoencoders)和生成对抗网络(generative adversarialnetworks, “GAN”)等AI技术。自动编码机是一个人工神经网络,被训练来对输入数据进行重建,以实现数据合成。GAN由两组相互对抗的人工神经网络组成,其中一个网络负责生成数据、另一个负责鉴别;在机器通过数百万次的学习、迭代下,最终GAN被训练为可以对视频、实时影像的人脸进行高度逼真的渲染,从而合成保真的信息内容。简而言之,深度合成其实就是通过对人脸数据鉴别从而完成人脸数据的重建并渲染出高度逼真的新的人脸的过程。
在短期内,深度合成已经作用于娱乐和社交领域,极大的提高了直播、短视频和游戏的实时后期处理水平,优化了用户体验。而着眼于长远发展,深度合成的仿真技术可以通过用户的创作性创造出超越现实的素材,拓展人类的视觉想象边界,带来全新的娱乐体验,满足用户的好奇心和新鲜感。
实时换脸催生新的运营模式
实时人工智能头部替换算法(RT-AIHS)指的是依托天工未来科技在计算机视觉与人工智能最新前沿技术深度研究与开发并结合超过十五年影像后期制作领域的丰富经验而形成的云计算和5G传输等技术手段,并由天盟智能互动科技实现了实时高精度头部替换的商业化应用开发,从而提升直播、游戏、短视频行业的生产效率和传播效果。
对于现在的主播行业来说,无论是粉丝还是所谓的“路人”观众,大家在看直播的时候更多的是对于主播“脸”的关注。在以往的情况下,如果主播离开公司,则再也没有办法用他进行直播。但是依托于RT-AIHS技术,即使主播离开,企业也可以结合声音的变换技术,在其离开的情况下完成直播工作。对MCN机构来说相较于再去培养一个成熟的主播,培养一个直播技术人员就能直接替换掉原先离开的主播,无论从时间成本还是金钱成本来考虑,都更容易的多。
-工作人员进行技术调试-
事实上,换脸技术在娱乐领域的运用并不是“头一遭”,之前也有运用在影视制作中的案例,但是RT-AIHS应用与以往换脸技术的不同之处在于他的实时性、高效性以及高质量这几个特点。用传统办法替换掉影视剧中演员的脸要从建模开始,并且经历一系列的后期制作过程才能完成,相较于RT-AIHS应用进行的换脸技术需要几十倍上百倍的人力去做,花费很长时间之后完成的成片也不一定能得到很好的效果。而RT-AIHS应用可以让我们用很少的人力,在尽可能短的时间内实现人脸替换,并以更高的质量保证影视剧能更早的呈现在观众面前。
打造永不流失的“三次元”明星
随着新一代科技革命和产业变革的发展浪潮,人工智能新技术日新月异并触动着全球神经。此次服贸会上,天盟智能同时为大家带来了同样基于深度合成开发的AIFG(AI Face Generation)技术,通过对人脸面部信息的关键数据进行提取,随机生成人脸图像供用户进行选择。基于目前市场上存在的艺人、网红等资源流失的现象,AIFG技术可以为用户提供全新的解决方案——打造“三次元明星”。
-深圳天盟智能互动科技有限公司首席技术官赵文韬做技术指导-
与真人明星相比,“三次元”明星不会出现约满跳槽、负面新闻或因个人品德及意外事故导致机构损失的风险;与“二次元”明星相比,他可以自主学习、迭代更新、自动修正,直接与粉丝进行实时互动等。通过AIFG技术,“三次元”明星能够突破表演者的技能限制,通过自主设定人物外形、性格特征以及特殊技能,利用不同虚拟场景及特效配合,使得人物更加生动有趣,视觉感受全面升级。
对于企业来说,“三次元”明星可从现有的动画后期制作和动作捕捉升级成实时合成,缩短制作周期,从而有效的控制企业成本;通过自身特定的标签,甚至可以捕获精准的粉丝群体,为企业带来流量扶持。
AIFG技术发展到今天,“三次元”明星作为一种新的形态将在视频领域发挥重要的作用,应用范围也将越来越广,他具备强大的吸引力和创新力,给现有人物IP创作空间带来全新的诠释,也将为直播、短视频、音乐和游戏行业带来新的机遇。
-左:深圳天盟智能互动科技有限公首席运营官饶卿–
-右:深圳天盟智能互动科技有限公司首席技术官赵文韬-
AI技术在影视制作中的运用或许不是影视后期制作发展的主流,但是以更少的预算和时间去完成更高质量的制作一直是影视后期制作发展的趋势。技术革新给我们带来的一定是经济效益的增加,而对于影视制作和其他娱乐相关领域,任何能创造效益的技术都是因为他可以高效、便捷、高质量的服务于人或公司。