标题(老边嘀嘀打车的广告运营)嘀嘀打车900万人以上使用的“动漫脸”发挥了特别的效果

代运营2023-02-2339

死板的心变得明朗

死板的心灵书写部

火在嘀嘀打车的“***脸”特效是防城港抖音seo如何传神、活的呢？

说到特殊效果的游戏，嘀嗒的“整个工作”一个接一个地引人注目。来吧，出风头的是石渠抖音seo“***脸”的特殊效果。无论男女老少，在使用了天长抖音seo这个特效之后，似乎所有从迪士尼动画中进入的人物都是活着的。 “***脸”登场后不久，仓卒在嘀嘀打车中发酵，受到用户的欢迎。 “一键变身高甜***脸”、“来了个全嘀溜的公主”、“用***脸式烤人偶”、“王子公主撒糖的手势”、“捕获童话魔法失效的时候”

“**脸”是3D风格的特效，这种特效的研究起点主要是各种类型的CG训练数据容易获取、活态难以恢复意识、紧密贴合的立体肤质光线难以完结、强大作风的五感应变GAN练习对此，字节跳动智能创造团队在3D作风化方向中心突破优化，不仅束缚了上述所有课题，也沉淀了共同的本领束缚计划。

“***脸”面前研发流程改革

过去，一个完备的3D作风化研发过程可以分为以下几个模块：

收集多少张原创风格照片-锻造电击枪大模板-天生成对数据-人工选型可用于对数据优化p图。自从锻造p2p小模板后，就不断频繁使用。

传统研发过程的挑战是清晰的。重复周期长，参与现场弱，不容易沉淀和复用。

在“***颜”特效研发中，字节跳动智能创造团队选择了改革的研发过程。

从创造目标作风的动机开始，根据算法达成一致的要求尝试提供一些3D美术素材。并且，字节跳动智能创造团队打算使用DCC软件大量衬托什么类型的CG数据呢？在衬托的历史中，本领团队首次流行中最差的AIGC本领对数据进行了增强处理。之后，使用GAN分解运动所需的对数据，最终以自研的变形pix2pix型运动可能会失去最终的动机。

字节跳动智能创造团队“***脸”的研发过程图

通过流程链接可以看出，该方式大大缩短了迭代周期，进步了激活水平，还获得了更高的到场度并尝试再现，改革的工程链接将迭代周期从6个月缩短到1个月，计划也容易沉淀，容易复用。

“**脸”的特殊效果想怎么进入呢

如今，外交媒体中变身特效越来越多，特效的精彩与精准越来越受到重视。为了让用户更好地完成作风化变身的动机，嘀嘀打车特效的策略师们严密关注讨论，将人气动漫的风格贯穿其中，在改革***颜值特效套装的同时，让用户感受到动漫般的活角色作风

嘀嘀打车特效，对目前墟市今天早上的特效进行了深入讨论。现有的发明特殊效果的生存方式不足以拒绝人，存在着情绪扩张度不够，灯光动机不够等课题。所以嘀嘀打车特效贯穿大海审美，创造出新的***颜值画风，扩张了男女脸型比例的性格，使人爱圆脸、眉清目秀的“少女少”，有一张健壮的脸，眉清目秀在这个过程中，保护用户自己的头发，增强头发的松散感和光泽，更不用说与***脸部的混合了，***质感的肌肤也能融入到用户自身的肌肤细节中，特效更具有用户的特性和性格。

此外，嘀嗒特效策略师还定义了分支照明下光影质感，满足复杂场景下照明恢复的需要，使***脸特别立体，所有自拍无违规，融入感官。最终，在尝试将人脸的编码心情进行扩展后，产生了数码个人不动产的人脸摄影技术，经过天生的心情CG数据、完美的运动数据、算法，大概尤其是生动地表现用户特性的心情动机。

自制CG分解数据流，可复用高质量的训练数据

3D风格特效训练数据依赖高质量的CG支撑数据，各类数据的发布要求很高。另外，3D房地产的手工建模是一个非常费时的历史，可复用性也不够高，每次都是在一个项目上花费廉价的人力时间，旧书做了一些3D房地产，但在项目停止后，就全面放弃了。

此次，字节跳动智能创造团队构建了通用且易于扩展的CG分解数据处理流程。

字节跳动智能创造团队CG分解数据流的过程图

分解该数据流的过程如下。

Houdini法式天生数字房产，法式捏脸、扎骨、权重维护，构建诚信数字人型房产库。

各种性3D数字房地产

经过Houdini的Solaris构建USD模板，通过USD reference引入头发、毛发、发型、服装、心情系数等房地产。

皮肤贴图样本

虹膜地图样本

通过Houdini的PDG随机配合房地产、相机角度、灯光环境等。利用PDG对workitem的掌握，准确掌握数据的分发。

活动PDG节点地图

因为研发的历史需要频繁地提供大规模的衬托数据用于动机的迭代，这就需要破格大规模计算力的旧书，等待时间。此前，嘀嘀打车的“魔法变身”特效中，团队曾使用数百万本旧书利用外部农场来衬托数据。在“***脸”效果中，团队根据字节跳到明天

2下午动旗下云平台火山引擎扎实的根底办法，大大升高了算力老本。

字节跳动智能创造团队参照影视工业的过程，搭建了一套自研的衬托农场平台。它也许将离线义务拆解到多少个衬托呆板上施行并行处置。经过火山引擎镜像平台施行镜像托管、资源池化平台施行资源申请与释放、cpu/gpu 集群施行容器动静扩缩容，再利用 nas 施行物业办理，衬托农场具备了一键夸大数千个衬托节点施行高效算计的才略。

基于此，字节跳动智能创造团队自定义了单义务处置逻辑，席卷前处置、引擎衬托、后处置等方法。并根据须要，正在一切时分动静扩充 / 削减集群领域以最大化运用算力资源。

为了进一步进步效用，让妄图师更麻烦到场到动机优化中，本领团队还创造了飞书小法式供妄图师利用，经过飞书触发云霄的主动化过程来迭代美术动机，正在云霄义务告竣后，会发送动态回到飞书供妄图师检察，大大进步了妄图师处事的效用。

同时，字节跳动智能创造团队自定义了事宜启动（EventTrig后天3晚上ger）以及 Api 来买通农场、飞书平台和云桌面平台，最大水准推进 All in one 观念，让妄图师以及工程师都能基于飞书以及云桌面更麻烦地告竣合资研发。

自研的衬托农场平台

AIGC 新本领的利用

随着 DALL・E 的问世，2021 年头字节跳动智能创造团队就结束了相干本领的跟进以及筹备，字节跳动智能创造团队正在 Stable Diffusion 开源模子的根底上，构建了数据量达十亿领域的数据集，锻炼出两个模子，一个是通用型的模子 Diffusion Model，也许天生如油画、水墨画作风的图片；其它一个是动漫作风的 Diffusion Model 模子。

前没有久，由字节跳动智能创造团队支柱的「AI 绘画」特效正在抖音上大火，选择的便是这一新本领。此次正在抖音「***脸」上，本领团队进一步开采 Diffusion Model 正在 3D ***作风上的天生才略，选择了图片天生图片的政策，开始对于图片施行加噪，然后再用锻炼好的文生图模子正在文本的启发上来噪。基于一个预锻炼好的 Stable Diffusion 模子，输入 GAN 天生的与真人图相匹配的目的 3D 作风了局图，经过精调过的一组文本枢纽词，启发目的作风往渴望的方向和蔼，Stable Diffusion 输出的了局即算作最终数据交给后续的 GAN 模子练习。

自研的形变 GAN 模子

因为抖音「***脸」的目的作风与原始人像比拟有较大形变，直接用传统 p2p 框架难以锻炼出高质量动机，字节跳动智能创造团队自研了一套 p2p 形变 GAN 锻炼框架，对付锻炼大形变、强作风的***目的有很好的动机。字节跳动智能创造团队自研的形变 GAN 锻炼框架蕴含两个全体：

1、作风化发端锻炼，提取***脸作风化信息。本领团队构建了一个作风化信断交互混合的非配对于锻炼框架，将真人以及***脸数据集输入到该框架就也许提取***脸作风化信息。该框架是一个端到真个锻炼框架，蕴含了作风化性格编码、性格混合、重修锻炼以及作风化发端锻炼，锻炼告竣后失去一个***脸作风化信息，用于下一步精巧化锻炼。

2、混合***脸作风化信息，精巧锻炼。由第一步失去的***脸作风化信息蕴含了作风以及形变等信息，将这全体信息混合到真人图施行精巧化锻炼，运用 p2p 相干的强监视 loss 施行配对于锻炼，锻炼约束后失去***脸模子。

基于以上改革的本领规划，抖音「***脸」没有仅简化了工程链路、大幅选拔迭代效用，还正在大角度、心情丰硕度、动机作风恢复、光影统一性以及多肤色匹配等方面博得了分明的优化动机。据领会，担任「***脸」项想法字节跳动智能创造团队自 2021 年以后就正在 3D 作风化方向中心攻破优化，该本领规划已支柱多款 3D 作风特效博得平台爆款的成就。

对于字节跳动智能创造团队：

智能创造团队是字节跳动 AI 多媒体本领中台，经过修建跨越的算计机视觉、音视频编写、特效处置等本领，支柱抖音、剪映、头条等公司内漫溢产物线；同时经过火山引擎为外部 ToB 单干火伴供给业界前沿的智能创造才略与行业束缚规划。