魔珐（附案例）：做三维虚拟内容生产的“AI基础设施”，目标是全栈式服务平台|东西Plan

东西方视角|观点

一些IP选择以更直接的方式与公众互动。最典型的就是直播。经典IP形象和一些原生虚拟形象开始像真正的主播一样，走进直播间，带货、解说或进行节目表演。

618期间，淘宝、京东等都进行了尝试。

虽然与经典IP形象相比，原生虚拟形象有自己的商业规划路径和商业模式，但实际上，在走向锚定方面，从长远的实现逻辑来看，方向会更加类似于IP发展。以及商业化的逻辑（或垂直维度的空间）。

1、从IP开发和商业化的角度来看，至少对于经典IP形象而言，走向锚定有以下三个价值：

1）是IP破圈的新场景。 IP走向虚拟主播，相当于完成了又一次维度和场景的转变。在打破维度、变换场景的过程中，一方面，我们获得了更多与观众互动的机会，增强了沉浸感和粘性。另一方面，由于直播的普及，能言善辩的虚拟主播相比“纸片人物”或其他垂直圈层场景，在建立公众认知方面将更具优势。尽管以二次元空间为代表的文化消费屡屡成功破圈，且案例也不少，但在二次元空间完成IP形象想象的群体与普罗大众相比，仍然是少数。 。

从长远来看，这有利于增加IP破圈的概率，也有利于提高IP开发效率。

2）是IP的扩展货币化或直接货币化的方式。 IP形象一旦到达虚拟主播进行直播，就会被赋予与真实偶像一样的商业属性。无论是规模变现还是直接变现，其收入都有空间嵌入到品牌合作和销售的收入中。

从长远来看，将为IP带来多元化的拓展和变现的机会。

3）是IP创造的主导手段。目前已经有了从虚拟主播层面孵化虚拟形象的方法。这样一来，从内容产品的逻辑来看，先出道虚拟偶像的想法似乎比先出道虚拟主播的想法更可行。可持续性，但受限于线下全息或XR表演施展，在秀场表演、解说、产品传递等方面，与舞台表现力本质上没有差异（差异主要取决于运营方的内容制作能力）。这种缺乏明确差异也促进了更加务实的路线选择。主播吸粉路线在日本市场已经是一种趋势。

从长远来看，可能有助于缩短某些特定消费群体的IP创作周期。

可见，IP锚定的整体提升落在了IP理念本身，是IP价值的内部优化和外部提升。

2、技术的决定作用及技术路线的区别

在IP走向虚拟主播场景的过程中，技术起着决定性的作用。从目前的案例来看，主要问题如下：

1）虚拟主播在直播过程中感觉卡住了。

很多IP形象转化为虚拟主播后，其面部表情、眼神、肢体动作、手指动作等基本保持着IP扁平化呈现的状态。放到直播间后，对真实主播的适应感很低，卡牌感觉厚重、单调。可以保持类别携带，但不能触及多个类别。

2）虚拟主播直播时不够流畅

即使有些图像在皮肤、面部表情、眼睛、肢体动作等方面实现了高度模拟，但在直播过程中，经常会出现词语不匹配、动作延迟等严重的时滞现象。

3）虚拟主播直播时互动性极低

主播的直播行为本身就需要高频次的互动，比如与嘉宾聊天、回答弹幕、评论问题、现场抽奖等，这对虚拟直播中嵌入的技术支撑模块提出了很高的智能化要求。锚。现阶段，部分图像采用“中之人”的方式，模拟程度、流畅度尚可，但整体交互性极差，只能进行重复性的表达。

上述三个问题的解决方案，在技术层面也呈现出几种不同技术定位的典型企业。

以仿真为切入点，涌现了几家具有代表性的公司。这些公司的关注点并不局限于娱乐型IP形象的打造，而是着眼于虚拟人更大的赛道，开展导购、虚拟游戏等功能性功能。服务员的创建。

从场景层面，出现了专门从事虚拟IP形象直播、虚拟偶像在线表演的技术服务公司。这类公司具有典型的流程导向特征。在积累了VR\AR等表演娱乐形式后，他们已经取得了一定的成功。经验。

从互动的角度来看，由于互动形式的应用实际上与内容策划、人物策划和现场运营高度相关，因此互动比模拟路线和秀场服务路线对公司的服务能力有更全面的要求。这类公司往往会结合影视动画CG技术，有一定的仿真技术积累，同时在虚拟IP形象的真人操作上有实际操作经验，可以解决交互问题。此外，品牌广告资源的积累也会是一个加分项。

但无论是哪一种技术路线，AI都将是上述技术路线的天花板（参考阿里巴巴达摩院方向），因为虚拟IP主播变成虚拟IP主播后，在这个过程中，向真实的人靠拢，甚至最终向智能人靠拢，需要大量自动化学习的积累和算法的修正。

从某种程度上来说，目前IP虚拟主播还处于早期阶段。此前，618或许首次让一批IP概念的虚拟主播进入公众意识。但在直播常态化、提高直播的用户粘性和转化方面，还有很长的路要走。

目前，在大平台形成技术垄断之前，能够实现虚拟形象批量制造、有自己的技术支持、成本可控、尽量减少分包环节的企业，未来可能会有很高的溢价。能力，在下一阶段平台化竞争中具有一定优势。

以上是东西方研究团队的阶段性观点。如有批评和建议，请联系文末Eason。

追踪|公司

魔发科技概况及路线

1.魔发科技简介（官方资料）

沫发科技是一家创新应用计算机视觉和计算机图形技术的人工智能科技公司。成立于2017年10月，2019年6月获得红杉资本中国、晨兴资本、东豆石岛基金等投资者数亿元A轮融资。

公司推出全栈端到端原创AI演艺动画解决方案，致力于构建虚拟数字人基础设施，在三维虚拟内容（包括影视动画、游戏、虚拟短视频、虚拟综艺节目等）、虚拟直播等方面推出了广泛的虚拟IP线下实时互动，以及全智能多模态虚拟数字人领域。

柴金祥，魔发科技创始人，博士。美国卡内基梅隆大学博士，美国著名工学院TAMU终身教授、博士生导师。他自2000年起涉足3D视觉感知、3D视觉合成和人工智能领域，是最早利用表演捕捉技术和人工智能技术创建动画和虚拟数字人的科学家之一。

2. Mofa当前的技术范围和长期定位

魔发科技的虚拟直播技术可以在创造各种虚拟人的过程中实现场景化的应用，帮助虚拟人通过多维度的新型虚拟内容形式展现个性、技能和价值观。

Mofa目前公开的所有应用技术包括：

1）智能建模/智能绑定技术：魔发科技可以实现虚拟IP 3D模型的智能建模和绑定，提高建模和绑定的效率和质量。

2）实时动画生成/实时计算/实时AI变声/实时特效：基于魔发科技独创的AI技术，实现高品质的虚拟直播效果。

全栈端到端AI表演动画技术：通过演员表演实时捕捉演员三维面部表情、眼神、肢体动作、手指动作，通过AI表情实时驱动3D虚拟角色迁移技术和AI运动重定向技术，生成高品质的实时表演动画效果。

预制动画及实时动画拼接技术：通过创建预制动画库，突破真人技能，大幅提升虚拟人直播技能。同时，实时动画拼接技术实现了预制动画与实时动画的无缝切换。

3）实时求解与渲染技术

实时计算：对虚拟人头发、衣服进行实时物理计算，大大增强虚拟人动画输出效果。

实时渲染：采用实时渲染技术，可以实现虚拟人物、场景的高质量实时渲染效果。

4）基于文本的实时动画和语音生成技术

基于文字输入，可实时自动生成超写实虚拟人物、卡通模型、二维人物等各种三维虚拟人物的高质量语音和动画数据。还可以基于实时语音输入，自动生成全智能的高品质角色动画。

从长远来看，Mofa希望通过智能化、标准化、产业化的方式，大幅提升虚拟内容生产的效率、质量和产能，同时解锁高频化、社交化的虚拟短内容形态（如虚拟直播、虚拟短视频）。视频）。等）并成为虚拟内容生产的AI基础设施。

在虚拟人赛道，尤其是IP虚拟人层面，Mofa希望利用其独特的AI技术和艺术能力，为各个垂直赛道孵化和打造虚拟IP，赋能产业化虚拟IP的创作和运营。与此同时，Mofa还积极开发UGC虚拟内容生产工具，试图将自己升级为具有全栈服务能力的平台公司。

一些Mofa项目的合集（可以考虑在WIFI环境下点击）

款式|案例

魔发：令狐直播、麒麟直播

魔发科技近期尝试了多款虚拟IP直播，包括热门游戏《穿越火线》中虚拟人物令狐的直播、漫画《她今天好可爱》中虚拟人物齐琳的直播，以及《全职高手》主角叶修的直播、《跑跑卡丁车》中卡通人物皮蛋、宝宝的直播等，这里选取令狐直播和麒麟直播作为案例介绍。相关数据由魔发科技官方提供。

令狐直播：游戏IP虚拟主播提升商业价值

一、背景介绍

在运营过程中，游戏运营商往往会出现老玩家回归、新玩家招募、新活动推广等一系列需求。品牌需要结合当下流行的内容形式（直播、短视频），不断吸引新的促销活动，在更多场景、更多空间与更多潜在游戏玩家互动。此外，通过虚拟直播，游戏公司可以突破各种游戏角色，打造虚拟偶像，创造新的商业模式。

2.成品说明

《穿越火线》与Xmov科技合作，实现令狐虚拟直播产生更大的IP价值，实现新的商业变现路径。截至目前，令狐已推出四场虚拟直播，未来还将推出更多互动直播。

第一个是CF客户端游戏的纯虚拟直播；二是CF手游跨维度AR直播，实现虚拟人与真人同框实时互动；第三个是令狐空降真实网吧与主播在线共享网吧特权；第四部令狐在2020腾讯游戏年会上首次亮相。

3.数据表现

首场直播在斗鱼、虎牙、快手、企鹅电竞四大游戏直播平台获得超千万PV曝光；随后的操作中，直播剪辑的短视频素材陆续发布在B站、快手、抖手上。利用音频、视频等短视频平台进行二次传播和扩散。

第二场直播，邀请斗鱼、虎牙、企鹅电竞的CFM领军主播解姬、小艺、詹舞、漫漫受邀与令狐实时互动，并各自登上平台品类热度第一。各自的直播间。

第三场直播中，令狐姐与念鹏、乌童、卢克玛奇三位人气主播分享了新版本内容和特权福利，并与线下玩家匹配互动，在枪林弹雨的战场上并肩作战。

第四场直播中，令狐姐直播亮相2020腾讯游戏年会，为观众解读大会内容，带来不少第一手资讯。玩家们反响热烈。

四、合作方式

腾讯提供内容策划，魔发科技负责令狐直播的其他全部服务，包括：分镜策划、3D场景制作、虚拟IP 3D模型建模与绑定制作与优化、预设动画拍摄与制作、实时表演动画无缝连接、特效制作、场景灯光、声优筛选、虚拟机拍摄、实时AI表演动画、以及直播系统搭建、声控、直播、排练、抽奖操作等，涵盖了演出所需的全流程。虚拟直播，端到端对等点提供高质量的虚拟直播服务。

5、开发周期

首场直播准备期为3-4周，主要涉及虚拟主播三维人物模型的创建与绑定、AI动画训练数据制作、预制动画制作、场景制作、特效除了后续的新场景、新发型或者新服装、新特效等制作外，再次直播只需要排练新流程就可以直接上线。

麒麟直播：漫画IP虚拟主播加速IP孵化

1. 麒麟简介

齐琳是知名漫画家郭圣创作的连环漫画《她今天好可爱》的女主角，作者在微博上拥有超过1600万粉丝。

目前，漫画《今天的她真可爱》已在快看漫画连载半年，已获得超过500万点赞，阅读量超过20亿。魔发科技以麒麟形象为基础，与游虎文化合作，制作了麒麟形象的虚拟主播。

考虑到漫画人物创作短视频和直播是行业的新尝试，可以帮助漫画人物在创作初期加强粉丝互动，提升人物人气，魔发科技与游虎文化合作，开通全程直播流程。 。

同时，由于目前漫画IP角色的变现路径比较长，增强粉丝粘性的方式也比较有限，基于此，魔发科技联手优虎，进行了漫画社交化的首次尝试IP角色为麒麟。

漫画人物在直播带货等电商平台上探索新的变现模式，并与高频、轻量级短内容相结合，快速发酵触达粉丝。将最新热点话题融入内容结构，快速增强社交性和互动性。化属性。

2.成品说明

基于魔发科技在虚拟直播领域的经验，魔发科技在与游虎文化的链接规划设计上取得了超出预期的成果。例如，项目组充分理解了作品中熟悉的角色，在虚拟直播中加入了“你画我猜”等互动创意。

3.数据表现

作为一个尚未出圈的虚拟角色，齐林首次直播便上演冷启动，获得30万+点赞，互动频率超过4万，粉丝停留时间达61分钟。此外，该项目首次直播已融入招商流程。

四、合作方式

在两次直播合作过程中，合作伙伴优虎文化提供剧本创意、产品和奖品，淘宝后台控制完成产品上架和抽奖设置。此外，还获得了一定的平台资源支持，双方共同完成了配音演员的选拔。完成直播环节、排练等后，魔发科技完成了整个直播流程的其余部分。

具体包括：3D场景制作、虚拟IP 3D模型的模型优化与绑定制作、预设动画拍摄与制作以及与实时表演动画的无缝衔接、特效制作、场景灯光、实时AI表演动画与直播转播系统搭建、音控、推流等一系列任务涵盖了虚拟直播所需的全流程，为合作伙伴提供端到端的高质量虚拟直播服务。

6. 开发周期

首场直播准备期为3-4周，主要涉及虚拟主播3D模型的创建与绑定、AI动画训练数据制作、预制动画制作、场景制作、特效制作、互动除了新场景、新发型或者新服装的制作、新特效等之外，再次直播只需排练新流程，然后直接上线即可。

价值观|认知

Mofa团队部分访谈

1、潜力空间

EW：IP角色转化为直播虚拟偶像/产品的商业化空间有多大？商业模式的可持续性体现在哪里？

莫发：传统虚拟IP的创作主要以影视、动漫、游戏等长期内容为主。虚拟直播、虚拟短视频是高频、社交短内容。他们的市场还处于早期蓝海探索阶段，很难直接估算其商业空间。不过，我们可以用现实世界的影视剧内容、短视频和直播市场进行比较。中国影视剧内容市场近千亿规模，而短视频和直播市场都是万亿级市场。与真人相比，虚拟人能做的事情充满了无限的可能性。其中，虚拟长内容产业包括影视动漫和游戏在中国拥有300-4000亿的市场。因此，我们有理由相信，虚拟直播和虚拟短视频的市场和商业价值至少是1000亿。现在直播、短视频市场已经出现了直播+

从可持续性来看，虚拟IP本身是可持续的。它不会变老，它的个性不会崩溃，它可以24x7工作，不受空间和时间的限制。因此更可控、更耐久，具有长期投资价值；同时，虚拟IP或KOL可以与各垂直行业结合，打造各行业的虚拟IP，有利于商业模式的可持续发展。

EW：魔发科技在虚拟数字人IP中能发挥什么作用，能获得什么价值？

莫发：对于虚拟IP来说，其完整的产业链包括虚拟IP的角色设计与内容策划、内容制作、内容运营、商业变现。其中，人物和内容的策划和内容运营与现实世界中内容的策划和运营并没有太大的区别。我们认为，创建和运营虚拟IP最大的挑战是内容制作，因为虚拟IP或虚拟角色在现实世界中并不存在。他们无法像现实世界中的演员或KOL一样，通过演员表演和摄像直接生成内容。所需内容，如图片、短视频、直播、TVC、综艺节目等；此外，现实世界中的明星在收到商业广告后，可以通过拍摄自己的表演来制作相应的内容用于商业变现。虚拟IP的商业变现也需要建立在高质量的虚拟内容制作能力之上。 Mofa希望通过智能化、标准化、产业化、平台化的方式解决虚拟内容生产的痛点问题，赋能整个虚拟世界的内容生产和虚拟IP的创造和运营。

目前外交部主要从两方面赋能行业：

第一类是为虚拟IP的创作和运营提供全方位的虚拟内容（智能）制作服务，包括动画长视频、游戏、虚拟图片、虚拟短视频、虚拟直播、虚拟IP离线实时腾讯CF的虚拟形象代言人令狐、腾讯QQ玄武的虚拟偶像星童、阅文的知名虚拟IP叶修都属于此类。

第二类属于虚拟IP的孵化、创作和运营。 Mofa不仅提供虚拟IP内容制作的全栈服务，还将自身独特的技术和产品能力与合作伙伴的策划和运营能力相结合，共同打造和运营原创虚拟IP。我们最近推出的原创虚拟KOL“玲玲”和即将推出的电商垂直虚拟KOL“妲己”就属于这种模式。

与次世代文化联合打造的原创虚拟KOL“玲玲”

Mofa如今的技术和服务在市场上具有一定的优势，因为我们不仅拥有高质量、高效率、全栈的虚拟内容制作能力，而且还拥有行业内极其稀缺的技术（比如超写实）虚拟形象智能建模与绑定技术、高品质全栈虚拟短视频和虚拟直播技术），帮助Mofa构建了竞争壁垒。

EW：与其他科技公司相比，Mofa的竞争优势是什么？

Mofa：与其他科技公司相比，Mofa的核心能力是技术、算法和艺术，以及综合工程和产品能力。

一是技术的深度和广度。 Mofa拥有原创研发技术，这不仅仅是单点技术，而是涉及到虚拟内容制作、虚拟IP创作的方方面面。例如，我们的AI表演动画技术涉及面部表情、眼睛、肢体动作、手势的三维实时建模和高质量捕捉，以及实时AI表情迁移和肢体动作等6大核心技术。重定向。它是世界上为数不多的之一。拥有全部6项核心技术的公司之一。此外，对于虚拟形象的创作，Mofa拥有全球领先的智能建模和绑定技术，这使我们能够为虚拟形象的创作提供优质高效的生产能力。我们的端到端虚拟直播技术使虚拟形象能够与线上线下的观众进行高质量、生动、自然的互动。我们还拥有全球领先的全智能基于文本的实时语音和动画技术，这使我们能够创建全智能多模态虚拟数字人，将虚拟数字人带入各行各业，为各行各业提供24*7的服务各种垂直行业。视频信息服务。这些技术和产品的研发不仅需要技术广度，还涉及三维视觉感知、三维视觉合成、语音感知与合成三个完全不同的AI领域。它还需要技术的深度，因为很多技术需要从0到1的研发能力，而Mofa在这些技术领域拥有原创能力和独特优势。

二是艺术能力。虚拟内容的制作、虚拟IP的打造不仅需要技术，还需要强大的艺术能力，更重要的是技术与艺术的无缝结合。 Mofa拥有全流程美术能力，包括原画、模型、绑定、动画、特效、渲染和灯光等，我们的很多研发都是由技术和美术团队并肩完成的。

第三是产品和工程能力。我们团队很多人都有非常资深的互联网产品经验，拥有很强的产品和工程能力。比如我们正在把虚拟直播服务产品化、标准化，让每个策划和运营团队都可以基于这个虚拟直播产品来创建和运营自己的虚拟IP。此类产品不仅需要强大的技术和艺术能力，还需要强大的工程和产品能力来支撑，才能真正为行业赋能并落地应用。

第四是服务的广度。 Mofa为虚拟IP的创作提供全方位的虚拟内容制作能力，从影视动画、游戏等长内容形态，到虚拟短视频、虚拟直播、虚拟IP线下实时等新内容形态交互、全智能多模态虚拟数字人，应用场景覆盖各个垂直领域。 Mofa希望成为虚拟内容产业和虚拟数字人产业的基础设施。

2.可优化空间

EW：在之前的采访中，我们提到Mofa正在构建一个虚拟世界，虚拟+X，目前它面临着哪些挑战，赋能“虚拟+”这些问题如何解决？

Mofa：虚拟内容+ 过去，虚拟IP或者虚拟人主要生活在封闭的虚拟世界中，比如影视动画或者游戏中。接下来，他们将走出虚拟世界，加入各个行业，比如虚拟KOL+X、虚拟老师、虚拟心理学家、虚拟主持人等。

我们认为挑战主要来自两点。首先，技术和产品不断成熟，使我们能够高质量、高效率地制作各种三维虚拟内容，同时，我们也可以在虚拟世界中高效地创建各种虚拟数字人。这就是我们所说的虚拟+设施建设的基础。有了这个基础，内容策划者和运营者就可以发挥自己的才能，打造各种虚拟内容，打造各种虚拟IP。第二个是技术和产品进入市场，并真正与行业融合在一起，以形成一个封闭的业务循环并为行业带来真正的价值。

这两件事需要整个行业人民的协作努力。一方面，对于MOFA，我们正在开发各种智能，标准化和工业化的虚拟内容生成管道；另一方面，我们正在与行业合作伙伴合作探索在各种垂直轨道中的虚拟 + X的实现。我们正在与垂直轨道的合作伙伴合作创建8-10个原始虚拟KOL，包括时尚，电子竞技，电子商务和漫画IP，以突破圈子以创建虚拟偶像，等等。

EW：MOFA如何改善公司的技术应用和行业集成功能？

MOFA：让我们以虚拟实时流式传输为例。如果虚拟实时广播希望成为下一个主流虚拟内容表格，则必须有一个基础架构来支持虚拟实时广播，允许每个用户（无论是专业客户还是普通用户）创建和操作高质量的虚拟实时广播内容。我们正在虚拟实时广播中进行以下尝试：

首先是继续优化我们的端到端虚拟实时广播解决方案并增强我们的技术和产品能力。例如，我们正在开发的人工智能改变语音的技术可以实时将任何人的声音转换为特定的配音演员的声音，这可以大大降低虚拟IP对配音演员的依赖性。我们还创建了一个虚拟的实时广播技能库，一个特殊效果库，开发虚拟的实时广播后端软件管理系统以及无缝将虚拟人员和真实人员相结合的技术，用于实时互动式AR实时广播，等等。 。我们希望为行业领先的虚拟IP提供一站式服务，在虚拟实时广播行业中建立基准案例，并让更多的人看到虚拟实时广播的经验，效果和商业价值。

第二个是生产化。现在，我们提供端到端全栈虚拟实时广播服务，这些服务是高端虚拟实时广播产品和服务。对于某些PGC或PUGC虚拟实时广播客户，他们可能更喜欢我们可以提供标准化的虚拟实时广播软件和硬件解决方案或产品。就像实时广播的基础架构一样，客户可以轻松执行内容计划，生产和运营。我们现在正在构建的虚拟实时广播框是这样的标准化软件和硬件产品，它允许每个垂直轨道合作伙伴以高频和高质量计划，生产和操作虚拟的实时广播。

第三是UGC。虚拟现场广播行业已经成熟。它不仅需要PGC和PUGC的虚拟实时广播，而且还需要UGC的虚拟实时广播内容来繁荣整个市场。这要求虚拟实时广播的门槛足够低。也就是说，在确保一定的实时广播效果的条件下，成本可控，易于使用。我们正在基于单个摄像机建立虚拟的实时广播产品，希望赋予大多数UGC用户组的能力，并使每个普通用户能够进行虚拟的实时广播。

第四个是适应VR/AR。与实时广播不同，虚拟实时广播可以与VR/AR无缝连接，为VR/AR提供高质量的三维虚拟实时广播产品。用户只需要戴上头盔即可在VR/AR中注视虚拟的直播。此内容表格还将为虚拟锚与用户互动带来新的方式。因此，我们还开发了将虚拟实时广播和VR/AR结合在一起的产品和服务。

✉接触我们（在8小时内回复）

与媒体相关的联系人：ewmedia@yingzaotimes.com

研究相关联系人：ewresearch@yingzaotimes.com

简历提交联系人：yahr@yingzaotimes.com

suggessestions或讨论