首页 电商 正文

虚拟人的底层技术是什么,柳夜熙又更新了获赞超千万

2024-03-21 20:31
admin

3条视频,增粉776万,获赞超千万。

12月12日,被上千万网友催更的“美妆博主”柳夜熙,在抖音更新了一条视频。

一条狭窄幽暗的街道,柳夜熙手撑一把油脂伞,走进一家店铺。电视机中出现一则8岁小女孩的“寻人启事”。

“怎么最近都是你在店里,你姐去哪了?”柳夜熙问。

“我姐啊……她出去了。”阿一犹豫片刻后,回答道。

画面一转,阿一姐姐出现,在看到柳夜熙后她转身跑进一个充满电子设备的昏暗厂房,这里杂线铺满地面,无数个电脑屏幕上闪动着正在传输数据的大脑图形,8岁的小女孩正躺在床上,头上戴着仪器。

“你连孩子都不放过”,柳夜熙拿出手中的魔法笔,准备动手,阿一阻止,随后柳夜熙为他画上了看不见的眼影,姐姐现出原形,柳夜熙“收妖”成功,姐姐和她的女儿得救。

“柳夜熙,这……只是个开始。”剧情结束。

尽管只有4分钟,但叙事流畅,画面感真实,充满了赛博朋克的味道和电影质感。

评论区,有人称赞“我竟然在抖音!看电影!!!”“白嫖这么高级制作有点不好意思”,还有人评论“元宇宙今天又涨了”。

值得注意的是,视频的下面,除了时下最火热的“元宇宙”,还打上了“脑机接口”的标签。

截至目前,有关“柳夜熙”“柳夜熙是谁”“终于等到柳夜熙更新”“柳夜熙特效”等相关话题在抖音上已有超过7.6亿次播放,都在挖掘和创作这个被抖音称为“中国第一个元宇宙博主”虚拟偶像背后的故事。

事实上,虚拟偶像并不是全新概念。从洛天依带货直播,到爱奇艺打造虚拟人物才艺竞演节目《跨次元新星》……虚拟人物的出现,不仅为“Z世代”带来新鲜的互动体验,也给艺术家的创作过程注入新灵感。

但也有观点认为,柳夜熙在技术上并没有任何突破,之所以一夜爆红,是迎合了市场对于元宇宙概念的狂热情绪,属于新瓶装旧酒。

柳叶熙带来的讨论,和对元宇宙的认知延展。不少观点已经从运营角度讲清楚了,本文则试着从技术角度,还原柳叶熙的技术背景。

虚拟人起源于日本动漫的角色发展,最早的虚拟偶像鼻祖要算2007年出现的“初音未来”。作为一个以语音合成引擎为基础设计的音源库,初音未来能唱无数首歌曲,和ladygaga同过台。

如登上21年春晚的“洛天依”,B站网红“yoyo鹿鸣”,抖音爆红的“小狐狸NINICO”,屈臣氏代言人“屈臣曦”,都属于这一类,并且借助次元流量,都已成为热门IP,通过代言、商演、直播等成功变现。

2019年,哔哩哔哩甚至专门为二次元虚拟偶像举办了一场名为BilibiliMacro的线上演唱会。初音未来、洛天依以及作为虚拟主播的KizunaAI、白上吹雪等在演唱会的舞台上出现,瞬间引起轰动。

柳夜熙也仅仅128秒。

如走时尚路线的虚拟人物“翎”,外貌东方,身材出众,热爱国风,善京剧。这类有个性的虚拟KOL,一方面具有新事物的流量热度,一方面容易吸引大量次时代消费者关注,且不会有真实偶像的塌台风险,成为广告商的新宠。2020年5月出道,目前已签下多家大牌合作。

按照主办方的说法,这是一个2.5次元的形象设计,处于二次元动漫形象和三次元的真实世界人物形象之间的位置。

——1.高精度原画设计;2.高写实3D建模;3.导入高水准的虚拟人引擎;4.高精度动捕;5.高精致的修帧渲染。每个步骤都耗时耗力,不懂行的人很难做好。

首先是3D建模,要做到高写实,除了皮肤,毛发的细节精细还原之外,难点在于如何做到表情自然,说话口型不失真。相较于原理相似的语音合成技术,将声音、口型、表情匹配适宜要难得多,很容易造成“僵硬木讷”的观感。

纯动画的特效设计成本高昂,所以,每个虚拟人的背后其实都有一个实时驱动的真人,这群动态捕捉演员和配音演员都称为“中之人”(驱动着虚拟形象的真人),将他们的言行嫁接到角色身上,是最常见的操作。

行动演员的动捕服里包含多个传感器节点,用于采集运动动作,手套里也会有十多个节点,用于采集手部关节动作。高精度的动态捕捉,一方面依靠背后中之人的表演技巧,另一方面要求技术能够将中之人的表演有效捕捉。柳夜熙的连贯动作也和背后演员分不开。

比如,为《泰坦尼克号》《头号玩家》等提供过特效支持的公司--数字王国打造的教育路线的高仿真虚拟人“小艾”就是高精度动捕的作品。

“小艾”的制作以Momentum为核心技术,面部表情上运用了超高精度的眼球追踪,甚至可以捕捉到演员的眼球震颤;在头发处理上,能根据演员不同动作幅度,进行重力计算,同步摆动,逼近真实效果。

最后的渲染是所有动画设计不能绕过的重要一环,最终成品到底几分逼真,都靠这个过程的修饰,也是众所周知的耗时。

2019的科幻冒险电影《阿丽塔:战斗天使》,由《阿凡达》《泰坦尼克号》的导演卡梅隆操刀,讲述26世纪一个拥有机械手臂少女的战斗故事。为了效果逼真,后期渲染4.32亿小时,一度成为当时的热点新闻。

三万台电脑,800名技术人员同时工作,因为电脑高负荷运转发烫,甚至低温时能看见工作室有热气往外冒。

越是要求逼真,渲染过程要求越高。

仅仅完成一个128秒柳夜熙就需要涉及到这些复杂的技术。从本质上讲,她是一个出色的后期特效作品,就像视频下有一个7.7万赞的热评“不买票就能看电影了”。

不可否认的是,柳夜熙暂时不能和观众互动,属于剧中角色,类似于游戏中的NPC。而另外一种能够和观众互动,能实时反馈的虚拟人也在研究之中。

齐耳超短发,碎刘海,高鼻梁,若隐若现的几点雀斑,一张大气的“国际脸”加上177的身高,模特形象呼之欲出。

她就是博采传媒设计的超写实虚拟人--20岁的马当飒飒,英文名Madam-ZAZA。当你和她四目相对,你可能会觉得这位20岁的女孩就是真实的。

更惊喜的是,这是一个能够独立思考的虚拟人。比如可以和现场观众实时笔心,给受众带来全新的沉浸式互动体验。

马当飒飒正如电影《Her》中的萨曼莎,都是带有自我意识的虚拟角色,能与人类产生情感交互。

要让虚拟人能够像真人一样兼具IQ和EQ,进行有逻辑、有个性的交互和反馈,目前的技术还在探索中。

为了给飒飒“长脑子”,博采传媒采用的是自主研发的超写实引擎与实时互动算法,由于技术的限制,她的“栩栩如生”也才展现一个小角,进一步的互动也在开发中。

柳夜熙这类制作完成再发表的虚拟人,用的都是离线渲染技术,能够为了追求高精度不计时间成本,多用在电影的后期特效上。

若要像马当飒飒一样实时互动,也需要实时渲染,大量数据表明,延时控制在100ms以内,观众才能感受到声画同步。一般这种技术多用在游戏上,对设备要求高。

相对游戏,超仿真虚拟人对应的身体动画、表情动画、毛发模拟、布料解算、灯光反射模拟等一系列计算渲染需要更加强大的算力支持。

如三星旗下StarLabs实验室在2020年CES上带来了此类智能“虚拟人”项目设想—Neon。

在STARLabs的设定中,Neon外形酷似人类,主要出现在各类职场中。同时利用AI,在和人类的沟通交流中不断学习,持续完善角色的智能性。

清华大学的虚拟学生“华智冰”也是类似的例子。

据澎湃新闻,华智冰不仅会四种舞姿,可以根据音乐的急缓调整动作,还可以根据某个字作诗,并可以根据某几个关键词创作一幅画,甚至可以写一些短文章。

研究团队目前对“华智冰”的学习规划和Neon类似,都是先进行大量数据包的输入录入基础信息,然后通过AI进行自主学习,能自己生存。

虽然,“华智冰”陷入一系列“AI换脸”的舆论风波,但这种设计初衷是很好的。

这类离开了“中之人”,能够独立思考的虚拟人靠AI技术驱动,他们能够理解人类的言行举止,同时做出适当的反馈。

这类角色可以担任元宇宙时代中人机交互的接口,相当于互联网时代的APP的功能。

上述两种虚拟人角色,无论是“中之人”操控还是AI操控,都有他们的用武之地。

目前的个人虚拟人角色还只有少数明星拥有,比如:黄子韬、迪丽热巴、张艺兴等,这些也是具有商业价值的二次元角色。随着技术发展,会越来越普及。

元宇宙是和现实世界平行的存在,现实世界里长什么样子,元宇宙就会是什么样子。在这个世界中,每个人都会有属于自己的“虚拟人”。像《头号玩家》中展现的一样,个人穿上穿戴设备后,成为自己角色的“中之人”,进入元宇宙的世界。

至于AI操控的智能虚拟人,也能应用在元宇宙的许多人工服务领域。比如商场售货员,博物馆讲解员等重复性工种岗位,虚拟人可以比人类做得更加出色,而且永远不会抱怨,不会疲倦。人类则可以从重复劳动中解放出来,享受生活。

当下的大多数游戏,角色设定都是二次元风格,和真人还是有很大区别,沉浸感有所欠缺。元宇宙结合超仿真虚拟人,将角色外形设定为个人现实中的实际长相,或者自己的理想长相,都会提升角色的沉浸感,拉近和现实世界的距离。

比如美国的捏脸平台--Genies,是基于AI的虚拟形象设计平台。用户可以根据喜好设计自己的头部形象,整体角色呈现头大身体小的戏剧效果。

但这种操作有门槛,耗时长,并且常常捏完之后发现不像自己。就此衍生出了“游戏捏脸师”的行业,“兼职游戏捏脸师月入上万”的话题甚至在前段时间上过热搜。

据后浪研究所,一位95后广东游戏捏脸师表示,游戏捏脸数据需求量大,普通原创作者月入上万,优秀的创作者一个月能赚6-7万。

字节跳动也在今年9月上线了一款捏脸APP—“Pixsoul”。

虚拟人成型之后,如何进入元宇宙,操作虚拟人,要从穿戴设备开始。

目前已经有了一种可以算为元宇宙先导体验的产品--协同办公的虚拟会议室。如Facebook打造的VR工作平台HorizonWorkrooms就是一个很好的例子。

先用VR设备扫描现实办公桌面,连上电脑,带好头戴眼镜。眼前会出现一个虚拟空间,键盘和电脑会和现实位置一样,且电脑屏幕上的内容已完全和现实同步。所有的与会同事,彼此之间在现实中或许相距很远,通过vr都能聚在一起,每个人拥有一个二次元化身。还配上了手势捕捉等功能,让人物形象更加生动。

但不少用户反应它的头戴设备很沉重。

,甚至有的人佩戴VR眼镜会引起头部3D眩晕症等。针对这一问题,不少科技公司其实早已在探索的路上。

Micorsoft的HoloLens系列,整体设计简单,在向轻便方向发展,也得到了市场的认可。在今年4月的美国陆军招标中,微软中标,十年内交付超过12万副头戴式AR设备,合同总价值可能高达218.8亿美元,就是针对HoloLens系列的定制开发。

Facebook将上万人力投入在了AR/VR业务上,扩展半导体和脑机接口的一系列专利。

苹果有计划在2022年发布首款穿戴式头显设备,不同于FB,Apple专注是VR和AR一体的头显设备,AR眼镜会和手机共存。

阿里也正在研究裸眼3D技术。即在不佩戴眼镜的情况下也能看到3D效果。

短时间内,柳夜熙火了,她的样子是否就是未来元宇宙中普通人的样子?随着技术的发展,人物到底能多逼真,到底能多智能,这个问题还难以回答,但虚拟人作为元宇宙的角色基础,它的重要性是毋庸置疑的。

相关文章

  • 三星将展示“虚拟人”项目成果 能自主生成表情动作

    三星将展示“虚拟人”项目成果 能自主生成表情动作 该宣传片视频显示了一组酷似人类的人,但目前还不清楚其中究竟有多大部分是由电脑生成。,”他展示了同一位女性的两张对比照片,上面覆盖着代码和其他图形。,米斯特里最近接受印度媒体采访时分享了他对“虚拟人”如何适应世界的看法。

    2024-03-22 08:57
  • AI新基建打样,百度智能云展示推动产业智能化“内功心法”

    AI新基建打样,百度智能云展示推动产业智能化“内功心法” 如果让你见到二十年前的自己,和他(她)进行一次对话,你会和他(她)聊点什么?不用脑补了,这一如同科幻电影般的场景,已经在"百度世界2020"大会上演了。9月15日,百度联合央视新闻举办的"百度世界2020"大会以线上直播的形式召开。在这场以"万物智能"为主题的大会上,央视主持人康辉、百度创始人、董事长兼CEO李彦宏和20多年前的"小康"、"小李"两位虚拟人,展开了一场"跨越时空"的精彩对话,也让全

    2024-03-21 21:59
  • 百度CTO王海峰发布具备认知能力、可机机对话的终端虚拟人

    百度CTO王海峰发布具备认知能力、可机机对话的终端虚拟人 (百度CTO王海峰发布了具备认知能力、可机机对话的终端虚拟人“小康”和“小李”)不止“人机对谈”还能“机机对话”!央视直播虚拟人超有梗对谈不止是虚拟二次元的卡通形象,也不止是模拟真人担当主播,这次百度直接将20多年前的康辉和李彦宏请到了他们自己面前,在央视直播间里展开了一场“跨时空对谈”。,(百度CTO王海峰在现场重磅发布百度大脑6.0)生成、展示门槛大大降低虚拟人技术应用潜力无限此次虚拟人还有一

    2024-03-21 21:58
  • 虚拟偶像单条涨粉130万,虚拟人会在短视频创造出一个元宇宙吗?

    虚拟偶像单条涨粉130万,虚拟人会在短视频创造出一个元宇宙吗? (相关文章:《2个月涨粉500万!百万设备烧出的特效流,在抖音上还有多少机会?》)目前,创壹视频团队人数达到150人左右,其中超过一半都是后期技术人员,大多来自于影视公司。,期间,元宇宙概念被讨论多次,但梁子康与团队忍住没有提前“剧透”,而是将这份神秘一直保留到10月的最后一天才公开上线。,在虚拟人身上,不仅让品牌方看到了更多可能性,也可以避免MCN与博主之间出现摩擦问题。

    2024-03-21 20:39
  • 星期六表示年内有望推出首个虚拟人IP账号 或通过带货等方式变现

    星期六表示年内有望推出首个虚拟人IP账号 或通过带货等方式变现 星期六在互动平台表示,公司一直关注元宇宙相关领域的发展。公司整合了国内顶级的制作团队和IP资源,当下选择了短视频平台孵化相关虚拟人IP,并做了相关制作开发,预计年内有望推出首个虚拟人IP账号。未来,虚拟人IP账号考虑以发展IP授权、商务广告及虚拟人带货等相关方式进行商业变现。另外,目前已经具备将数字虚拟人或虚拟偶像带入相关直播电商业务中的部分基础设施建设,公司未来待相关方面成熟后,将尝试构建虚拟人

    2024-03-21 20:31
  • 数字虚拟人进入3.0,用来直播带货却费劲 虚拟人=真人套假头

    数字虚拟人进入3.0,用来直播带货却费劲 虚拟人=真人套假头 这种新奇方式引起不少人围观,数据显示,“狼哥”2020年3月5日的那场直播,观看人数一度达到142万。,华创证券在其研究报告中也表示,当前虚拟人高度依赖脚本,或只能对简单的随机问题应变,深度高级人工智能技术仍然有待开发成熟。,如何更好地解决目前虚拟人交互性不佳的问题?李士岩在接受陆玖财经提问时表示,交互性其实是一个比较有争议的事情,一方面希望交互感更好,另一方面又担心用户太过沉迷,需要基于哲学、社

    2024-03-21 20:28
  • AYAYI和柳夜熙热度下降 养一个“虚拟人”要花多少钱,它又能为你赚多少?

    AYAYI和柳夜熙热度下降 养一个“虚拟人”要花多少钱,它又能为你赚多少? 集原美、AYAYI、柳夜熙、翎_Ling、A-SOUL、韬斯曼、aespa、华智冰、崔筱盼、希加加……虚拟人已经毫无疑问地走进了我们的现实世界。,百度在2019年也发布过一款虚拟数字人小浦,与浦发银行、虚拟人技术公司原力动画合作,应用于金融客服领域。,演艺型虚拟人市场更加“混乱”,质量良莠不齐,优劣差异化明显,技术、内容跟不上概念,加上高居不下的生产成本,商业化并不容易。

    2024-03-21 20:27
  • 虚拟人这个赛道融资已近百起,VC投入2500多亿

    虚拟人这个赛道融资已近百起,VC投入2500多亿 但当建模和动作捕捉的技术不断提升,无论从形态、表情,还是声音,超写实虚拟人都与真人越来越相似。,另一组公开数据显示,截至2021年8月18日,B站相对有关注度的3472个虚拟主播中,1827人当月营收0元,无收入者超过半数。,“中科深智和迈吉客也都在往第三层——人工智能驱动数字模型上走,决策层投了重力聿画,是全网最能带货的虚拟主播。

    2024-03-21 20:25
  • 2022年李佳琦的对手是虚拟人,虚拟主播带货,有人买单吗

    2022年李佳琦的对手是虚拟人,虚拟主播带货,有人买单吗 有用户开始感慨直播届的内卷程度,“李佳琦的对手已经变成了非人类?”实际上,早在2020年五一期间,就有虚拟偶像在直播间里带货了,彼时虚拟偶像洛天依和李佳琦同台直播,关注度颇高,一度登上微博热搜。,虚拟人行业的技术服务商杨明认为,二次元形象在很多Z世代心中根深蒂固,他们更愿意关注和接受虚拟主播。,”据纪智辉介绍,世优科技已将原来To大B的计算能力和硬件资源“降级”为标准产品,放到云端共享,变成了3D

    2024-03-21 20:18