鹤啸九天 自律更自由,平凡不平庸 Less is More

元宇宙-Meta-Universe

2021-11-03
鹤啸九天
阅读量

Notes(温馨提示):

  1. ★ 首次阅读建议浏览:导航指南
  2. 右上角工具条搜索文章,右下角二维码关注微信公众号(鹤啸九天),底栏分享、赞赏、评论
  3. ★ 转载请注明文章来源,知识点积累起来不容易,水滴石穿,绳锯木断,谢谢理解
  4. ★ 如有疑问,邮件讨论,欢迎贡献优质资料


  • 【2022-1-13】北大出品,最强元宇宙报告,200页干货
  • 【2021-10-31】清华大学:2021元宇宙研究报告
  • 【2022-1-28】Meta: You will own nothing, and you will be happy… 元宇宙:让你一无所有却难以自拔
  • 【2022-10-26】可视化数字人技术在 Soul 的应用,凭借自己的虚拟化身,基于自己的信息图谱或推荐,体验多样的沉浸式社交场景,在接近真实的体验中去交流娱乐,最终找到与自己志同道合的朋友建立社交关系。
  • 【2023-5-9】周杰伦官宣数智人「周同学」,未来将举办元宇宙演唱会, 周杰伦现身中国移动咪咕元宇宙总部,与中国移动达成元宇宙领域系列合作。在现场,周杰伦发布了中国移动与好莱坞特效团队 WETA 为其打造的超写实数智人「周同学」,并宣布「周同学」成为中国移动动感星推官、5G 元宇宙星际开拓官和 5G 视频彩铃推广大使。

元宇宙

数字人

虚拟人历史

【2022-1-24】虚拟偶像发展史:虚拟偶像,会有光明的未来吗?

  • 2007年作为世界首个真正意义上的虚拟偶像初音未来诞生, 奠定了虚拟偶像的养成型孵化模式。粉丝直接参与创造价值,并进行线上分享和传播
  • 2012年,这种模式五年后,在中国本土化落地。洛天依的专属声库正式落地,我们迎来国内第一款虚拟形象到来。出道后,她的发展速度同样迅猛,留下了《权御天下》《刀剑如梦》等代表作,顺利登上湖南卫视、央视等主流舞台,取得了一定大众知名度。
  • 2016年年末,虚拟主播绊爱亮相Youtube,凭借蠢萌设定和犀利画风圈粉众多。不同于初音未来、洛天依,绊爱除投稿视频内容外,还可以通过直播和用户进行即时交流,带来更深层的互动体验。
  • 2018、2019年,在短短两三年时间中,虚拟主播队伍急速扩张,光在日本数量就已破万,在不同直播平台玩得风生水起,辉夜月、电脑少女小白等顶流代表强势崛起,共同开启“虚拟主播元年”。B站最先推出虚拟次元计划,孵化出国内初代虚拟UP主小希。其实仍是借鉴日本模式,没能展现出独特吸引力,市场反响平平。但随着新媒介渠道的拓展,技术不断的创新完善。国内有实力有技术的大厂阿里、百度、B站、虚谷未来科技纷纷进场。
  • 2020年,虚拟偶像圈层耕耘多年的生态已臻成熟,早有全面爆发之势。随着短视频、电商直播的火热,虚拟偶像面临更广阔的大众舞台,在探索商业变现的无线可能中,也面临新的挑战。当下“虚拟偶像的江湖”仍在继续,且故事远比大众想象的精彩。

摆脱御宅文化的刻板标签,是虚拟偶像发展的一大趋势。在国内特定的文化土壤下,孵化出了一批极具本土属性的虚拟主播。

  • 由蔡明老师扮演的白毛萝莉菜菜子,出道便迅速圈下40多万粉丝。她的首秀直播登上站内人气榜榜首,#蔡明 菜菜子#的微博话题空降热搜。除二次元粉,菜菜子成功撬动起用户增量市场,吸引了许多新用户围观、试吃。
  • 美妆垂直领域的IMMA酱,少儿教育领域的班长小艾都是通过差异化定位,独特识别的形象,在这条激烈赛道中黑马突围。班长小艾由数字王国旗下公司虚谷未来科技打造,定位是国内首位虚拟少儿阅读推广人。作为一名12岁的狮子座女生,小艾主要面向的是学前和小学低年级段的用户,通过分享学习、生活,引导和陪伴少儿健康成长

案例

虚拟客服

“黑科技”出乎所料,百度终端虚拟人3.0重磅发布

终端虚拟人3.0-虚拟客服智能大屏产品示意图

2019年,通过百度智能云与浦发银行联合打造的金融数字人“小浦”就已亮相。百度基于人工智能、感知技术、数据驱动等技术,为金融服务构造了一个具有智能感知、自然交互和精准分析决策能力的数字世界的“人”。 作为国内首个银行“虚拟员工”,“小浦”具备3D形象,表情、动作、语气、语调逼真,不仅能实现视觉、听觉多感官的实时交流互动,还能利用深度学习技术学习专业领域知识,帮助员工完成标准业务流程。

【2021-12-28】深圳地铁20号线应用虚拟人客服,深圳地铁“新线路”今天开通,首次无人驾驶

  • 不仅列车全自动驾驶,连客服中心也换了,现在,坐地铁想要任何帮助,找智能客服中心的“小姐姐”没有错。补票、充值、问路…只要开口问,她就会非常温柔地回答你。害羞的朋友当然也可以直接点击选择指令。“刷脸过闸”、“刷手进闸”

百度

百度智能云,app端,云屏幕、电话端、小度屏

  • APP端
    • 数字智能客服:提供基于数字人形象的智能客服,配合图文/卡片/点选按钮等组件提供更高效的客户服务,有效提升客户体验。
    • 数字理财经理:基于金融知识库,数字人可化身数字理财经理,为用户提供财富体检,理财推荐等服务,有效提升用户的服务覆盖及转化。
    • 数字商品导购:基于商品知识库及语音交互能力,数字人可根据客户需求进行商品讲解及推荐,扮演数字商品导购员提供全新的线上购物体验。
    • 数字培训师:基于课程脚本,提供可与学员智能问答的数字人培训师,服务于培训、教学、演练等具体场景。
  • 云屏
    • 数字展厅讲解员:让线下展厅大屏可以内置数字人服务,基于表情、动作、图文等多种展现形式,提供主动迎宾,展厅讲解、互动问答等能力,实现智能展厅的体验,有效提升展厅科技感。
    • 数字大堂经理:提供多种规格的数字人云屏,在线下营业厅等场景中提供数字大堂经理服务,可实现取号、叫号、咨询、业务办理等能力。
    • 数字前台:在酒旅场景中,提供多种规格的数字人云屏,打通已有的业务系统,顾客可在数字前台直接完成业务办理,有效提升效率、降低员工成本。
  • 电话端:视频彩铃,用户等待接通电话时可出现不同类型数字人营销视频,打造5G通话时代亮点。
  • 小度屏:陪伴数字人, 在小度屏中内置数字人助理,唤醒小度屏后与用户进行交流互动,可重点应用于儿童及老人陪伴等居家场景。

【2024-5-8】百度智能云推出新功能:文生数字人, 大模型卷爆数字人:一句话5分钟实现定制,跳舞主持带货都能hold住

清华大学《虚拟数字人研究报告2.0版》数据显示

  • 从头部企业的布局来看,面向B端的数字人产品服务是市场的主要组成部分,占比达到79%。
  • 而随着大模型技术对数字人应用模式的颠覆,不仅中小企业不用再对6位数的3D高精度数字人望而却步,C端的应用也将得以拓展。

游戏角色

【2021-12-23】江湖无常,寻味 AI 虚拟人物的执念与命运

  • 金庸先生在《天龙八部》中所说,一个人的一生诚然会很大程度上受性格影响,但也不完全由性格决定,多出来的那部分就是运,或者说是机遇,也就是人与环境发生交互的结果。
  • 慕容复想当西夏的驸马,但却未能如愿,这是求而不得虚竹想当和尚,却反倒成了西夏驸马,这是不求反得
  • 无论是小说还是相关游戏,《天龙八部》中的人物角色几乎都怀着各自的执念与意图,体验着风起云涌的写意江湖。

《天龙八部 2》手游在 rct AI 自研的分布式 AI 平台 Deterrence 的加持下,玩家在游戏中的言行举止,不仅会让角色给玩家带来极具个性化的对话内容,还会通过对话内容直接影响到这些江湖儿女的行为方式,从而真正实现犹如鲜活生命般极具动态感的武侠世界。作为 Y Combinator W19 成员,rct AI 始终坚持运用 AIGC 打造真正的 Metaverse。在由 VentureBeat 和 InvestGame 发布的“全球游戏行业最活跃的风险投资基金”名单中榜首和次席的两只基金 Makers Fund 和 Galaxy Interactive 的支持下,rct AI 推出了全球首个分布式 AI 平台 Deterrence,现已成功接入多个由来自不同国家与地区的团队打造的数个 Metaverse。

混沌球背后的核心技术

混沌球算法提升游戏交互体验

  • 传统的叙事,无论是单线的故事,还是现在几乎所有的所谓 “交互式电影”,都仍然是基于 “事件” 作为叙事的基本单元,也就是什么事情发生了,然后什么事情发生了。传统的交互式数字娱乐内容,无非是让用户可以自由的从给定的两到三个选项中,选择不同的接下来会发生的事件,整个叙事仍然是基于预先定义好的路径来往前推进的。
  • 而混沌球与传统的叙事方式完全不同,我们将 “事件” 替换为一个又一个明确定义了入口和出口的黑盒,在每一个切片的混沌球里,开始和结局(一个或者多个)是确定的,但是玩家每一次如何从开始到达结局,则是混沌的,是路径不明确的。这个路径只有当玩家不断的和虚拟世界里的虚拟人物 NPC 作出交互,这些 NPC 根据深度强化学习训练后的模型作出动态且实时的反应来推动剧情发展之后,才会被确定下来。这也是我们为什么命名为混沌球算法的原因。因此,做到真正的交互式叙事的关键,在于将叙事的中心,从故事本身,转移到故事里的所有可能参与者身上,由所有可能参与者的逻辑来共同推动和串联不同的剧情可能性。

仿真引擎工作方式

北京昌平

【2022-8-3】真香现场,昌平区首个虚拟代言人“昌小平”上线!

  • “我们主要通过真人动作采集,全身实时动作捕捉系统,将人物动作完整映射到虚拟人的骨骼上,实现‘昌小平’的动作驱动。”二六三网络通信股份有限公司设计部总监李小刚告诉记者,虽然“昌小平”体现为一个数字人,但其背后有着一整套基于人工智能为主的现代科技力量。
  • 基于元宇宙创作背景,在场景设计中,技术团队融合了昌平地图关键元素、长城和回天大脑数字场景,然后将数字人、场景、动作输入到虚幻引擎进行合成。目前虚幻引擎是全球最先进的实时3D创作工具,能全方位的拟真化处理,让“昌小平”更生动也更具表现力。
  • “昌小平”由昌平区经信局总指导,为了呈现更加自然、真实的效果,“昌小平”背后的技术团队——二六三网络通信股份有限公司对动作、神态、声音、语调采集后,通过精准的处理和深度学习的算法,赋予其极强的智能体系。
  • “整个项目中最核心的是需要解决实时的音视频互动。”据李小刚介绍,在制作过程中,“昌小平”的收信动效非常复杂,技术团队通过在虚幻引擎下不断的仿真调优、反复模拟,最终解决了音视频和动作最自然的匹配,实现了元宇宙“沉浸感、拟真感、低延迟”三大特点。
  • “‘昌小平’是回天大脑2.0升级过程中的一个灵感,最初设想是通过生动的方式介绍昌平和回天大脑的相关情况,加强与社区、居民的互动。”昌平回天大脑联合工作组成员龙慧告诉记者,下一步,将运用人工智能技术,让“昌小平”更加“聪明”,实现线上线下大会直播、语音交互等,成为昌平突破次元壁与场景和观众、听众链接的新纽带,助力企业元宇宙应用。

oppo小布助手

【2022-6-22】万玉龙:OPPO小布数字人的多场景应用实践ppt资料

  • OPPO小布助手是国内首个月活破亿的手机语音助手,截止2021年12月,已累计覆盖2.5亿设备,月活用户突破1.3亿,月交互次数突破20亿。2021年9月底,小布助手发布了首个数字人形象,成为业界首个基于虚拟人多模态交互的手机智能助手,融合语音、NLP、视觉等多模态AI算法,结合端云一体的工程架构设计,为用户提供了多终端、全场景的智能交互体验。
  • 小布助手是OPPO、OnePlus和Realme三个品牌的手机和IoT设备的内置智能助手,目前已经拥有语音、建议、指令、识屏和扫一扫五大能力。我们致力于将小布打造为“机智、有趣、温暖”的智能助手,为亿万用户提供“多设备、跨平台和多场景”的智慧服务体验。

创业公司

【2023-2-28】AIGC助力“数字人自由”,新华智云靠什么?, 新华智云是国内较早投身数字人的科技公司之一,2019年便试水数字人,开创了新闻领域实时音频与AI真人形象合成的先河。2020年的地方两会报道中,有7省的两会报道使用新华智云虚拟主播。截至2023年2月,超过500家媒体、政府机构、金融机构、会议会展企业使用新华智云虚拟主播。得益于多年MGC(机器生产内容)和数字人技术储备,新华智云如今已具备AI全链路生产数字人的能力,AI训练出的数字,不仅外形逼真,类型多元,而且生产速度不断加快,成本日渐降低,应用场景越发全面。

基于深度学习模型、动作模拟、情感模拟等智能科技,只需采集2-5分钟的真人视频,AI最快训练1小时,即可生成形象逼真、表情到位、口型匹配的数字分身。 相比过去,现在数字人面部精细度更高,发音和口型更精准,肢体动作更自然,而且数据采集时间缩短75%,训练速度更是提高约100倍。越接近真人外形的数字人,越能提供更亲切、自然、高效的服务体验,让人产生信任。因此,2D仿真类数字人往往适合社交、媒体、金融、电商直播、教育等需要“多交流”“高互动”的场景。数字人可以“扮演”主持人、新闻主播、金融客服、导购员、讲解员、直播博主、老师等角色。在新华智云数字人制作平台中输入文字,一段由数字人播报和讲解的视频,就可以快速生成。

柳叶熙

B站爆火数字人ip 柳叶熙

柳叶熙:数字红娘

imma

【2024-5-7】日本数字人imma, 覆盖各个主流平台

虚拟人创建工具

国外MetaHuman

百度智能云

【2021-08-24】简单、快捷、低成本的超写实虚拟人平台来了……

新发布的百度智能云“数字明星运营平台与灿星计划”,有可能就是这样的平台,它正是朝着让超写实虚拟人开发,变得更简单快捷、更低成本、更易运营这一方向去的。

百度“数字明星运营平台”能做到: 百度智能云曦灵-智能数字人平台

  • 用 AI 智能的方式 快速打造数字虚拟偶像
    • 打造的虚拟偶像既有 3D 超写实的、直接在真人基础上生成的,也有半写实或二维的、宠物化的,都能做到高效、快速生成。而且是一体化智能平台,既能打造 IP 也能运营 IP,和我期望的新平台非常接近。
    • 8月18号,和央视新闻联合举办的“百度世界2021”上,已经展示了几个典范案例,包括将央视著名主持人、真人明星龚俊都变成了数字虚拟人,以及 Q 版的火星车数字人等,展现了各种可能和场景。
  • 用简单快捷的 4D 扫描+人工智能 直接打造超写实虚拟人;已有超写实虚拟人开发实在是太麻烦了:
    • 高精度原画设计;
    • 高写实 3D 建模;
    • 导入高水准的虚拟人引擎;
    • 高精度动捕;
    • 高精致的修帧渲染;
  • 只需高精度照片或摄像头 就能生成超写实虚拟人

开发过程:

  • 第一步,用高精度 4D 扫描技术,对人体进行全方位扫描,捕捉真人的细腻表现。
  • 第二步,用人工智能机器深度学习扫描数据,并用人工智能算法组合驱动丰富真实的实时面部表现,从而超高精度还原真人模特。
  • 第三步,设定五个关键维度,即表情、口型、毛发、布料、身型,来打造超写实虚拟明星,尤其是加入了表情可变的口型合成算法,让用户观感更亲切自然,彻底解决口型和表情失真的问题。

  • (1)真人
  • (2)简单快捷办法:用标准人像照片摄像头来生成。这种方法只需要高精度照片或视频。
  • (3)比前两种方式更极致简单的方式:让普通人可以用一句话的简单描述,即可自动生成个性化 3D 虚拟数字形象。

兼容导入已有 3D/2D 模型

  • 三种驱动模式:AI 驱动、拟合驱动和真人驱动,让你既可以不需要真人直接用 AI 智能驱动,也可以用真人在背后进行“中之人”演绎。

代码 ER-NeRF

【2024-4-3】实时流式数字人,代码开源

目前数字人模型效果最好的是ernerf,其借鉴了nerf体渲染的思路,在输入维度上添加了音频特征,通过音频来影响渲染效果(控制嘴型)。

开源代码metahuman-stream基于ernerf模型实现了实时流式数字人

  • 支持声音克隆
  • 支持大模型对话: LLM模型支持 Chatgpt,Qwen和GeminiPro。要在app.py中填入自己的api_key。
  • 支持多种音频特征驱动:wav2vec、hubert
    • hubert提取音频特征
  • 支持全身视频拼接

总体流程

  • text输入可以来自websocket,实现数字人播报输入文字。
  • 可接入chatgpt,将chatgpt的回答做为text输入,这样就实现了数字人实时对话效果。
  • tts采用的免费edge tts,这个延时有点大。可以换成商用的tts模块,并且加入声音克隆,这样数字人效果更逼真。
  • 提取音频特征(音频转embedding)用的wav2vec模型,相应的ernerf模型训练时也要用wav2vec来提取音频特征
  • ernerf模型在这里面用的推理流程,根据输入的音频特征输出对应嘴型的image
  • 用python做rtmp推流网上没什么现成的库,大部分都是启动ffmpeg命令行进程来实现,但在有音视频同时推流时这种方式行不通。这块卡了比较长时间,最后还是用c++调用ffmpeg api函数来实现rtmp推流

在没有text输入时,通过输入全0的音频来控制嘴型不动,并且保持视频的连续。

性能分析

  • 帧率
    • 在Tesla T4显卡上测试整体fps为18左右,如果去掉音视频编码推流,帧率在20左右。用4090显卡可以达到40多帧/秒。
  • 优化:新开一个线程运行音视频编码推流
  • 延时: 整体延时5s多
    • (1)tts延时2s左右,目前用的edgetts,需要将每句话转完后一次性输入,可以优化tts改成流式输入
    • (2)wav2vec延时1s多,需要缓存50帧音频做计算,可以通过-m设置context_size来减少延时
    • (3)srs转发延时,设置srs服务器减少缓冲延时。

【2024-4-24】

  • MacOS 部署失败,缺乏GPU
  • Ubuntu GPU 部署:docker 启动失败
# 运行rtmpserver (srs)
docker run --rm -it -p 1935:1935 -p 1985:1985 -p 8080:8080 registry.cn-hangzhou.aliyuncs.com/ossrs/srs:5
# 启动数字人:
python app.py
# 如果访问不了huggingface,在运行前
export HF_ENDPOINT=https://hf-mirror.com
# 运行成功后,用vlc访问rtmp://serverip/live/livestream
# 用浏览器打开 http://serverip:8010/echo.html, 在文本框输入任意文字,提交。数字人播报该段文字

腾讯 MuseTalk

【2024-4-27】腾讯开源的数字人MuseTalk到底行不行?

场景

  • 图片数字人:让照片开口说话
  • 真人视频根据语音换嘴型

效果虽然还不是很满意,但总比 wav2lip 好

表情迁移

  • 【2022-1-24】iphone 手机自带标签迁移功能,imessage里可以通过摄像头捕捉表情,并应用到动画形象上。个性化拟人表情:选取肤色、头饰、眼镜等等
  • 【2022-3-18】asr与面部表情同步生成,Talking Head, 通过语音信号和一张常见的2d真人照片或者卡通图片,来生成一段与输入音频同步的人脸动画视频.

评论

负面

知乎, 元宇宙就是互联网进入瓶颈后找的一个概念而已,说白了还是互联网游戏。人生是逃脱不了的;但游戏可以,一个账户玩的不想要了还能换,能换也是能追求补偿的方式,元宇宙里可以吗?元宇宙里大公司用AI创作赚钱,用脚本执行任务赚钱(如挖比特币)。元宇宙里马太效应只会更加明显。人怎么样都无法脱离现实生活,物质满足才有了精神需求,试问在有绘画、歌唱、钓鱼等一系列现实活动可选的情况下谁愿意去虚拟中体验?

【2022-1-14】元宇宙有两种基本粒子,一种是傻子,另一种是骗子,傻子不断围绕骗子高速旋转,这就形成了元宇宙的物质基础——元子,在外界高能概念的激发下,傻子跃升到高能态,经过一段时间后再跃迁为低能态,并同时向外界寄出票子

正面

元宇宙简介

【2021-9-9】最近大火的「元宇宙」是什么?

如果问当下最火的概念是什么,那必然是元宇宙

元宇宙到底有多火,对互联网行业有多重要?从 Facebook 创始人兼首席执行官马克·扎克伯格近日的一段采访中可窥知一二。在 The Verge 的专访里,这家世界最大的社交平台掌舵者表示:希望在未来用 5 年左右的时间,将 Facebook 打造为一家元宇宙公司。

元宇宙概念的火爆还体现在,今年的 ChinaJoy 上有关元宇宙的发言屡见报端、连芯片巨头英伟达也忍不住“蹭热点”,等等。

那么问题来了,元宇宙到底是什么?我们离它还有多远?

什么是元宇宙?

元宇宙的英语是 Metaverse,Meta 表示“超越”、“元”, verse 表示“宇宙 universe”。

这个概念最早出现在 1992 年尼尔·斯蒂芬森的科幻小说《雪崩》当中,小说描绘了一个平行于现实世界的虚拟数字世界,在这里,人们用数字化身来控制并相互竞争以提高自己的地位,到现在看来,描述的还是超前的未来世界。

2018 年斯皮尔伯格导演的科幻电影《头号玩家》,被认为是目前最符合《雪崩》中描述的“元宇宙”形态。在电影中,男主角带上 VR 头盔后,瞬间就能进入自己设计的另一个极其逼真的虚拟游戏世界——“绿洲”(Oasis)。在《头号玩家》设定的“绿洲”场景里,有一个完整运行的虚拟社会形态,包含各行各业的无数数字内容、数字产品等,虚拟人格可以在其中进行价值交换。

如果说这些“元宇宙”都还存在于小说和电影中,那么在今年 3 月被称作“元宇宙”第一股的 Roblox 成功在纽交所上市,则似乎意味着这个虚拟世界想走向现实。

这也被外界认为是今年元宇宙概念爆发的起点。

Roblox 成立于 2004 年,是一家在线游戏创作社区公司。2011 年上线 iOS,2014 年上线 Android。2019 年,Roblox 的社区玩家 MAU 过亿,累计有千万名创作者使用过 Roblox 提供的工具来开发游戏。相比于其他大多数游戏,Roblox 中的游戏能够自己定义角色,同时着重满足玩家社交需求的设计,也拥有一套游戏内的经济系统。

在 Roblox 的招股书里,对元宇宙有更具体的描述,这家公司认为一个真正的元宇宙产品应该拥有 8 个属性:身份、朋友、沉浸感、低延迟、多元化、随地、经济系统和文明。

具体属性解释如下:

  • 身份:拥有一个虚拟身份,无论与现实身份有没有相关性。
  • 朋友:在元宇宙当中拥有朋友,可以社交,无论在现实中是否认识。
  • 沉浸感:能够沉浸在元宇宙的体验当中,忽略其他的一切。
  • 低延迟:元宇宙中的一切都是同步发生的,没有异步性或延迟性。
  • 多元化:元宇宙提供多种丰富内容,包括玩法、道具、美术素材等。
  • 随地:可以使用任何设备登录元宇宙,随时随地沉浸其中。
  • 经济系统:与任何复杂的大型游戏一样,元宇宙应该有自己的经济系统。
  • 文明:元宇宙应该是一种虚拟的文明。

元宇宙,到底依赖哪些技术?

“元宇宙” Metaverse 火了,这玩意到底是啥?

话说回来,1992年就提出的元宇宙,时隔29年,怎么突然就火了呢?很简单,时机问题。天马行空的想象,提早了就是疯子,把握住时机的,才是天才。

如今,之所以元宇宙会火,和前几年VR/AR技术风靡不无关系。而且,云计算、芯片、5G和人工智能技术的高速发展,也刺激了元宇宙的概念复苏。

从技术的角度来看,我们(似乎)已经摸到了元宇宙的门槛,不再像以前那样遥不可及。

元宇宙的底层技术,具体包括哪些呢?

粗略来说,元宇宙包括了这么几个方面的技术:芯片技术、网络通信技术、虚拟现实技术(VR/AR/MR/XR)、游戏技术(游戏引擎、游戏代码、多媒体资源)、AI人工智能技术、区块链技术。

元宇宙是数字宇宙,是平行世界。所以说,元宇宙是建立在数字技术基础上的,和IT、CT技术密不可分。

要支持庞大的元宇宙运作,首先必须要有极其强大的算力和算法。

  • 算力的根基是芯片,不用解释了吧?算法呢?是软件,更是长期的人才积累和生态经营。众人拾柴火焰高,只有更多的人才加入,投入更多的资源,才能一砖一瓦地把元宇宙搭建起来。

虚拟现实技术、游戏技术、AI人工智能,都属于IT范畴。站在CT通信的角度,元宇宙也是一个可以蹭的大热点。前面不是说“随地”嘛?没有通信,没有低延时的5G/6G/全光网,用户就不能接入元宇宙,只能在单机里自嗨,那还有啥意思?

最后还有一个区块链。区块链和元宇宙有啥关系?

当然有关系,前面不是说了元宇宙需要金融体系和虚拟货币吗?虚拟货币的背后,就是去中心化的区块链技术啊。不然你以为现在币圈的人为啥对元宇宙这么亢奋呢。目前国内出版的好几本元宇宙的书,作者都有币圈或链圈背景。

元宇宙概念为何在今年爆发?

Roblox 对元宇宙概念的阐述虽然更加具体,但要素众多,每个要素背后,还有着一连串的解释。这也说明这一概念的模糊性。

然而这不妨碍元宇宙成为一个好的故事。Roblox3 月份上市后,其市值达到 400 亿美元,相比 1 年前 40 亿美元的估值暴涨了 10 倍。App Annie 发布的全球热门游戏收入排名显示,7 月 Roblox 继续蝉联冠军宝座。[4]

恰恰是因为元宇宙概念目前没有一个简单、具体的定义,吸引互联网公司们进入这个赛道,以自己的方式和理解去塑造、定义元宇宙。

4 月中旬,全球知名的游戏公司 Epic Games 融资 10 亿美元用于“元宇宙”相关业务开发,创下“元宇宙”赛道最高融资纪录。5 月,苹果公司以 1 亿美元收购虚拟现实公司 NextVR,以增强其在娱乐和体育领域的 VR 实力。7 月 29 日,在 Facebook 的季度盈利数据发布后,马克·扎克伯格着重强调了“把 Facebook 转变为‘元宇宙’公司的雄心”,并激活虚拟社区计划 Horizon。8 月 12 日,英伟达自曝,在其 4 月举行的发布会上,CEO 黄仁勋的演讲中有 14 秒由数字合成的“假人”代为出镜,被网友认为是元宇宙的体现,但事实还相去甚远。

在国内,号称要打造全年龄段元宇宙世界的 MeteApp 公司,在 Roblox 上市后拿到了 SIG 海纳亚洲资本领投的 1 亿美元 C 轮融资。字节跳动对游戏引擎研发商、“中国版 Roblox”代码乾坤进行了近 1 亿人民币战略投资。

资本的追逐只是观察元宇宙的一个切片。冷静下来思考一个问题,为什么元宇宙会在 2021 年火爆?

在需求侧,疫情的发展不断蚕食减弱人们在物理世界的联系,也加速了数字世界的完善,人们在虚拟空间中留存和交互的时间更多,对虚拟世界的需求和服务更加开放和认可。而在技术侧,随着 VR/AR、5G、AI 等技术的发展,让曾经科幻小说中的场景一一实现,为元宇宙描绘出一个可见的触摸门槛的机会。

我们离元宇宙还有多远?

虽然元宇宙描绘的未来很美好,大量的优秀公司加入元宇宙的建设,但在很多业内人士看来,目前仍处于一个萌芽初始阶段。

以“元宇宙第一股”为例,Roblox 的游戏画面也较为简单,与元宇宙里“逼真的物理世界”相去甚远。

华安证券在一份研报里表示,从产品形态上看,游戏是元宇宙的雏形,与元宇宙的成熟形态仍有较大差距。[6]

从雏形到成熟的进化,技术提升是必经之路。

  • 首先,通过 AR、VR 等交互技术提升游戏的沉浸感。未来,基于 VR、AR 为代表的人机交互技术的发展,由更加拟真、高频的人机交互方式承载的虚拟开放世界游戏。
  • 第二,通过 5G、云计算技术支撑大规模用户同时在线,提升游戏的可进入性。元 宇宙是大规模的参与式媒介,交互用户数量将达到亿级。5G 和云计算等底层技术的进 步和普及,是未来突破游戏可进入性限制的关键。
  • 第三,通过算法、算力提升驱动渲染模式升级,提升游戏的可触达性。目前,3A 游戏采用传统的终端渲染模式,受限于个人计算机 GPU 渲染能力,游戏的画面像素精细度距拟真效果仍有很大差距。
  • 第四,通过区块链、AI 技术降低内容创作门槛,提升游戏的可延展性。目前游戏 UGC 创作领域编程门槛过高,创作的高定制化和易得性不可兼得,同时鲜有游戏具备闭环经济体。

技术只是第一关,要实现元宇宙还要迈过内容门槛,等真正成熟或将受市场、法律等因素的制约。

但作为真实物理世界补充和延展,元宇宙足够让人期待。让喜欢深度参与虚拟世界的人在数字场域遨游,喜欢现实物理世界的人在野外漫游,这或许就是元宇宙对于普通人的价值。

道阻且长,值得等待。

在搜集元宇宙的资料时,我们发现券商研究员、从业者、媒体等不同身份的人都表达了强调了元宇宙的重要性。华安证券在研报中表示“元宇宙是互联网的终极形态”;行业媒体竞核认为“Metaverse 是赋予技术生命能力的开始”;海外分析师表示,多个行业对元宇宙的投入将达到数万亿美元。

而透过元宇宙庞大的概念,看到其发展价值更为重要。研发工具 Beamable 公司创始人 Jon Radoff 于近期发文解析了元宇宙 Metaverse 的 7 层价值链,体验发现创作者经济空间计算去中心化人机交互基础设施

其中体验层,Jon Radoff 认为元宇宙并不是 2D 或者 3D 形式,甚至都不一定是图形的形式存在,它更多的是物理空间、距离和物体之间不可阻挡的非物质化。比如,在一款游戏里,你可以梦想成为摇滚明星、绝地武士、赛车手或者任何能想象的角色。在物理空间举办的音乐会只能高价卖出前排的少数座位,但虚拟音乐会可以在每个人的周围产生一个个性化存在的平面,在这个平面上,你总能找到最好的座位。

这些提到的在线活动还涉及元宇宙体验的另一个方面:内容社区综合体。过去,消费者只是内容的消费者,现在,他们既是内容的创造者,又是内容的“放大器”,内容还可以再次产生内容。

发现层,体验催生出内容社区综合体的意义在于社区推动内容比大部分常规市场营销更高效。在元宇宙情境下,交换、交易、分享内容变得更容易而且更多元,这对所有创作者来说是增大曝光率的机会。

创作者经济,元宇宙里的体验会越来越现场化、社交化,并持续更新。到目前为止,元宇宙里的创作者都围绕 Roblox、Rec Room 和 Manticore 等集中式平台,在这些平台上,有一整套集成的工具、曝光率、社交网络和变现功能,赋予了许多人为其他人打造体验的能力。

去中心化,虽然电影《头号玩家》里的绿洲被认为与元宇宙十分贴近,但元宇宙的理想结构与绿洲由单一团体控制的结构相反。这样避免了中心的统治地位,因为元宇宙是由很多人创造,因此也应该由很多人共同拥有。

综上,元宇宙的核心价值在于,它将成为一个拥有极致沉浸体验、丰富内容生态、超时空的社交体系、虚实交互的经济系统,能映射现实人类社会文明的超大型数字社区。

元宇宙将改变哪些行业?

从元宇宙的价值以及目前的技术情况来看,元宇宙最具现实意义的表现形式体现在泛娱乐行业,特别是游戏有望成为元宇宙概念下最早落地的场景。

目前市场上已经出现一系列基于游戏内核的沉浸式场景体验。美国著名歌手 Travis Scott 在游戏《堡垒之夜》中举办虚拟演唱会,全球 1230 万游戏玩家成为虚拟演唱会观众;加州大学伯克利分校在《Minecraft》重现校园,毕业生以虚拟形象线上场景参加毕业典礼;顶级 AI 学术会议 ACAI 在任天堂《动物森友会》上举行 20 年研讨会,演讲者在游戏中播放 PPT 发表讲话。

上文中我们提到,在线游戏创作社区 Roblox 因为现象级的内容创作生态带来的游戏自由度和用户活跃度,成为现阶段公认的元宇宙雏形。随着市场对元宇宙认识的加深,游戏之于元宇宙更大的意义在于提供展现方式,是元宇宙搭建虚拟世界的底层逻辑。

与此同时,元宇宙概念的火热也吸引了无数游戏厂商的入局。在今年的 ChinaJoy 上有业内人士认为,元宇宙或成中小游戏厂商新的创意阵地。这意味元宇宙为游戏行业带来了新机会,但这是否会引起内卷或使游戏主题趋于同质化,需要持续关注。

随着技术的不断成熟,元宇宙的下一发展阶段是在数字化的世界中去重构现实中的社交、消费等多个方面。

在社交领域,Facebook CEO 扎克伯格日前表示,Facebook 已经组建了专门研发元宇宙的团队,并表示未来五年要从社交公司变成元宇宙公司。而事实上 Facebook 布局的时间要更早。2014 年,Facebook 以 20 亿美元高价收购了虚拟现实公司 Oculus。2019 年,Facebook 发布了 VR 社交平台——Facebook Horizon。目前来看,Horizon 在相当程度上带有元宇宙的影子。比如在 Horizon 中,用户可以创建角色,和朋友聚会、娱乐,而且每个人都有可以定义自己的形象,建立自己的活动。

扎克伯格的想象中,元宇宙会像最初的定义那样,真正成为现实世界的虚拟映射,通过虚拟世界,能够将朋友或同事远程送到你身边,和你在虚拟环境中共处一室,获得更强的空间感。

社交 App Soul 此前在 IPO 时,也提出了“社交元宇宙”的概念。Soul 在招股书上表示,其之所以能向社交元宇宙靠拢,是因为自己创造的虚拟世界中,用户能够沉浸感强、始终在线地进行娱乐、社交、消费等,并且有用户创造大量的 UGC 内容,成为其快速持续生长的原动力。例如,在 Soul 中用户可以通过群聊派对讨论、听音乐、学习等,也可以 在 Soul 中玩狼人杀等游戏,甚至通过 Giftmoji 为自己或他人购买现实中的商品。

在消费领域,随着元宇宙的到来,用户的消费体验或将迎来新的一波交互体验的升级。目前,新氧已经实现为用户提供 AR 检测脸型的服务,通过手机扫描脸部推算出适合每位用户的妆容发型护肤品等。得物 App 的 AR 虚拟试鞋功能允许用户只需要挑选自己喜欢的鞋型和颜色并 AR 试穿,看到鞋子上脚的效果。在 AR、VR、可穿戴设备、触觉传感等技术的带动下,更加沉浸式的消费或将成为常态。它不局限于购买衣服、鞋子等基本消费,AR 房屋装修、远程看房、甚至模拟旅游景点都将成为可能。

元宇宙的法律和监管问题

元宇宙可能对现实世界与虚拟世界带来的变革足够让人欣喜,但对待一个新技术、新概念,提前思考其技术能力和伦理边界也必不可少。

未来当人们朝着元宇宙逐步迈进的时候,技术限制、金融服务监管、侵犯知识产权等诸多现实问题也将伴其同行。Norton Rose Fulbright 国际律师事务所对元宇宙可能会引发的法律和监管问题进行了设想。

首先是数据安全。元宇宙涉及收集的个人数据的数量和种类丰富度将会是前所未有的,包括个人的生理反应、运动,甚至可能是脑波模式的信息。是否会有一个元宇宙的主要管理员收集并共享这些个人数据?如果用户的个人数据在元宇宙中被盗或被滥用,谁来负责?类目繁多的信息,应如何以及何时获取用户的同意?诸如此类问题,都是在元宇宙建设中应该考虑的。

其次是知识产权。元宇宙的内容创造是由多个人完成的,这就涉及到谁拥有知识产权的问题。共同著作权和共同所有权的规则本就是复杂的,在复杂的虚拟世界场景中,它们的应用将变得更加复杂,因为利益相关者极有可能会以团体的形式存在。同时,快速发展的元宇宙可能涉及元素的 “混搭”,以及将不同利益相关者拥有的知识产权结合在一起。知识产权许可中的传统风险分配以及使用条款将需要被重新审查。

此外,正如上文所说,元宇宙的一大价值在于创造新的营销形式,但如果营销的对象是儿童,如何获得许可成为问题。另外元宇宙的全球性和互操作性将不可避免地鼓励多个企业相互沟通和合作,以便为参与者提供更多的选择和更好的体验。但如果它们是竞争对手,元宇宙产品之间可能会引起反垄断问题。

虽然例举了元宇宙可能涉及的监管问题,但目前言之尚早。元宇宙带给人们更多是机会和期待,相信随着技术的推进,元宇宙的实现或将开启互联网的全真时代。

简介

2021年是元宇宙(MetaVerse)的元年。堪比大航海时代的大迁徙,人类全面走进数字世界,开辟鸿蒙、创世而生。创造、生活、娱乐,乃至工作的数字时空,是为元宇宙。其中,需要重新思考存在和虚无肉体和精神性善和性恶自我和宇宙的哲学命题,需要不断探索有限和无限、秩序与自由、自治与法治、经济与治理、伦理和文明的边界,需要全面融合区块链、AR、5G、大数据、人工智能、3D引擎等新技术,形成数字创造、数字资产、数字市场、数字货币、数字消费的新模式。元宇宙是“心”的绽放,是“梦”的具象,是“我思故我在”的全息展现。内求于心,外形于物,物物相生,元宇宙成矣。或许,互联网的终极形态就是“元宇宙”。

本报告共126页,包含理念篇、产业篇和风险篇共三大篇章:

  • 一、理念篇:
    • 1、孕育元宇宙;
    • 2、元宇宙是什么?
    • 3、虚拟与现实的关系;
    • 4、元宇宙的理论框架;
    • 5、对元宇宙的几点展望。
  • 二、产业篇:
    • 1、元宇宙的技术底座;
    • 2、元宇宙的产业生态;
    • 3、中美日韩元宇宙发展现状;
    • 4、面向企业的元宇宙;
    • 5、元宇宙指数体系。
  • 三、风险篇:

内容介绍

VR设备

AR 眼镜

【2023-8-31】2023年3款主流AR眼镜大横评,全网最真实的雷⻦Air Plus、Xreal Air、Rokid Max体验报告

3款AR眼镜 哪款更值得购买?

  • 1、雷⻦Air Plus
  • 2、Xreal Air
  • 3、Rokid Max

最惊艳的还是雷⻦ Air Plus,尤其是在画面和声效的结合上,细腻的画面+绚丽色彩+震撼声效。

其它两款,虽然配置能跟得上需求,但在细节的表现上,反而就没有雷鸟Air Plus这样细节到位,大屏、清晰、震撼音效、畅玩游戏,加上丰富的生态支持,这不就是一款AR眼镜的理想型嘛~

眼镜+魔盒只要2000多,在家、出差、旅行都能用,对这种科技产品感兴趣的人来说,是一个非常有质价比的选择。

结束


支付宝打赏 微信打赏

~ 海内存知已,天涯若比邻 ~

Share

Related Posts

上一篇 新技术-New Tech

标题:新技术-New Tech

摘要:面向未来的新技术专题

标题:提示学习 Prompt learning

摘要:NLP新范式:Prompt(提示学习)

Comments

--disqus--

    Content
    My Moment ( 微信公众号 )
    欢迎关注鹤啸九天