1. 创业头条
  2. 前沿领域
  3. 人工智能
  4. 正文

AI技术让手办「整活」:3D建模居然可以这样简单

 2022-09-01 11:19  来源:互联网  我来投稿 撤稿纠错

  阿里云优惠券 先领券再下单

科技领域,既有用元宇宙开发布会的公司,也有All in元宇宙的公司,很多虚拟世界已经建立起来,人们面临的问题正在变成:真实世界中,人类创造了亿万种物品丰富着我们的生活,那么如何才能快速复制这些物品到全新的元宇宙世界中呢?

3D内容对于元宇宙至关重要,很多科技公司正在推出用于构建虚拟世界的工具,随着计算机图形技术、元宇宙和AI之间的交集越来越多,这些技术也在不断升级。

最近,华为HMS Core 3D建模服务发布了人形角色自动建模和骨骼绑定的功能,引起了我们的注意。

看到一个可爱的手办,在想能不能拥有它的3D虚拟形象?只用手机围绕手办拍摄一圈,就能构建一个造型精准的3D模型并为其自动绑定骨骼。

在导入动作数据后,它不仅可以随你走动、向你招手,还可以完成跳舞等复杂动作。

在开放的Demo App中,我们只需要用普通手机摄像头围绕目标物体进行一通360度拍摄,清晰的3D模型即可生成。除了Q版的动漫手办以外,毛绒玩具或者机器人等人形角色也可以被扫描成模型并赋予骨骼。

那么它的能力到底如何呢?我们也实际操作了一把,我们用华为的技术给机器之心的毛绒玩偶构建了3D模型并绑定好骨骼。

只需使用视频中的同款动作数据驱动模型,就可以跳同款舞蹈啦:

如果四肢短小的玩偶都可以搞定的话,看起来绝大多数人形角色都是没问题的!

通过AI能力用2D照片生成3D模型,是人工智能学术会议中的一个热门领域,刚刚过去的国际顶会CVPR上就有数十篇这个方向的论文。通过对物体的不同角度进行拍摄,将2D图像转换为三角网格模型,生成的3D模型可供建筑师、设计师、艺术家和游戏开发者导入图形引擎,并可以在此基础上修改比例、更改材料或尝试不同的照明效果。而如今,前沿技术的一部分已经成为了手机上的应用,不禁让人感叹科技发展的速度。

3D建模,手机也行

快速构建3D模型的能力来自华为终端云服务开放能力合集HMS Core,其拥有3D建模、3D引擎、AR Engine等多个图形领域的开放服务。其中,3D建模服务可以给我们带来很多想象空间,可以用在商品展示、教学、虚拟人物,甚至动画制作上。

华为HMS Core 3D建模服务,不需要用TOF、深度摄像头或LiDAR激光雷达等特殊硬件,只需要一个普通手机的RGB摄像头即可完成建模。

这个过程在使用者看来是「一键生成」的,背后经历的却是一系列复杂的处理过程。

高精度的几何重建需要先进行物体分割,将目标物与背景分离,并进行图像匹配、特征提取和深度估计,AI算法通过分析不同角度的图像来判断位置关系,生成点云构建3D模型,再计算出纹理材质对模型表面进行贴图。

在这个过程中,华为利用自研的高低模技术,通过计算剔除冗余的面片,可以用更低的面片数(5万以下)达成高面片数(10万及以上)模型的效果,在中低端手机上也能实现精细的视觉效果。

自动 生成3D 虚拟形象的「筋骨」

为了让模型动起来,我们还需要对模型进行「骨骼绑定」:

传统流程中,骨骼绑定也需要动画师手工来完成,HMS Core的能力大幅提升了动画制作的效率:通过自动的骨骼绑定和蒙皮权重估计,HMS Core可以让你刚刚扫描出来的3D模型在导入动作数据后活动起来。

值得一提的是,在这个领域,此前少数实现自动关节估计的方法都需要目标模型摆好标准姿态。华为利用AI算法减少了人为规则的需求,可以支持非对称的多种姿态。

面对模型的各种姿态,AI算法需要大量数据进行训练,但在3D模型重建任务上,业内其实并没有这样的数据集。

对此,华为自研了一套3D人形角色自动生成框架,可以基于千百个模型数据,生成数十万甚至是上百万的角色模型和骨骼。通过数据增强,HMS Core支持了非对称姿态、不同体型和类别的人形角色的自动骨骼绑定。

投射到现实世界

最后,若想将构建好的3D模型呈现在真实的世界中,实现真人与3D虚拟物体交互的效果,还需要准确高效的AR能力。

华为HMS Core的AR Engine通过整合算法实现了厘米级的精准定位,开发者可以通过这些能力让虚拟世界与现实世界自然地融合在一起。

例如,AR Engine提供了光照估计和环境Mesh能力,使得3D虚拟形象的影子会随着灯光变化,并可被现实世界中的物体挡住,带来更自然的视觉交互体验。

图形领域能力全面 开放,加速元宇宙时代到来

随着业界虚实融合步伐加快,华为HMS Core全面开放图形领域的相关能力,助力开发者高效构建虚实融合的数字世界。

图片来自2022年7月HUAWEI Developer Day(简称HDD)杭州站主论坛现场

开发者可以通过直接调用软件接口获得华为图形领域的核心能力,节省大量时间和精力,高效完成应用开发。

相信有了这种能力的加持,或许下一个爆款的App已在路上,元宇宙时代也将加速到来。(文章来源于公众号:机器之心)

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!

相关标签
元宇宙
ai技术

相关文章

  • 汇聚中国AI顶尖力量 云天励飞参与华为AI大模型联合创新

    2023年7月6日,第六届世界人工智能大会(WAIC2023)在上海开幕,“人工智能大模型”是本届大会的备受瞩目的话题,据悉,在昇腾AI大模型的创新研发中,华为联手26家行业领军企业,组建了一支协同创新的“AI明星队”,云天励飞作为中国人工智能企业的杰出代表,和互联网大厂、运营商、科研院所等优秀团队

    标签:
    ai技术
  • 用友大易:迈入AI招聘2.0时代,让人力资源回归本质

    这几个月来,以ChatGPT为代表的生成式AI展现出的能力令世界惊叹。自从2016年AlphaGo战胜李世石掀起了一波AI浪潮后,AI仿佛已经沉寂了很久,ChatGPT的横空出世就如同一束耀眼的光芒,让AI这个名词重回C位。过去在AI1.0时代,主要通过训练模型来实现图像识别、声音识别、语言处理等特

    标签:
    ai技术
  • 新发布的PaaS2.0,能否助力涂鸦智能再起飞?

    文:互联网江湖作者:志刚2023年的IoT需要一个新故事。6月29日,涂鸦智能在开发者大会上,发布了企业级战略PaaS2.0,希望通过一个平台+四大开发服务,建立起IoT生态。对于这场发布会,市场的态度是积极的。美东时间6月29日收盘,涂鸦智能美股股价上涨5.6%,来到1.87美元/股。近日股价稳定

    标签:
    ai技术
  • 河南元宇宙创造者大赛成果“元豫宙”斩获TopDigital创新营销奖金奖

    6月29日,在上海举行的TopDigital营销盛典上,河南文旅元宇宙空间“元豫宙”,凭借其匠心独具的创新性场景设计、美轮美奂的超写实场景呈现、新潮炫酷的沉浸式虚拟体验,斩获TopDigital创新营销奖虚拟场景设计组金奖。元豫宙,是河南省文化和旅游厅主办的“行走河南·读懂中国”品牌推广暨元宇宙创造

    标签:
    元宇宙
  • 大模型难掩AI制药的悲伤:越过山丘,无人等候

    美团曾经的二号人物王慧文对标OpenAI的创业项目光年之外,以20亿卖给美团,再度引发市场对大模型的热议。

    标签:
    ai技术
  • 中小AI企业,没有“高考”资格

    高考一结束,忙坏了海内外一众大模型。豆包、DeepSeek、ChatGPT、元宝、文心一言、通义千问……掀起了一波“AI赶考”大战。据悉,去年高考期间,大模型的成绩才勉强过一本线,今年集体晋升985。据悉,豆包甚至过了清北的录取线。头部大模型在高考“考场”上玩得不亦乐乎,中小AI创企的处境却日益尴尬

    标签:
    ai智能
  • 大模型抢滩高考志愿填报,能否顶替「张雪峰」们?

    文/二风来源/节点财经每年高考成绩放榜后,数千万考生和家长将迎来另一场硬仗——填报志愿。今年,这一领域迎来了AI的全面介入,多家互联网大厂和教育公司纷纷推出智能志愿填报产品,为考生提供院校和专业选择建议。据艾媒咨询数据,2023年中国高考志愿填报市场付费规模约9.5亿元,近九成考生愿意借助志愿填报服

    标签:
    大模型
  • 苹果AI掉队?现在唱衰或许还为时过早

    苹果还没从WWDC25的“群嘲”中走出,又迎来了一次新的痛击。据路透社报道,21日,苹果公司遭到股东集体起诉,被指在信息披露中低估了将先进生成式AI整合进语音助手Siri所需的时间,导致iPhone销量受影响、股价下滑,构成证券欺诈。在这份诉讼中,库克、首席财务官凯文·帕雷克及前首席财务官卢卡·马埃

  • DeepSeek、豆包向左,盘古大模型向右

    华为的盘古大模型终于推出新版本了。6月20日华为云计算CEO张平安宣布基于CloudMatrix384超节点的新一代昇腾AI云服务全面上线,盘古大模型5.5同步发布。不过,当前国内的AI大模型竞争可谓是相当激烈,华为的盘古大模型在众多大模型中并不是十分出众。华为云此次重磅推出的盘古大模型5.5能否从

  • 数字人罗永浩一场直播卖了5000万,数字人能取代真人主播吗?

    一场没有罗永浩的“罗永浩直播”,正在改写带货规则当数字人罗永浩在百度直播间举起青岛啤酒,以标志性幽默回应粉丝提问时,弹幕疯狂刷出“这是真的还是假的?”的疑问。这场持续近7小时的直播,创下1300万人次观看、GMV突破5500万元的惊人战绩,甚至超过了他本人一个月前真人直播5000万元的成绩。数字人主

  • 新东方发布首款原创AI教育产品,开启一对一智能学习时代

    高频互动、个性化教学、突破成本壁垒,AI老师让英语学习更普惠。6月24日,新东方正式推出面向消费者的首款原创AI教育产品——“新东方AI1对1”。这款产品标志着新东方在教育+AI战略布局中迈出关键一步,旨在以科技力量推动优质教育资源的普惠发展。在发布会现场,新东方教育科技集团CEO周成刚表示:“AI

    标签:
    ai智能

编辑推荐