智能手机 PC平板 3C数码 智能家居 智能汽车
登录
AI技术让手办「整活」:3D建模居然可以这样简单
机锋网新闻

 科技领域,既有用元宇宙开发布会的公司,也有All in元宇宙的公司,很多虚拟世界已经建立起来,人们面临的问题正在变成:真实世界中,人类创造了亿万种物品丰富着我们的生活,那么如何才能快速复制这些物品到全新的元宇宙世界中呢? 

 3D内容对于元宇宙至关重要,很多科技公司正在推出用于构建虚拟世界的工具,随着计算机图形技术、元宇宙和AI之间的交集越来越多,这些技术也在不断升级。

 最近,华为HMS Core 3D建模服务发布了人形角色自动建模和骨骼绑定的功能,引起了我们的注意。

 看到一个可爱的手办,在想能不能拥有它的3D虚拟形象?只用手机围绕手办拍摄一圈,就能构建一个造型精准的3D模型并为其自动绑定骨骼。

 在导入动作数据后,它不仅可以随你走动、向你招手,还可以完成跳舞等复杂动作。

 在开放的Demo App中,我们只需要用普通手机摄像头围绕目标物体进行一通360度拍摄,清晰的3D模型即可生成。除了Q版的动漫手办以外,毛绒玩具或者机器人等人形角色也可以被扫描成模型并赋予骨骼。

那么它的能力到底如何呢?我们也实际操作了一把,我们用华为的技术给机器之心的毛绒玩偶构建了3D模型并绑定好骨骼。

 只需使用视频中的同款动作数据驱动模型,就可以跳同款舞蹈啦:

 如果四肢短小的玩偶都可以搞定的话,看起来绝大多数人形角色都是没问题的!

 通过AI能力用2D照片生成3D模型,是人工智能学术会议中的一个热门领域,刚刚过去的国际顶会CVPR上就有数十篇这个方向的论文。通过对物体的不同角度进行拍摄,将2D图像转换为三角网格模型,生成的3D模型可供建筑师、设计师、艺术家和游戏开发者导入图形引擎,并可以在此基础上修改比例、更改材料或尝试不同的照明效果。而如今,前沿技术的一部分已经成为了手机上的应用,不禁让人感叹科技发展的速度。

 3D建模,手机也行

 快速构建3D模型的能力来自华为终端云服务开放能力合集HMS Core,其拥有3D建模、3D引擎、AR Engine等多个图形领域的开放服务。其中,3D建模服务可以给我们带来很多想象空间,可以用在商品展示、教学、虚拟人物,甚至动画制作上。

 华为HMS Core 3D建模服务,不需要用TOF、深度摄像头或LiDAR激光雷达等特殊硬件,只需要一个普通手机的RGB摄像头即可完成建模。

 这个过程在使用者看来是「一键生成」的,背后经历的却是一系列复杂的处理过程。

 高精度的几何重建需要先进行物体分割,将目标物与背景分离,并进行图像匹配、特征提取和深度估计,AI算法通过分析不同角度的图像来判断位置关系,生成点云构建3D模型,再计算出纹理材质对模型表面进行贴图。

 在这个过程中,华为利用自研的高低模技术,通过计算剔除冗余的面片,可以用更低的面片数(5万以下)达成高面片数(10万及以上)模型的效果,在中低端手机上也能实现精细的视觉效果。

自动生成3D虚拟形象的「筋骨」

 为了让模型动起来,我们还需要对模型进行「骨骼绑定」:

 传统流程中,骨骼绑定也需要动画师手工来完成,HMS Core的能力大幅提升了动画制作的效率:通过自动的骨骼绑定和蒙皮权重估计,HMS Core可以让你刚刚扫描出来的3D模型在导入动作数据后活动起来。

值得一提的是,在这个领域,此前少数实现自动关节估计的方法都需要目标模型摆好标准姿态。华为利用AI算法减少了人为规则的需求,可以支持非对称的多种姿态。

面对模型的各种姿态,AI算法需要大量数据进行训练,但在3D模型重建任务上,业内其实并没有这样的数据集。

 对此,华为自研了一套3D人形角色自动生成框架,可以基于千百个模型数据,生成数十万甚至是上百万的角色模型和骨骼。通过数据增强,HMS Core支持了非对称姿态、不同体型和类别的人形角色的自动骨骼绑定。

投射到现实世界

 最后,若想将构建好的3D模型呈现在真实的世界中,实现真人与3D虚拟物体交互的效果,还需要准确高效的AR能力。

华为HMS Core的AR Engine通过整合算法实现了厘米级的精准定位,开发者可以通过这些能力让虚拟世界与现实世界自然地融合在一起。

 例如,AR Engine提供了光照估计和环境Mesh能力,使得3D虚拟形象的影子会随着灯光变化,并可被现实世界中的物体挡住,带来更自然的视觉交互体验。

 图形领域能力全面开放,加速元宇宙时代到来

 随着业界虚实融合步伐加快,华为HMS Core全面开放图形领域的相关能力,助力开发者高效构建虚实融合的数字世界。

图片来自2022年7月HUAWEI Developer Day(简称HDD)杭州站主论坛现场

 开发者可以通过直接调用软件接口获得华为图形领域的核心能力,节省大量时间和精力,高效完成应用开发。

 相信有了这种能力的加持,或许下一个爆款的App已在路上,元宇宙时代也将加速到来。(文章来源于公众号:机器之心)


免责声明:本文转载自互联网,旨在传递更多网络信息,仅代表作者本人观点,与本网站无关。本文仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证,请在阅读后谨慎参考。

相关文章
全部评论
钱纪韫
发表评论
回复:
发表回复

玻璃钢生产厂家褐色玻璃钢花盆价格广东定制玻璃钢雕塑方法南宁欧式玻璃钢雕塑市场涿州玻璃钢花盆花器河南秋季商场美陈厂家供应新野玻璃钢雕塑划算的玻璃钢花盆深圳艺术商场美陈哪里买周年庆典商场美陈批发杭州校园玻璃钢雕塑玻璃钢小猴子雕塑佛山西宁玻璃钢人物雕塑宽城区玻璃钢雕塑工程漳州玻璃钢广场雕塑价格广场玻璃钢卡通雕塑小品定做玻璃钢雕塑厂广州玻璃钢雕塑座椅户外玻璃钢雕塑摆件宁波玻璃钢仿铜雕塑制作二手雕塑玻璃钢赤峰玻璃钢景观雕塑贵州玻璃钢博物馆雕塑仿铜玻璃钢雕塑厂家供应新乡肖像校园玻璃钢雕塑制造玻璃钢雕塑卡通哪个品牌好新乡玻璃钢浮雕抽象不锈钢雕塑南昌创意玻璃钢雕塑多少钱发光景观玻璃钢雕塑制作温州玻璃钢陶瓷雕塑介绍玄武十一商场美陈香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万

玻璃钢生产厂家 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化