当前位置:首页 > 内容聚合

阿里推文生3D数字人项目Make 人项以及增加皱褶和雀瘢等

()1月8日 音讯:阿里又推“黑科技”!这次瞄准了文生3D人 。阿里Make-A-Character支援一句话天生超真切的推文3D数字人 。只要要通过文字形容人的生D数字脸型 、五官、人项发型等特征,阿里它就能够在不到2分钟的推文不交费用的出国务工直招时刻内天生一个超真切的3D脚色。

阿里推文生3D数字人项目Make 人项以及增加皱褶和雀瘢等

项目及演示:https://top.aibase.com/tool/make-a-character

论文所在:https://arxiv.org/pdf/2312.15430.pdf

代码:https://github.com/Human3DAIGC/Make-A-Character

试玩所在:https://www.modelscope.cn/studios/XR-3D/InstructDynamicAvatar/summary

而且你能够自界说面部特征,生D数字譬如脸型、人项眼睛颜色 、阿里发型 、推文眉毛种别  、生D数字嘴巴和鼻子,人项以及增加皱褶和雀瘢等。阿里

Make-A-Character(MACH)的推文主要特质:

1、可掌握性:用户能够仔细自界说面部特征,生D数字譬如脸型、眼睛颜色、发型  、眉毛种别、湖南宏越出国劳务怎么样嘴巴和鼻子,以及增加皱褶和雀瘢等 。

2 、高度真切:脚色鉴于真正人类扫描数据集天生 ,发型为现实发丝而非网格  ,运用Unreal Engine的物理前提渲染(PBR)手艺渲染  ,以完成高质量适时渲染效验。

3、整体模子:每一个脚色都是印尼出国劳务怎么样整体模子 ,席卷眼睛、舌头、牙齿 、全身和装束 ,无需特殊建模就可随即运用。

4 、可动画化:脚色装备庞杂的骨骼装置 ,支援规范动画 ,增强其真切外在和千般化运用。

5、行业兼容:天生的3D脚色能够无缝集成到现有的算计机图形(CG)职责流程中 ,尤其是日本招聘在游戏和影戏行业中经常使用的职责流程 。

MACH支援英文和中文提醒,可依据仔细的文本形容倏地天生3D脚色,譬如“圆脸胖女士”或“棕皮肤戴黑眼镜的男孩 ,绿色头发”等等 。

职责原理:

Make-A-Character(MACH)联合了大语言模子、视觉模子和3D天生手艺 。

1、文本剖析:最先 ,MACH运用大语言模子(譬如GPT类模子)来明白用户输入的文本形容。这个流程中,它会甄别出文本中提到的种种面部特征,譬如脸型、眼睛状态 、嘴巴状态 、发型和颜色等 。

2、视觉映照:接着,这些语义属性(如脸型 、眼睛状态等)被映照到对应的视觉线索上。这意味着系统会依据文本中的形容天生一个参照的人脸图像。这个方法一般运用像“Stable Diffusion”这样的图像天生模子来终了。

3 、2D面部剖析:天生的参照图像接下来会通过2D面部剖析流程  ,这一流程涉及到对人脸的分歧一面停止甄别和肢解。

4 、3D天生:鉴于面部剖析的效果,MACH最先天生宗旨脚色的3D网格和纹理。这个流程席卷建立脚色的3D模子,而且将纹理(如皮肤 、头发等)运用到模子上。

5 、附加配件:要是文本形容中提到了其余配件(如眼镜、帽子等),这些也会在这一方法中增加到3D脚色上  。日本房产

6、参数化意味和动画:最终天生的3D脚色是参数化的,这意味着能够随意纰漏地对其进言论画解决,譬如增加行走 、语言等作为。

通过这些方法 ,MACH能够倏地从简朴的文本形容中天生真切的、整体的、可动画化的3D脚色,有用于种种娱乐和专业场景。

分享到: