腾讯元宝APP发布时,就围绕工作效率场景、日常生活等场景提供了丰富的应用,并有创建个人智能体等个性化体验,“3D角色梦工厂”则将大模型生成技术和3D应用结合,进一步创新了元宝的独特玩法。通过“3D角色梦工厂”,只需上传一张五官清晰的正面头像,并选择不同角色模版,就能迅速生成个人3D角色。
生成后的角色可以进行360度全方位查看,同时也可以选择把角色进行分享、转发或者公开。如果想进一步优化形象,可以保存3D角色模型文件做二次编辑。如果想把它打印出来,还可以生成3D打印链接,到任意3D打印店进行线下打印,实现从虚拟模型到完整实体的创意体验。
传统的3D形象生成较为繁琐和复杂,需要进行原画的建模、贴图制作、灯光、动画、渲染和后期等多个步骤。“3D角色梦工厂”则通过固定身体模板,然后在三维空间换头,让任意人头可拼接到任意身体,快速生成3D形象。其中,还使用了3D换头、3D几何雕刻、PBR材质贴图等技术,提升3D人物生成效果。
具体来说,腾讯混元的 3D换头技术,类似于2D的换脸技术,让用户只需上传一张个人头像,就能得到专属的人头模型。同时,对人头模型的生成和纹理进行优化,并将人头模型替换到角色模版上,实现个性化的3D角色生成。
为提升几何生成精度与自然度,腾讯混元使用3D几何雕刻技术,针对性地检测几何生成异常的区域,例如耳朵区域,并对其进行塑形。同时,也通过自动接缝检测与融合策略,雕刻几何,尽可能还原耳朵、脖子等区域的真实几何细节。
此外,腾讯混元还使用了 PBR (基于物理的渲染)材质贴图技术处理模型细节,在纹理贴图上增加更多的材质贴图,更好地反映模型上可能存在的金属质感、光泽等,提升3D角色模型整体的质感和真实感。
目前,“3D角色梦工厂”已经上线了10种不同风格的角色以进行3D 角色的生成,后续也将有更多角色更新,同时创新动态3D制作玩法,激发更多可能性。
作为腾讯基于混元大模型推出的AI原生应用,腾讯元宝拥有看、听、说等多模态交互能力。据了解,腾讯混元大模型早已布局文/图/视频生3D能力,是业界最早的端到端3D生成大模型之一,通过大模型一步推理,30秒即可生成动漫、建筑、游戏道具等类型的3D资产。如果需要更高精度,还能进一步烘焙生成4k高精纹理贴图。
目前,基于腾讯混元3D生成能力打造的“3D角色梦工厂”应用,在腾讯元宝 APP或者元宝微信小程序可快速体验。此外,最近腾讯地图上线的“专属3D车标”也是由腾讯混元进行技术支持,用户只需上传一张图,就可以定制专属的3D车标。未来,腾讯混元的3D生成能力也将不断与更加丰富的场景结合,持续助力更多产业发展。