5月31日,生成式AI初创企业3DFY.ai推出了3D模型平台——3DFY Prompt。(免费体验地址:https://app.3dfy.ai/text-to-3d)
使用方法与Midjourney类似,用户通过自然语言文本就能创建逼真的3D模型,同时支持细致化文本描述,可选择种子数量(数量越多质量越好)。例如,生成一个有三个宽松靠垫的沙发,沙发有一对金色花边的皮质扶手。
目前,3DFY.ai处于开放测试阶段,可以免费试用。「AIGC开放社区」申请了账号体验了一下,通过该平台生成的3D模型非常逼真、贴合文本要求、生成速度快,支持纹理、线框、UV和实体4种预览模式,可以直接将模型下载到本地使用。无论是专业设计师还是普通人,都能使用3DFY Prompt快速创建高质量3D模型。
3DFY Prompt技术介绍
根据3DFY.ai在官网的介绍,3DFY Prompt的生成方法采用了与以往神经辐射场 (NeRF)不同的优化方法。采用了一种“目标代码”方法。
通过使用经过训练的编码器-解码器网络,来提取输入文本的提示词。然后编码器组件使用此目标代码以及一组控制参数,再结合机器学习和计算机图形操作生成3D模型。
训练数据方面,3DFY Prompt采用了更细化的分类别训练方法,例如,生成台灯的模型,只用台灯模型数据进行训练,这样做可以极大提升模型生成的准确率和质量。
此外,3DFY Prompt没有批量使用公开劣质、带水印的图片数据,使用的是自己结合使用机器学习和计算机图形技术合成的数据。
这样做的好处是可以精准控制样本分布和提升模型质量,同时尽量避免了版权、偏见等问题。
3DFY Prompt产品使用介绍
目前,3DFY Prompt支持台灯、沙发、桌子、脚凳、餐具、剑和盾牌 7大类别的模型生成,未来会开放更多类型。
使用方法非常简单,登录平台后,选择一个物品类型然后选择Seed(种子数量)点击【GENERATE】按钮即可开始生成。
需要注意的是,种子越大生成的质量越高,消耗的时间也更多,平均生成时间在3分钟左右。
模型生成后,支持纹理、线框、UV和实体4种预览模式,支持放大、缩小、平移等预览操作,用户可以将作品下载到本地使用。
下载时,用户可以选择.glb、.bend、.fbx三种3D模型格式;可以选择0—3四种模型细致程度;可以选择512、1024、2K、4K四种纹理模式,以满足不同场景的需求。
用户生成3D模型后,可以选择MY MODELS进行项目管理,会列出所有创建的模型,可以选择下载、预览等操作。反正,3DFY Prompt的整体操作非常简单、直观。
总之,3DFY Prompt的功能非常强大细致,与市面上多数粗糙的3D生成模型相比,更适合专业设计师,极大提升了游戏、室内设计、建筑等设计效率。