淘宝设计+AI,人人都能成为装修设计师构建用户对未来家的想象,是家装家居多年来持续探索的方向,如今我们用AI帮助用户“更快、更好、更简单”看到自己未来的家。https://mp.weixin.qq.com/s/Pk1xztEd17JefXp79FHKNA其实就是个商品白底图+inpainting的技术,此外结合controlnet做控制,商品具体的产品可采用lora训练定制。
构建用户对未来家的想象,是家装家居多年来持续探索的方向,如今利用AI技术,我们设计了一款搭配产品,用户只需提供心仪的商品图片,选择自己想要的风格,便可快速生成一张围绕该商品的场景搭配,当前主要面向商家,未来希望人人都可以用它来装修自己的家。一张商品图,结合用户的自定义输入,便可生成多张场景效果。在整个过程中,不需要3D模型,不需要显卡渲染,不需要线下拍摄。
生图:核心逻辑是扩图,会在淘宝海量的商品图上训练模型,再结合行业运营对风格趋势的把控,在根据商品的特征及用户的选择,先搭配软装(controlnet),再搭配硬装环境(inpainting),最后渲染出图。
技术:商品图 + controlnet(reference) + inpainting。
场景:1.多人多面投放,主体沙发不变,沙发的背景风格多变,素材按照人群喜好来投放;场景2:测试场景反向棚拍,针对头部商家,他们会生成多个虚拟场景,投放至线上,选取点击率高的,反向搭棚拍摄,提升棚拍效率。
商家目前遇到的共性问题;1.怎么避免同质化问题?解法:让AI学习商家的3D素材风格/实拍风格,获得更接近商家预置风格。
2.怎么出一张好图?解法:商品白底图质量决定最终生成效果好坏,提升白底图质量,要求曝光充分,层次分明,搭配丰富,颜色干净,白底图较真,生成图也较真。