伴随着AIGC技术风口的到来,“AI+新零售”行业不断兴起。通过AI自动生成海量商品营销内容,为品牌解决内容制作成本与效率问题,正在成为AIGC赛道下SaaS服务商们为电商企业发力的新方向。
成立于2017年的极睿科技是这一赛道的先行者,于日前正式推出“ECGPT”和“FashionCLIP”两大行业垂直模型,并为电商企业提供包含拍摄、图文、短视频等多种内容形态的全链路解决方案,已累计为超过25000家知名企业提供内容服务支持,覆盖鞋服配饰、快消零售等多个行业品类,助力品牌自动生成商品营销素材,提升内容制作效率、降低人力与时间成本。
作为行业首家推出垂直大模型的极睿科技,已在AIGC领域具备领先的研发能力,其基于多年来对行业高质量商品数据的积累,为电商内容制作带来生产力变革。基于此,极睿科技CTO徐镇接受了一次深度技术访谈,探讨极睿科技对AIGC大模型在电商领域应用落地的经验与优势,本文内容提炼自访谈视频。
首个行业垂直大模型的三大显著特征
根据徐镇介绍,极睿科技推出“ECGPT”和“FashionCLIP”电商垂直大模型在现有的行业背景下,显露出行业垂直性、内容可控性及全链路生成三大显著特征.
构建亿级图文多模态数据集,自研垂直时尚领域CLIP大模型
行业垂直性是极睿大模型的显著特征之一。“FashionCLIP”结合了极睿科技多年来对电商及媒体领域的泛服饰图文数据,并通过构建亿级图文多模态数据集、finetuneCLIP 模型而得到的聚焦时尚领域的专用CLIP大模型。从模型垂直度而言,徐镇介绍到,“FashionCLIP” 在应用于传统感知类计算机多种视觉任务中包括对Zero-Shot领域的图片识别、智能分类、智能标签与多模态搜索等均有出色的效果,并且其还可被应用于包括文生图、图生图在内的多种图像生成形式,使得“FashionCLIP”在电商服饰垂类领域对图文相关内容生成具有行业领先性的效果。
通过模型持续调优,推动商品内容可控化生成
在电商内容生成环节,货版一致是品牌最核心的需求。徐镇谈到,为助力电商企业避免为货不对板带来的售后履约问题所困扰,极睿科技在图片生成过程中不断优化Stable Diffusion模型,并基于SD对积累的电商模特和服装图片数据集进行持续微调和模型优化,推动在产品中生成更美观的亚洲人脸、更写实的服装效果和更多样的拍摄场景;在另一方面,极睿还通过对 ControlNet 模型的优化,让模特场景图的生成更可控,生成效果更贴近电商业务场景。
算法迭代速度不断提升,赋能电商全链路内容生成
电商全链路内容自动生成是极睿大模型能力的另一大亮点。徐镇认为,极睿大模型在传统任务感知中已实现基本替代传统CV算法和部分NLP算法,并基于大模型在内容加工中落地了内容生成、图像编辑、图像Inpainting、智能抠图等算法应用场景,此外,不同于行业以往更多基于Rule Based内容生成形式,极睿现可根据数据结构完成落地,同时具备自动生成图像和视频素材的能力。他介绍到,目前极睿已在ECPro、iClip、PhotoMagic等系列AIGC产品中通过深度应用“FashionCLIP”和优化的 Stable Diffusion 等模型,拥有图文、短视频等电商全链路内容的自动生成能力。
内嵌大模型的全矩阵内容产品
通过对垂直大模型的深度内嵌,极睿目前可以为全平台电商企业提供从拍摄、图文排版、直播切片、商品短视频到商品种草的全链路内容运营解决方案,推动电商企业以更高效、更优质的内容驱动业务增长。
AI电商场景图智能生成:PhotoMagic
通过对计算机视觉、商品数据库及AIGC生成模型的结合, 助力品牌实现模特图换脸换背景、定制AI虚拟模特等,助力企业极速降低拍摄成本,提升商品图片制作效率和内容转化率。
商品图文详情自动排版上新:ECPro易尚货
凭借AIGC助力服饰电商自动生成包含主图、详情页等营销素材,一键完成多平台跨店铺的极速上新。
商品短视频智能运营:iClip易视频
通过AI对品牌已有素材如商品主图、详情等内容的抓取,快速生成覆盖全店商品的微详情短视频,并凭借对官方规则的同步及对视频运营数据的监测,为品牌实现智能化运营。
直播切片智能生成:iCut直剪
基于语义及视觉识别,智能抓取直播卖点讲解片段,助力直播卖家自动形成切片卖点短视频,无需剪辑即可一边直播一边实时获得海量短视频素材,帮助直播卖家通过短视频引流获客和持续成交。
在被问到极睿未来对大模型与产品的规划时,徐镇的回答是:随着算法、算力不断进步,大模型在电商业务场景中产生的作用与影响力将会与日俱增,极睿也将继续加大对基础算法的投入,并基于大模型落地更多产品,为电商企业创造更多业务价值。