AI落地Best Practice · 数字人与多模态 · 2025-07-31

AI Agent 在电商内容场景的应用及演进

AI Agent如何助力电商内容从"有"到"优"?揭秘淘工厂从文本生产到智能决策的三阶段演进之路。

核心内容:

  1. 电商行业面临的内容生产挑战与AI解决方案
  2. AI Agent在淘工厂的三阶段演进路径
  3. 从文本生产到智能决策的技术突破与商业价值

导读 在电商行业竞争日益激烈的今天,内容已成为连接商家与消费者的核心纽带。然而,面对站内站外的全域流量争夺、商家内容生产能力的不足,以及消费者对个性化、高质量内容需求的持续升级,传统的内容生产方式已难以满足高效、多元化的业务需求。AI 技术的快速发展为这一挑战提供了全新的解决方案。本次分享将深入探讨 AI Agent 在电商内容场景中的演进与应用,从 1.0 时代的文本工业化生产,到 2.0 时代的多模态内容生成,再到 3.0 时代的内容质量优化与智能决策,揭示 AI 如何逐步推动电商内容从“有”到“优”的跨越,助力商家降本增效,提升用户体验与转化效率。

*本次分享将会围绕下面七个主题展开:*

  1. 业务背景

  2. 整体架构

  3. 1.0 时代落地挑战与解决思路

  4. 2.0 时代落地挑战与解决思路

  5. 3.0 时代落地挑战与解决思路

  6. 总结&未来规划

  7. Q&A

分享嘉宾|李明玉 淘天集团 算法专家

编辑整理|孟立诗

内容校对|李瑶

出品社区|DataFun


01

业务背景

1.业务定位

淘工厂作为淘宝产业带白牌商品的核心阵地,采用 M2C 经营模式,直接连接产业带的源头工厂与消费者。

2.电商内容生成挑战

当前电商行业竞争持续升级,内容形式已从传统货架电商的图文详情页展示,发展为种草、图文、短视频、直播等多元化形态。

作为连接工厂与消费者的重要桥梁,商品内容也面临着诸多挑战:

在当前的电商生态中,流量的竞争早已突破单一平台的边界。淘工厂作为一家依托淘宝平台的店铺,不仅需要在站内获取流量,还需通过站外渠道实现全域流量触达,这对白牌商家的内容生产能力提出了更高要求。

淘工厂的商家以中小企业型为主,他们往往普遍缺乏专业运营团队和内容生产能力。传统手工内容生产方式虽然可以满足部分需求,但是面对需要高频上新,需要覆盖图文短视频等多种内容形态的要求时,由于缺乏精细化内容生产经验而显得力不从心。

消费者已不再满足于基础商品信息展示,而是追求更丰富、生动、可信的内容体验。他们注重真实性和可信度,更信赖用户评价与测评;视觉吸引力也成为关键,优质图片和短视频直接影响购买欲望;同时,个性化推荐需求增加,定制化内容能显著提升转化率。

针对当前场景,我们算法团队在构建 AI 内容生产 Agent 的过程中经历了三个阶段演进:

运用 NLP 多模态理解技术,重点提升文本内容的大规模生产效率。通过引入 AI 文案 Agent,实现单日万级别不同类型文案的生产能力,并保持较高审核通过率,成功支撑运营团队管理数十个、多平台的人设账号。

从文本扩展到图片和视频内容生产,核心解决商品图片/视频的生产成本高、同质化等问题。通过构建 AI 创意工厂,支持 AI 模特图、商品图及图像编辑等功能,显著降低商家制图成本,提升淘工厂商品发布时效。

目标升级为提升内容质量,构建了内容理解与诊断 Agent。通过掌握品类间细粒度运营经验,实现从优质内容生产到投放优化的端到端闭环。在此托管式内容生产 Agent 模式下,内容点击率提升超过 10%。

02

整体架构

在上面图中是我们的技术整体架构框架,采用五层设计:

后面我会从 1.0 时代开始详细介绍我们的一些技术实现细节和迭代演进过程。

03

1.0时代落地挑战与解决思路

1.文本内容工业化生产——应用场景

在 1.0 阶段,我们主要聚焦于文本内容的工业化生产,应用于以下三个场景:

2.文本内容工业化生产——落地挑战

在落地过程中,我们遇到了一些挑战:

生产的文本内容要分发到不同的内容平台、不同的社区,平台的人群画像差异是较大的,他们对内容的需求是不同的。所以,针对不同平台对不同内容的需求,需要我们额外的定制化。

例如“什么值得买”是以男性为主的平台,让用户更关注商品的一些真实的性价比和详细参数。

例如“小红书”是以女性为主的平台,倾向于生活化、情感共鸣的表达方式。

模型可能会出现幻觉。例如在生成商品测评类的文章的时候,需要保持商品的属性,这是非常至关重要,那么模型幻觉会破坏我们抽取商品属性。

不同模态之间的内容一致性问题,需要我们通过模型保证,这对模型的多模态理解与生成能力提出了更高要求。

3.文本内容工业化生产-解决思路

我们构建了一个知识库解决方案。该知识库包含各平台的核心人群特征、内容结构以及高频关键词,用以规范内容生产。同时,我们建立了用户反馈机制,通过实时获取点赞、转发、评论等互动数据,评估内容效果并持续优化,形成闭环反馈。

我们主要采取知识增强和后处理两种措施。在知识增强方面,我们预先抽取商品真实属性,提前抽取出来喂给模型,并采用PE和规则引擎对生成文案进行强约束,确保属性识别的准确性。此外,在生产流程中引入后处理校验环节,通过比对生成文本与商品属性的关联度,有效防止模型幻觉的产生。

此外,在跨平台文案生产过程中,我们构建了一个专门的文案生产平台。该平台支持运营和产品人员根据具体需求,选择不同场景、账号类型、人设定位以及内容案例等维度进行定制化设置。基于这些参数,我们的文案生成 Agent 会提供完整的解决方案,并自动推荐适配的文案供用户筛选。

4.技术方案

经过 1.0 阶段的文本内容生产 Agent 实践,我们验证了 AI 技术对运营效率的提升效果。传统模式下需要 4-5 名运营人员专职撰写文案,而采用 AI 生产方式后,仅需 1 名人员配合即可实现日均数万篇内容的生产能力,能够同时支撑数十个账号的运营需求。

04

2.0时代落地挑战与解决思路

1.多模态内容生产——落地挑战

随着业务发展,我们的需求已从单一文本生成扩展到图片、视频等多模态内容生产,由此进入 2.0 阶段。这个阶段重点解决多模态内容生产问题,包括图片和视频内容生成,并针对图片生产成本高、同质化等问题提出了解决方案。

在落地过程中,我们以“AI 创意工厂”产品为核心开展算法技术建设,在实施过程中我们遇到了一些困难:

2.多模态内容生产——解决思路

面对上面在实际中遇到的挑战,我们的解决思路:

我们不仅具备整图重构能力,还构建了专门的商品图编辑 Agent,支持区域擦除、画面扩展等多种精细化编辑功能,通过模块化任务链路满足多样化需求。

3.多模态内容生产——技术框架解析

接下来我将以 AI 创意工厂的产品链路为例,重点解析我们的技术框架。

我们的 AI 模特图的应用场景功能是指输入一件商品图片,系统会自动生成模特穿着该服装的展示图,同时对模特的丰富度和多样性也有相应要求。技术框架主要包含三个模块:

在检测与分割方面,我们的技术选型是对 Grounding dino 模型进行了微调。这个模型本身是一个检测模型,通过使用电商数据进行微调,使它能够更好地理解电商场景中的品类信息,从而更准确地定位目标主体。

在分割模型的搭建,我们优化了 HQ-SAM 算法,并将其与前景识别的 Matting 算法相结合,实现了更精细的分割效果。我们支持两种分割方式:自动识别分割和用户交互式分割。由于这是线上任务,对时效性要求较高,我们对模型进行了性能优化。具体措施包括:

— 以上为试看内容(约 40%),开通会员后阅读全文 —

原文出处:https://www.53ai.com/news/AIdianshang/2025073184207.html