(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210726294.0 (22)申请日 2022.06.23 (71)申请人 广州华多网络科技有限公司 地址 511442 广东省广州市番禺区南村镇 万达广场B1栋24层 (72)发明人 胡凌宇　 (74)专利代理 机构 广州利能知识产权代理事务 所(普通合伙) 44673 专利代理师 王增鑫 (51)Int.Cl. G06Q 30/02(2012.01) G06V 10/44(2022.01) G06N 3/08(2006.01) G06N 3/04(2006.01) (54)发明名称 广告文案创 作方法及其装置、 设备、 介质、 产 品 (57)摘要 本申请涉及广告文案创作方法及其装置、 设 备、 介质、 产品， 所述方法包括： 获取目标商品的 商品图片； 经图片编码器提取出商品图片的图像 特征， 获得商品图片映射到特定语义空间的图像 特征向量； 将所述图像特征向量作为初始的输入 向量提供给解码器逐步自回归解码出广告文案 的文本序列中的各个文本向量， 其中， 前一步的 文本向量用于查询商品图片的图像特征中的关 键特征作为后一步的文本向量相对应的输入向 量； 根据解码器预测出的文本向量序列还原出广 告文案的文本序列。 本申请获得的广告文案由于 基于商品图片的图像特征而获得， 能够更为全面 地反映商品图片中的卖点特性， 且不受创 作者风 格的影响而具有均一质量。 权利要求书2页 说明书16页 附图5页 CN 115099854 A 2022.09.23 CN 115099854 A 1.一种广告 文案创作方法， 其特 征在于， 包括： 获取目标商品的商品图片； 经图片编码器提取出商 品图片的图像特征， 获得商 品图片映射到特定语义空间的图像 特征向量； 将所述图像特征向量作为初始的输入向量提供给解码器逐步自回归解码出广告文案 的文本序列中的各个文本 向量， 其中， 前一步的文本 向量用于查询商品图片的图像特征中 的关键特 征作为后一 步的文本向量相对应的输入向量； 根据解码器预测出的文本向量序列还原出广告 文案的文本序列。 2.根据权利要求1所述的广告文案创作 方法， 其特征在于， 经图片编码器提取出商品图 片的图像特 征， 获得商品图片映射到特定语义空间的图像特 征向量， 包括： 将商品图片切分为多个等 规格的子图， 构成子图序列； 应用图片编码器对所述子图序列中的各个子图提取图像特征， 获得各卷积层相对应的 图像特征信息； 将所述图像特征信 息处理为适配所述解码器的输入的图像特征向量， 使其投射于特定 语义空间。 3.根据权利要求1所述的广告文案创作 方法， 其特征在于， 经图片编码器提取出商品图 片的图像特 征， 获得商品图片映射到特定语义空间的图像特 征向量， 包括： 经图片编码器 中预设的多个卷积层逐步提取所述商 品图片的图像特征， 获得各卷积层 相对应的图像特 征信息； 将最后一个卷积层所提取的图像特征全连接映射至适配所述解码器的输入的特定语 义空间， 获得图像特 征向量。 4.根据权利要求1所述的广告文案生成方法， 其特征在于， 将所述图像特征向量作为初 始的输入向量提供给解码 器逐步自回归解码出广告文案的文本序列中的各个文本向量， 包 括： 将所述图像特 征向量作为初始的输入向量输入至所述 解码器开始逐步 解码； 每一步解码后， 解码器根据所述输入向量预测出其对应的文本向量， 将该文本向量自 回归传递至预设的注意力层； 注意力层根据自回归的文本向量查询出图片编码器提取图像特征过程中的图像特征 信息中的关键特 征向量； 将该关键特征向量作为解码器下一步解码的输入向量继续迭代预测出下一文本向量， 直至完成广告 文案的文本序列相对应的各个文本向量的预测。 5.根据权利要求4所述的广告文案创作 方法， 其特征在于， 注意力层根据自回归的文本 向量查询出图片编码器提取图像特 征过程中的图像特 征信息中的关键特 征向量， 包括： 以自回归的文本向量为查询向量， 以图片编码器的图像特征信息为键向量和值向量， 将查询向量与键向量进行交 互以确定出商品图片的关键向量； 将所述关键向量进行归一 化计算出注意力权 重， 获得权 重向量； 以所述权 重向量对所述 值向量加权求和获得关键特 征向量。 6.根据权利要求1所述的广告文案创作 方法， 其特征在于， 经图片编码器提取出商品图 片的图像特 征的步骤之前， 包括：权　利　要　求　书 1/2 页 2 CN 115099854 A 2将所述图片编码器和解码器构造为广告文案创作模型， 作为生成器与 预设的判别器构 造为生成对抗网络， 所述判别器预先被训练至 收敛状态， 适于二分类判别广告文案的质量 类别； 冻结所述判别器的权重， 采用商品图片作为生成对抗网络的输入， 以正样本对应的标 签计算判别器输出的损失值， 将该生成器训练至收敛状态。 7.根据权利要求1所述的广告文案创作 方法， 其特征在于， 经图片编码器提取出商品图 片的图像特 征的步骤之前， 包括： 采集历史商品广告中的商品图片、 广告文案以及商品类别标识， 构造为数据集中的映 射关系数据； 以数据集的映射关系数据中的商品图片为训练样本输入所述的图片编码器进行预训 练， 采用对应预设的商品类别标识作为所述商品图片预训练的监督标签， 将图片编码器训 练至收敛状态； 以数据集的映射关系数据中的广告文案为训练样本输入所述的解码器进行基于无监 督的预训练， 将解码器训练至收敛状态； 将完成预训练 的图片编码器和解码器与注意力层构造为广告文案创作模型， 以商品图 片为输入， 以所述商品图片相对应的广告 文案为监督标签将该模型训练至收敛状态。 8.一种广告 文案创作装置， 其特 征在于， 包括： 图片获取模块， 用于获取目标商品的商品图片； 图片编码模块， 用于经图片编码器提取出商品图片的图像特征， 获得商品图片映射到 特定语义空间的图像特 征向量； 解码输出模块， 用于将所述图像特征向量作为初始的输入向量提供给解码器逐步自回 归解码出广告文案的文本序列中的各个文本 向量， 其中， 前一步的文本 向量用于查询商品 图片的图像特 征中的关键特 征作为后一 步的文本向量相对应的输入向量； 文案还原模块， 用于根据解码器预测出的文本向量序列还原出广告 文案的文本序列。 9.一种计算机设备， 包括中央处理器和存储器， 其特征在于， 所述中央处理器用于调用 运行存储于所述存储器中的计算机程序以执行如权利要求1至7中任意一项所述的方法的 步骤。 10.一种计算机可读存储介质， 其特征在于， 其以计算机可读指令的形式存储有依据权 利要求1至7中任意一项 所述的方法所实现的计算机程序， 该计算机程序被计算机调用运行 时， 执行相应的方法所包括的步骤。权　利　要　求　书 2/2 页 3 CN 115099854 A 3