电商搜索的逻辑变了。过去是用户搜“红色连衣裙”,系统回一堆红色的裙子;现在系统得先看懂这张图,再理解“适合职场通勤”这四个字背后的语境。
2023年以来,手淘搜索广告全链路大规模接入多模态表征技术。根据知乎专栏《2025年搜推广多模态大模型表征和创意生成技术业界进展与趋势》的数据,经过五次全量迭代,这套系统累计带来了大盘CTR(点击通过率)20%的提升。这不是简单的关键词匹配胜利,而是语义理解的跨越。然而,每一次点击率的攀升,都伴随着底层算力成本的指数级膨胀。
视觉算法的十年迭代
淘天在视觉算法上的积累,最早可以追溯到“拍立淘”。量子位在回顾淘天算法十年演变时提到,早期的拍立淘主要依赖图像相似度检索,也就是“看图找图”。
如今,这种能力已经发生了质变。系统不再只是识别颜色或款式,而是能理解“适合职场通勤的红色连衣裙”这一复杂意图。2024年3月,淘宝全面升级AIGX技术体系,智源社区报道指出,这一体系的目标是将AI能力渗透到搜索、推荐、客服等每个环节,解决具体问题。这意味着多模态交互成为常态:用户可以直接通过图片、语音甚至视频片段进行搜索。
这种交互体验的提升,直接拉高了用户的表达效率,但也让后端的基础设施承受了巨大压力。电商搜索不同于通用搜索,它不仅要提供相关性结果,还要兼顾库存、价格和物流。InfoQ文章《京东大模型革命电商搜推技术》中强调,电商优化的核心指标是GMV和UCVR,多模态技术需要在保持高相关性的同时,确保转化的有效性。
算力成本的隐形账单
多模态请求的处理远比传统搜索复杂。一次搜索可能需要经历图像编码、文本对齐、跨模态检索等多个环节。为了实现高精度匹配,平台不得不引入更大规模的模型和更复杂的混合检索架构。
成本的压力是实打实的。博通2026财年Q2财报显示,AI芯片销售额同比暴增143%至108亿美元,但股价却出现下跌。资本市场开始审视AI算力的投入产出比。单卡2000瓦功耗下的液冷成本、Token计费的失控风险,正倒逼企业重新计算每一瓦电力的真实回报。
对于中小商家而言,接入多模态搜索意味着更高的API调用费用和更复杂的运维难度。如果缺乏精细化的成本监控,极易陷入Token消耗激增的陷阱,进而造成亏损。
端侧AI与混合架构
除了成本,合规也是多模态搜索不可忽视的一环。随着欧盟AI法案和国内生成式AI服务管理办法的落地,数据隐私和版权保护成为悬在企业头顶的风险。企业不能仅靠API接口勾选来规避风险,而需要建立内部数据沙箱与动态行为存证体系。
面对云端的高昂成本和数据敏感性问题,端侧AI逐渐成为新的解决方案。Arm在2026年初的预测中指出,随着Kleidi指令集的优化,手机端在处理多模态任务时展现出比云端更高的能效比。iPhone 19、小米16等机型已在本地运行量化多模态模型,能够显著降低延迟并保护用户隐私。
将部分多模态预处理任务下沉到端侧,不仅减轻了云端服务器压力,也更好地满足了隐私保护需求。这种“云端+端侧”的混合架构,或许是在成本、性能与合规之间找到平衡的最佳路径。
商家的务实选择
在巨头们的技术军备竞赛中,中小商家的策略应当更加务实。首先,避免盲目追求全量多模态能力,而是根据品类特点选择性接入。服饰类商家可重点优化图像检索和搭配建议,3C类商家则可侧重参数对比和功能解释。
其次,建立严格的成本监控机制。引入熔断机制和动态存证,防止因技术故障导致的成本失控。同时,关注国产算力平台的优化方案,如昇腾910C跑通1.6万亿参数DeepSeek的案例所示,通过算子重写和通信优化,可以在一定程度上降低推理成本。
最后,重视数据的合规使用。多模态搜索中,用户生成的图片和描述可能涉及版权和隐私问题。平台需提供清晰的合规指引,帮助商家正确使用AI工具,避免因侵权遭受法律制裁。
2026年的电商搜索,早已超越了关键词匹配的范畴,成为算力、算法与合规的综合较量。20%的CTR增长是机遇,也是考验。只有在成本控制和用户体验间找到平衡点的玩家,才能在这场变革中立于不败之地。