双重验证远超预期,明略科技创意评估智能体 AdEff 进入实用阶段

数码 0 10
数码资讯
IT之家 数码资讯 发布于 13:30
本条新闻为单纯事实消息的时事新闻,转载自IT之家,版权归源站所有,如有侵权,烦请联系我们

营销,本质是围绕消费者注意力的感性或理性吸引。

预测消费者对不同内容的反应,研究清楚“什么样的内容更具吸引力?”是营销人一直试图解决,但却极为困难的命题。因为不同年龄、职业和性别的人,对视频创意和内容的理解往往存在很大差异,不管是小样本调研、访谈,还是神经科学测试,都无法解决全量、个性化测试的问题,但人工智能技术让注意力预测迎来了突破。

2024 年,明略科技自研的明敬超图多模态大语言模型(HMLLM),通过引入大规模的视频主观多模态评估数据集 Video-SME,收集不同人群在观看相同视频内容时脑电图(EEG)和眼动追踪区域的真实变化,弥合了丰富模态之间的语义差距,可集成帧与帧之间的逻辑推理,实现机器对不同人群的认知模拟。相关成果荣获全球顶级多媒体会议 ACM Multimedia(ACMMM)2024 年度最佳提名(提名率仅 2%)。

2025 年,由明略科技、北京大学、吉林大学组成的研究团队,开创性地建立了业界领先的大规模个性化注视行为数据(SPA-ADV),首次记录了超过 4500 名不同年龄与性别背景用户的真实视觉行为,模型的泛化能力和个性化预测效果进一步增强,可精准地预测“某一类人会看哪里?”。相关论文已被 ACMM2025 正式接收。

为帮助营销从业者预测不同广告的效果,在明敬超图多模态大语言模型(HMLLM)之上,明略科技研发了 AI 驱动的广告测试及优化产品 ——AdEff,并于今年 6 月 19 日面向全球市场发布。

什么是 AdEff?

「AdEff」是 AI 驱动的广告测试及优化平台,基于明略自研的明敬超图多模态大语言模型(HMLLM)研发,采用大模型及混合专家模型协同架构,最快 15 分钟,即可完成广告测试并给出优化建议。AdEff 预测结果真人样本一致性为 89%,专家测试一致性为 76%,能够帮助品牌营销专家及创意专家基于数据做出更明智、更快速、成本更优的决策,提升广告投放成功率。

为了验证 AdEff 的商业实用性,今年 5~7 月,明略科技产品团队对其进行了样本一致性和专家一致性测试。

其中,样本一致性,基于明略科技过去 10 年积累的神经科学真人样本脑电眼动测量数据,真人样本共计 10 万人次;专家一致性测试,基于专家焦点小组访谈法,覆盖北上广三地拥有品牌营销、创意制作、广告测试及数据洞察实操经验的企业和代理机构高层、专家,总计 31 人线下参与。

结果显示,AdEff 凭借超出预期的出色表现,通过了样本及专家一致性的双重验证,这标志着 AdEff 已完全具备商业实用性。

一、样本一致性为 89%,AdEff 可替代真人进行广告测试

广告测试是营销中的关键决策,指的是在广告正式投放之前,通过科学的方法,对广告创意(包括广告文案、视觉设计、视频脚本等内容)进行评估和检验的过程。目的是了解目标受众对广告创意的反应,判断广告创意是否能有效传达信息、吸引受众注意力、激发受众的兴趣和购买欲望,从而降低营销风险、优化创意效果。

通过对真人样本广告创意测试的平均分,以及 AdEff 广告创意预测得分进行回归分析,得出 R²=0.8906,这表明 89% 的 AdEff 的预测得分可以较好地反映真人样本测试的结果,即产品的样本一致性为 89%。

这也意味着:

AdEff 的真人样本拟合表现卓越

高 R² 值表明 AdEff 的预测得分与真人样本测试得分具有强相关性,AdEff 的预测模型在实际应用中具有较高的准确性及可靠性。

AdEff 可替代真人样本进行广告测评

在实际的广告创意评估中,企业可以更多地使用 AdEff 进行全量广告的快速测试,筛选高潜力创意,规避决策风险。同时减少对真人样本测试的依赖,节省人力及时间成本。

二、76% 测试结果符合专家预期,AdEff 广告测试具备商业实用性

专家一致性测试通过专家焦点小组访谈进行,每场访谈均包括主题探讨和产品测评两部分。

主题探讨环节,围绕产品可用性,专家自由表达观点;产品测评环节,每位专家现场观看 5~6 支广告创意(共计 160 支),最终基于自身专业判断,对 AdEff 给出的评价结果打分。

综合效果指数、反应曲线、指标分析、黄金 3 秒、结尾 3 秒、热力图及 4 项核心结果的测评结果,最终数据显示,专家认为,76% 的 AdEff 测评结果符合其预期(所有结果均符合预期为 100%),即 AdEff 当前版本的专家一致性为 76%。

相较普通的真人样本,专家对广告片中的专业表达理解更到位,对广告创意测评的要求更高,对“好创意”也有更严苛的评判标准。76% 的专家一致性得分表明,AdEff 在多个关键指标上的表现超过预期,通过了专家验证。

三、品牌广告主可通过 AdEff,实现 AI 时代的敏捷决策

未来,随着生成式人工智能在营销领域的应用普及,越来越多的内容会被生成,内容迭代速度也会加快,品牌需要生产包括广告在内的大量个性化 / 个体化内容。内容多了,挑战也随之而来 —— 如何快速评估并预测高价值内容。

面对海量内容,AIGD(AI Generated Decision-making),通过 AI 决策或辅助决策将是可行的解决方案,AdEff 便是 AIGD 在广告测试这一运营决策环节的应用,其高达 89% 的样本一致性和 76% 的专家一致性证明,充分运用 AI Agent 进行品牌广告测试具备实际商业价值。

通过使用 AdEff,品牌广告主可以实现:

1.筛选:把控广告质量底线

AdEff 非常适用于广告素材多投放量级大、内外部决策流程长的广告主使用,可帮助品牌把控质量底线,加快内容筛选和优化的速度,降低商业决策风险。

2.管理:建立创意评估标准

对于长期依靠经验决策,或实际投放验证广告效果的广告主,AdEff 清晰的评估指标设定、分析和总结,能帮助其准确地判断广告价值,与创意代理反馈需求,拉齐内外部关于好创意的认知标准,提升沟通效率。

3.培训:提升员工创意素养

广告的泛化、效果化,导致当下很多企业的营销新兵或经验欠缺的员工,对于“什么是好广告?”缺乏科学认知。基于 AdEff 的创意评估数据库,品牌可对“好广告”做分析提炼,与专家培训结合,快速提升员工创意素养。

4.出海:降低海外投放风险

作为全球化产品,AdEff 目前支持多国多语言的广告创意测试,产品团队正在推进海外目标市场的产品落地及专家一致性测试。对于有海外投放需求的广告主而言,未来可以借助 AdEff 提前验证广告片在目标市场的投放成功率,规避潜在风险。

基于明略自研的明敬超图多模态大语言模型,AdEff 让广告测量的速度更快、成本更优、与品牌更相关,让每个广告评估决策更科学、更高效。

AdEff 为标准化 SaaS 服务,支持即开即用。用户可登录 AdEff 官网:AdEff.com,注册并试用,新注册用户每人可获得一次免费体验机会。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

点赞 0 收藏(0)  分享
0个评论
  • 消灭零评论