最新要闻
- 世界讯息:可孚医用N95口罩30只装 灭菌独立包装19.9元大促
- 男子因缺钙CT图像中没有肋骨:“像一个透明人”
- 全球新消息丨189元 OPPO Enco Air3无线耳机上架:HiFi 5 DSP、支持蓝牙5.3
- 腾讯XR业务转向:或将合作引进Quest 2头显
- 闲鱼上买显示器靠谱吗?注意这几点就可以
- 飞利浦推出两款44.5英寸带鱼屏:1500R大曲率、75Hz刷新率
- 行驶中小车后备箱塞人露双脚!司机称其喝醉了:遭网友谴责
- 世界播报:低头族注意了!9岁女孩长期低头颈椎老如50岁
- 领1030元大额券:骆驼户外徒步鞋179元起大促
- 世界观点:亚马逊要求员工一周到岗工作3天:公司一度像个鬼城
- 天天热资讯!埃塞俄比亚政府和“提人阵”武装达成停火协议
- 天天新消息丨义乌自己的全球支付工具!义支付发布:打通16个币种
- 这待遇简直了!美团外卖进军香港 正疯狂招骑手:月入3万+
- 消息!手机套餐费太贵 韩国三大运营商被批:是否串通涨价
- 与剧版强烈反差!《三体》动画豆瓣跌至3.9分:官方已停播
- 特斯拉最入门车型国内现身?别被骗了:“披着狼皮的羊”而已
手机
iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
- 警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- 男子被关545天申国赔:获赔18万多 驳回精神抚慰金
- 3天内26名本土感染者,辽宁确诊人数已超安徽
- 广西柳州一男子因纠纷杀害三人后自首
- 洱海坠机4名机组人员被批准为烈士 数千干部群众悼念
家电
火山引擎 DataTester:在广告投放场景下的 A/B 实验实践
更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群
(相关资料图)
“我知道在广告上的投资有一半是无用的,但问题是我不知道是哪一半。”
——零售大亨约翰·沃纳梅克
这句经典名言,被称为广告界的哥特巴赫猜想,它道出了广告效果衡量的难点,同样也击中了无数广告主的痛点——企业有一半广告费都是被浪费掉的。
广告投放的效果很多时候常与玄学画上等号,但却也是公域营销不可或缺的一环。科学的衡量广告的效果,适时做出策略调整优化转化率,一直既是业界的重点、热点、难点。
如何让企业在广告投放上的每 1 块钱都花在刀刃上?火山引擎 DataTester 或许可以交出一份高分答卷。
DataTester 是字节跳动内部应用多年的 A/B 实验平台,2020 年通过火山引擎面向外部企业开放服务。平台自建立至今,承载了字节 500 余个业务线的 A/B 实验任务,累计已开展过 150 多万次实验。
广告实验是 DataTester 的一大特色能力之一。DataTester 基于自身在因果推断和统计科学方面的深刻积淀,结合字节内部用户增长以及广告算法建设的诸多实践,探索出了很多行之有效的广告效果衡量方法和提升策略。
本文将分享 DataTester 在广告投放场景下的实践经验。
为什么 A/B 实验能提升广告投放效率?
在互联网时代,企业该如何做好广告营销,持续驱动盈利增长呢?
从对字节跳动多年的业务总结来看,实践给出的方法论指向是:50%靠创意,50%靠营销科学。
在广告投放的场景下,一线广告优化师通常会创建多个计划,去测试不同的广告素材效果。这套方法看似科学,实际上却问题多多:
广告计划过量,会对流量造成相互挤压争抢,流量无法平均分配,就难以获取科学的效果对比数据;
广告受众没有实现隔离,如果同一用户可以看到多组广告,则测试结果无法保证科学性;
广告计划过多,会抢占宝贵的营销经费配额,并浪费广告优化师大量人力。
这些问题导致广告投放时,企业浪费了大量的时间精力和金钱,也未必能得到科学量化的的有效结论。
图源:视觉中国
而通过科学的 A/B 实验,可以确保在广告投放中,实现精准的流量分配、受众隔离,获取最为科学的数据统计结果;与此同时,在多个广告计划创建的过程中,性能优越的 A/B 实验平台可支持方案的智能化设置,节约大量人力。
广告方案设计:可根据 A/B 实验的效果选出最佳方案;
广告效果验证:通过 A/B 实验可以达成“快准稳”的效果检测,让大胆创新、快速试错成为可能;
广告问题定位:通过 A/B 实验可以快速定位投放效果不佳的问题原因,避免低效而昂贵的错误迭代。
总结来说,科学的 AB 实验平台,能够确保广告在方案设计、人群选择、渠道定位等每个决策环节,都能获得正向的收益,从而在广告投放时,产生正向反馈越滚越大的复利效应。
字节跳动的广告优化经验分享
字节跳动副总裁、算法和数据技术负责人杨震原曾在火山引擎 A/B 测试开放日中讲述过,“字节跳动成立之初,今日头条就在做策略推荐类的 A/B 测试。2016 年正式建立了支持大规模产品试验的 A/B 测试平台(DataTester),之后陆续接入抖音、西瓜视频等全线业务,把 A/B 测试应用在产品命名、交互设计、推荐算法、用户增长、广告优化和市场活动等方方面面的决策上。”
字节是一家有着深厚 A/B 实验基因的公司,广告实验是 DataTester 全域营销场景下的重要一环。
针对企业在营销场景上的诸多痛点,如人工实验操作繁琐,广告效果难度量、优化无从下手;效果数据来源分散,人工分析费时费力;投放严重依靠人工经验,一线优化师彻夜盯盘、精疲力尽...等等问题,DataTester 提供了全套的广告优化解决方案:
实验智能化调优:基于业界一流统计学专家的算法模型,依照广告效果动态分配流量,实现收益最大化;
打通前后链路数据:支持主流广告渠道的监测能力,实现了后链路数据的打通,助力更科学的效果归因;
打通人群数据:支持与 CDP 人群管理平台深度打通,广告可实现基于用户标签和人群画像的精准投放;
跨渠道广告投放能力:集成包括巨量引擎在内的主流广告投放平台,实现一站式广告素材创意管理、批量广告创建投放、多渠道广告效果监测;
集成建站平台:与多个建站工具深度合作,打造广告落地页搭建和 A/B 实验创建的无缝体验,大幅降低实验门槛。
点击查看大图:DataTester 全域营销场景解决方案
针对具体不同的场景,DataTester 提供了拆分对比实验、落地页优化实验等多种实验类型,方便用户更加便捷地基于实验进行迭代:
素材拆分对比实验:判别更有爆款潜力的广告素材
人群拆分对比实验:判别与产品广告更匹配的人群
增效度量实验:通过人群分流+问卷投放两种形式结合,评估品宣效果
H5 落地页优化实验:判别营销页面转化效率
DataTester 广告实验的几种细分类型
DataTester 广告实验的特色优势
基于 10 年的技术经验打磨,DataTester A/B 实验平台已经做得极为易用,广告投放实验支持通过可视化的手动拖拽等形式,自主编辑实验版本,并获取数据报告。
没有研发团队的企业,以及没有代码经验的广告分析师,也可以快速上手使用。
广告实验作为 DataTester 在全域营销场景的重要解决方案之一,也打磨出了一些独具优势的核心能力。
爆款广告智能创作能力
“爆款素材稀缺”、“起量难”是广告主最常见的痛点。作为信息流广告的核心——素材的优质程度,是决定广告能否起量的关键。
近年来创意素材的生产数量爆发性增长,在巨量引擎平台中,每天新增的视频广告创意素材有 70 万条,还不包含平台上的存量素材数量。
DataTester 与火山引擎的智能创作云合作打通,可提供 10 余款简单易用的创作工具,无需人工剪辑,智能批量化生成各类具有“爆款基因”的广告素材。用户不需要有各类专业软件的使用能力,即可创建广告素材并开启 A/B 实验。
分流技术深度融合广告算法
随着数据驱动科学增长的理念在国内渐火,市面上声称能“帮助广告主对广告投放进行算法优化”的三方服务商越来越多,其中不乏声称能够进行 A/B 实验的厂商。
然而,基于 A/B 实验的基本原理,真正科学可信的 A/B 实验离不开对流量的精准控制和科学分流。但当今主流大型广告平台,由于在广告推荐算法中嵌入实验分流的技术复杂性,很少能够做到向三方提供完备的分流能力。
因此,市面上多数三方服务商提供的所谓广告投放 A/B 实验能力,更可能是徒有其表,噱头成分偏多,其数据偏差之大并不足以支撑得出可信的实验结论。
如图为极度简化版的广告平台分发流程,大型广告平台的实际流程会复杂得多。
火山引擎 DataTester 基于字节跳动在抖音、今日头条等信息流产品中的多年实践经验,探索出了很多行之有效的广告效果科学度量和提升策略,可以完成面向大规模人群的精准分流。
人群隔离:DataTester 可确保实验中的不同实验对象不会展示给同一用户,一个用户最多只能看到实验中的一个计划广告方案;
竞争公平:DataTester 可为多种广告计划提供公平的竞争环境,避免实验中计划相互挤压、抢量,让每一个广告方案都获得同等量级的曝光机会;
报告置信:在收集到充足的实验数据之后,DataTester 将智能化生成分析报告,并确保数据具有统计效力,以精确披露在实验中获胜的广告计划或素材。
广告页搭建可无缝衔接 A/B 实验
广告网站或落地页转化率,是会因为页面上元素的细微差别,而产生巨大差距的。例如按钮位置的交换、颜色的改变、顺序的调整等,均能造成转化率的增长或降低。此时,A/B 实验就是验证最优版本的科学工具。
DataTester 已与橙子建站等多个广告落地页建站平台深度合作,在企业完成广告落地页搭建后,即可无缝开启 A/B 实验,大幅降低实验创建门槛。
实验智能流量调优能力
开启实验前,哪一个版本的方案表现更好通常未知。传统的 A/B 实验平台,依赖于统计显著性的经典假设检验,为对照版本和实验版本分配等额流量,一般不允许在实验期间变更每个子版本的流量。
因此此类实验缺陷比较明显 —— 即便已发现实验版本明显优于对照版本,实验期间还需要在对照版本上继续花费时间流量,直至整场实验结束。
而 DataTester 除去提供上述“常规实验”能力外,也同时可提供“MAB 实验”实验类型选择。
“MAB 实验”是智能调优实验,实验方案可以直接在线上进行,DataTester 将根据实时数据反馈,智能调节实验方案的流量分配,给广告收益效果好的方案倾斜更多的流量,帮助企业收益最大化。
与传统的 A/B 实验相比,以下几种场景适用 MAB 智能流量调优实验:
促销优惠:此类场景更关注提高转化率。MAB 智能实验在促销期间,会将更多流量发送给效果较好的变体,而将较少流量发送给效果欠佳的变体,帮助企业尽快拿到收益点;
推送策略:推送文案/标题为生命周期较为短暂的内容。固定的活动期间后,会失去相关性。因此采用 MAB 智能实验,可以使策略最大程度地尽快发挥效用;
落地页优化:同时上线几种不同版本的落地页方案,实时优化落地页的点击和转化率。
结语
DataTester 融合了字节跳动了多年在业务增长、转化、产品迭代,策略优化,运营提效等环节的增长理念,是一款性能强大、使用便捷的 A/B 实验产品。
在广告投放场景上,DataTester 基于多年的打磨和迭代,可支持广告从制作到投放,到最终效果收集的全链路场景实验需求,并能够与字节系产品及平台深度打通、相互结合应用。
此外,DataTester 也能够深度耦合推荐、搜索、UI、产品功能等其他多种业务场景需求,为业务提供科学的决策依据。目前,火山引擎 DataTester 已经服务了美的、得到、凯叔讲故事等在内的上百家标杆客户,将成熟的 " 数据驱动增长 " 经验赋能给各行业。
点击跳转 A/B测试 DataTester 了解更多
火山引擎 DataTester:在广告投放场景下的 A/B 实验实践
第120篇: DOM编程(常用操作、动态脚本、样式及动态表格)
世界讯息:可孚医用N95口罩30只装 灭菌独立包装19.9元大促
男子因缺钙CT图像中没有肋骨:“像一个透明人”
全球新消息丨189元 OPPO Enco Air3无线耳机上架:HiFi 5 DSP、支持蓝牙5.3
腾讯XR业务转向:或将合作引进Quest 2头显
闲鱼上买显示器靠谱吗?注意这几点就可以
世界要闻:物联网平台选型葵花宝典:盘点开源、SaaS及通用型平台的优劣对比
【Unity AR】
AR精灵制作学习记录 【天天快播报】项目开发软件架构选择指南
飞利浦推出两款44.5英寸带鱼屏:1500R大曲率、75Hz刷新率
行驶中小车后备箱塞人露双脚!司机称其喝醉了:遭网友谴责
世界播报:低头族注意了!9岁女孩长期低头颈椎老如50岁
领1030元大额券:骆驼户外徒步鞋179元起大促
世界观点:亚马逊要求员工一周到岗工作3天:公司一度像个鬼城
K8S-deployment.yaml文件详解
开心档-Git 基本操作
资讯推荐:制造业做信息化(IT管理、程序员)有前途吗?---浅谈信息系统规划
全球观点:记录--什么时候会阻塞HTML文档渲染过程?
【Oculus Interaction SDK】(十一)关于手势识别中手势设置的详细信息
天天热资讯!埃塞俄比亚政府和“提人阵”武装达成停火协议
天天新消息丨义乌自己的全球支付工具!义支付发布:打通16个币种
这待遇简直了!美团外卖进军香港 正疯狂招骑手:月入3万+
消息!手机套餐费太贵 韩国三大运营商被批:是否串通涨价
与剧版强烈反差!《三体》动画豆瓣跌至3.9分:官方已停播
特斯拉最入门车型国内现身?别被骗了:“披着狼皮的羊”而已
关注:Camunda(一)---安装和简单示例
女子在桃李面包中吃出带锈刀片 官方:不存在使用该刀片的生产环节
环球快看:手机寒气仍存 5G巨头中兴被曝优化人员 回应称正常调整
世界观焦点:蔚来ET9要来了?号称“蔚来版迈巴赫” 屏幕开始横过来
掌权八年后上汽大众换帅:贾健旭接棒
大嘴猴50S精梳棉男士四角裤狂促:券后每条不到10元!
WPF学习_day1
K8S-Service的yaml文件详解
全球时讯:【机器视觉】-什么是机器视觉?
当前报道:游戏王dm新马甲_[游戏王DM]羁绊
全球热点!张艺谋监制!北京冬奥拍成电影了:《北京2022》预告片发布
世界视讯!提前!韩国欲2028年推6G网 速度有多快?5G是高铁 6G就是飞机
全球首发5.5G 高通骁龙X75基带不再公布速率:峰值没啥意义
极氪汽车被指销售欺诈!车主集体投诉:退一赔一
世界新动态:ChatGPT火了 中国电信股价大涨50%:底层技术早有布局
世界观热点:璞华易构低代码平台,真正领跑未来的敏捷软件开发方案!
CXPACKET等待类型分析
华晨宝马第500万辆下线!东北老工业基地全力发展新能源车 沈阳比肩深圳
天天新消息丨印度3年内将成为主要电信出口国 5G堆栈“已准备就绪
光环退却 曝神车雷克萨斯ES 300H大优惠:广州35万可落地
世界新资讯:神似小红书 微信为什么要做“小绿书”?
李安:下部电影《李小龙》不会用120帧 挑战观众习惯
当前信息:【踩坑记录】SpringBoot跨域配置不生效
迈柯唯Maquet协议对接(呼吸机、麻醉机)FLOWi SERVOi
【当前独家】远程服务调用(RPC与Rest本质区别)
王予嘉图片_王予嘉
焦点快报!《消费者报告》:宝马制造的汽车最高 路虎果然名不虚传
讯息:全国110个城市建成千兆城市!运营商喊话继续加速千兆宽带:每月198 还能便宜
要闻速递:K8S-Pod的yaml文件详解
全球热推荐:ChatGPT:HuggingFace使用GPT-2模型并额外语料训练
每日观点:第一周学习--linux
环球速讯:消灭挖孔!努比亚首款屏下摄像头新机Z50 Ultra入网
每日资讯:针对富士X卡口设计:腾龙宣布开发新超广角变焦镜头
通讯!小米汽车全新谍照曝光:定位三厢、车头极长
Redis缓存穿透 && 缓存击穿 && 缓存雪崩
环球热头条丨机器学习-集成学习XGBoost
速读:科创信息:公司目前涉及少量军工业务
世界快报:二月二龙抬头来了!明晚10点龙形天象将出现在夜空 天文专家科普
1899元!小米发布智能门锁M20大屏猫眼版:续航1整年
天天热点!直到丈夫临死 我才发现30多年前闻到的“怪味”竟是大病预兆!
全球通讯!开车方便了!内地与中国澳门签署驾驶证互认换领协议:免试
世界动态:爱奇艺客服回应不再限制投屏:到期后再续订还是只有480P
微博会员可以看访客记录吗?唯美微博语录11句有哪些?
恐龙家族有哪些种类?恐龙家族有哪些成员?
网络用语龟龟是什么意思?龟龟是谁家的粉丝?
綦江怎么读?綦江旅游攻略必去景点有哪些?
诺基亚7210c上市价格是多少?诺基亚7210c手机参数
昂达平板电脑怎么样?昂达平板电脑忘记密码怎么办?
光波炉是干什么用的?光波炉的用法和功能有哪些?
猫特别爱叫是什么性格?猫特别爱叫怎么纠正?
环球热文:(数据库系统概论|王珊)第五章数据库完整性:习题
天天观焦点:数据结构刷题2023.02.20小记
Windows环境下FTP Server在局域网内的搭建
环球速讯:《微附件使用教程,公众号文章上传文件、附件超简单教程,图文教程详细易懂》
天梭机械表一天误差多少算正常?天梭机械表如何调整时间和日期?
我的世界怎么去蘑菇岛?我的世界怎么传送坐标?
微动态丨被7年老粉起诉后 爱奇艺宣布VIP会员调整:老会员高清投屏恢复
当前观察:苏州2022年新生儿爆款名字公布引热议 网友称男/女孩这些名字土爆了
天天百事通!所有新车小电瓶亏电 车主:埋在凯迪拉克锐歌这颗炸弹终于炸了
天天日报丨90后小伙以为健康 体检一身老年病 网友:一体检就害怕
全球观天下!Redmi K60被官方暴力肢解:做成了一个机甲兔女郎
【全球新视野】4次迭代,让我的 Client 优化 100倍!泄漏一个 人人可用的极品方案!
React Hooks模拟组件生命周期
python 二分查找算法
【K哥爬虫普法】百度、360八年恩怨情仇,robots 协议之战终落幕
当前简讯:对于多方安全计算,你是否也有这样的疑惑?
天天速看:央行2月20日开展2700亿元7天期逆回购操作
天天速看:比亚迪、特斯拉谁强让美国投资人吵翻:前者利润、技术、全球市场都差不少?
世界热资讯!暴雪《暗黑破坏神4》开篇动画公开:相比3代跨越式进步
13倍浓缩:日本隅田川胶囊咖啡1元/杯历史新低
世界快资讯:你被各式的电话推销骚扰过吗?说了不需要还能接到电话
当前速讯:百公里5个油 广汽本田ZR-V致在e:HEV今日上市:若卖19万买吗
手机哪些功能最费电?想不到耗电大户竟是相机 没电千万别用
每日观察!惨!特斯拉Model S疑似失速撞上消防车:司机死亡 车被压扁