更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群

近期 DataTester 上线了 MAB 智能调优实验功能,希望通过智能化、自动化的 A/B 实验形式,帮助业务团队实现收益最大化。

在 A/B 实验平台的研发道路上,火山引擎 DataTester 走在业内前沿,在常规的 A/B 实验之外,一直在探索实践智能实验。此次新功能 MAB 智能调优实验(Multi-Armed Bandit), 是一种能根据当前实验数据表现,来智能调整实验内不同实验组的流量比例分配的实验类型。

传统 A/B 实验依赖于统计显著性的经典假设检验,为对照版本和实验版本分配相应的流量,但在实验期间不能够变更每个子版本的流量。因此这类实验需要专门的预留周期(至少 7 天),必须有足够的样本进入实验,并且在实验开始后不能有任何变动,才能得出显著结果。而火山引擎 DataTester 的 MAB 智能调优实验,克服了传统 A/B 实验的上述限制,在如下几个场景上有特殊的应用优势。

在冷启动、流量少的场景下,MAB 实验也能发挥 A/B 实验的优势点。对于初创公司,或在产品、活动冷启动时期,面临的一大问题是没有足够的流量进行实验。但由于 MAB 实验会基于当下指标的表现动态进行流量分配,所以能够在总流量不多的情况下,通过 A/B 实验的形式将收益最大化。

有了 DataTester 的 MAB 实验,短周期的活动也一样可以依靠 A/B 实验进行优化了。活动运营有很大一部分是持续时间较短的活动,例如很多电商活动的持续周期只有 1-3 天,如果受限于传统 A/B 实验的限制,仅实验流量就要跑 7 天以上才能得到显著性的成果,无法应用在短周期活动中。而 DataTester 的 MAB 实验,由于实验核心目标是整个活动收益最大化,而非帮助用户找到数据最优组,因此对实验时限无要求,短周期活动也可以用 A/B 实验优化。

在促进高价值流量转化方面,MAB 智能调优实验可以起到加速作用。对于一些高客单价的大额商品,如汽车、钻石等,每一个转化机会的成本都很高。如果采用传统的 A/B 实验,在获得统计上显著方案的过程中,会错失一部分的前期实验流量,但 MAB 实验能够在过程中根据实时数据进行动态调优,减少实验过程中的转化机会损失。

此外,一些特定场景下,如涉及到 App 文案标题、缩略图、视频内容等的 A/B 实验优化测试,它们需要在短的窗口期内获得最大点击量,却受限于传统 A/B 实验实时性较弱,难以应用优化。而 MAB 可以在短周期内即可查询各版本的转化效果,火山引擎 DataTester 目前可以实现每半小时,即可获取更新数据反馈。

DataTester 是火山引擎数智平台旗下产品,能够深度耦合推荐、广告、搜索、UI、产品功能等多种行业场景需求,为业务增长、转化、产品迭代,运营提效等各环节提供科学的决策依据。

目前,DataTester 推出了 30 天免费试用的活动,在了解了 MAB 智能调优实验的应用场景后,如果你感兴趣,可以前往火山引擎 A/B 测试官网进行申请试用,无需企业认证,一键申请即刻开通!

点击跳转 火山引擎A/B测试DataTester 了解更多

火山引擎 DataTester 上线全新 MAB 智能调优实验的更多相关文章

  1. 火山引擎 DataTester:让企业“无代码”也能用起来的 A/B 实验平台

    更多技术交流.求职机会,欢迎关注字节跳动数据平台微信公众号,回复[1]进入官方交流群 当数字化变革方兴未艾,无代码正受到前所未有的关注.Salesforce 的数据显示,52%的 IT 部门表示,公司 ...

  2. 还原火山引擎 A/B 测试产品——DataTester 私有化部署实践经验

      作为一款面向ToB市场的产品--火山引擎A/B测试(DataTester)为了满足客户对数据安全.合规问题等需求,探索私有化部署是产品无法绕开的一条路.   在面向ToB客户私有化的实际落地中,火 ...

  3. 面向个性化需求的在线云数据库混合调优系统 | SIGMOD 2022入选论文解读

    SIGMOD 数据管理国际会议是数据库领域具有最高学术地位的国际性会议,位列数据库方向顶级会议之首.近日,腾讯云数据库团队的最新研究成果入选 SIGMOD 2022 Research Full Pap ...

  4. HIVE 调优思路和实践

    1,数据存储调优 1.1 设置压缩: 设置中间数据/输出结果压缩传输,使用snappy格式. hive-site.xml: set hive.exec.compress.output = true # ...

  5. 火山引擎 A/B 测试产品——DataTester 私有化架构分享

    作为一款面向 ToB 市场的产品--火山引擎A/B测试(DataTester)为了满足客户对数据安全.合规问题等需求,探索私有化部署是产品无法绕开的一条路. 在面向 ToB 客户私有化的实际落地中,火 ...

  6. MySql(十一):MySQL性能调优——常用存储引擎优化

    一.前言 MySQL 提供的非常丰富的存储引擎种类供大家选择,有多种选择固然是好事,但是需要我们理解掌握的知识也会增加很多.本章将介绍最为常用的两种存储引擎进行针对性的优化建议. 二.MyISAM存储 ...

  7. MySQL性能调优与架构设计——第11章 常用存储引擎优化

    第11章 常用存储引擎优化 前言: MySQL 提供的非常丰富的存储引擎种类供大家选择,有多种选择固然是好事,但是需要我们理解掌握的知识也会增加很多.每一种存储引擎都有各自的特长,也都存在一定的短处. ...

  8. 火山引擎 DataLeap:3 个关键步骤,复制字节跳动一站式数据治理经验

    更多技术交流.求职机会,欢迎关注字节跳动数据平台微信公众号,并进入官方交流群 DataLeap 是火山引擎数智平台 VeDI 旗下的大数据研发治理套件产品,帮助用户快速完成数据集成.开发.运维.治理. ...

  9. JuiceFS 在火山引擎边缘计算的应用实践

    火山引擎边缘云是以云计算基础技术和边缘异构算力结合网络为基础,构建在边缘大规模基础设施之上的云计算服务,形成以边缘位置的计算.网络.存储.安全.智能为核心能力的新一代分布式云计算解决方案. 01- 边 ...

  10. 火山引擎 DataLeap:揭秘字节跳动数据血缘架构演进之路

    更多技术交流.求职机会,欢迎关注字节跳动数据平台微信公众号,回复[1]进入官方交流群 DataLeap 是火山引擎数智平台 VeDI 旗下的大数据研发治理套件产品,帮助用户快速完成数据集成.开发.运维 ...

随机推荐

  1. Java 中 field 和 variable 区别及相关术语解释(转)

    https://www.jianshu.com/p/08e2d85d3ce9 这是一个以前从没仔细想过的问题--最近在阅读Java Puzzlers,发现其大量使用了"域"这个词, ...

  2. Ubuntu 编辑文件、安装、删除软件等常用命令(持续更新)

    一.编辑文件 1. sudo vi 文件名,进入文件页面,如图: 2. 按 i 键或者 o 键,进入编辑,左下角出现---------INSERT---------信息 3. 输入完毕后,按ESC退出 ...

  3. word的实用操作技巧

    1.基本使用操作 (1)文本删除: 退格键backspace:删除光标以左的内容 删除键delete:删除光标以右的内容 直接输入会增加字符,按insert键,会切换成改写模式,新字符代替旧字符,总字 ...

  4. 开发环境搭建:CubeMX、Keil MDK-ARM、仿真器驱动程序

    来源:成电<微机原理与嵌入式系统>漆强 第三章 STM32微控制器开发环境的搭建 一.STM32 CubeMX的安装 1.STM32 CubeMX的下载和安装 先安装java环境安装 下载 ...

  5. [CF1748D] ConstructOR

    题目描述 You are given three integers $ a $ , $ b $ , and $ d $ . Your task is to find any integer $ x $ ...

  6. [USACO2022OPEN S] Subset Equality S

    [USACO22OPEN] 题目描述 奶牛们正在尝试一种相互交换编码信息的新方法,她们在相关的字母中混入不相关的字母,使信息难以解码. 奶牛们传输两个字符串 \(s\) 和 \(t\),每个字符串的长 ...

  7. [ABC274G] Security Camera 3

    Problem Statement There is a grid with $H$ rows from top to bottom and $W$ columns from left to righ ...

  8. JUC_start和run

    类型: run方法是同步 而start是异步 作用: run方法的作用是存放任务代码   ,start的方法是启动线程 线程数量方面: 执行run方法,他不会产生新线程,而执行start方法hi产生新 ...

  9. Scrapy自带的断点续爬JOB-DIR参数

    参考官方文档:https://docs.scrapy.org/en/latest/topics/jobs.html?highlight=JOBDIR#jobs-pausing-and-resuming ...

  10. 3D组合地图在数据可视化大屏中的应用

    前言 当下数据可视化大屏展示的花样层出不穷,可视化大屏的C位越来越卷,地图的样式已经不再止步于普通的平面地图,在虚拟环境中探索和交互,今天我们要介绍的这一款3D组合地图可以将复杂的数据以直观的方式呈现 ...