9 月 23 日,YouTube 宣布未来将允许测试最多三个视频剪辑版本,以比较不同开场。该功能被介绍为即将推出,公告未详细说明上线日期、国家范围或使用资格。
先有假设,再做版本
在 Renoir 看来,机会在于将剪辑选择转化为可以复用的认识。为此,团队需要在制作备选版本之前,先说明想弄清什么。“哪个视频更好?”留下了太多未定义的标准。“先展示结果、再解释过程,是否有助于维持观众对演示的兴趣?”则界定了一个可以通过剪辑比较来研究的决定。
如果一个版本更换开场,另一个更换出镜人,第三个增加折扣,即使表现不同,也无法知道哪项变化促成了结果。可以从这组内容中选出一条,但很难将结论用于下一个脚本。有价值的问题会限制变化范围,并明确哪些要素保持不变。
作为先例,YouTube 帮助文档介绍了同时进行的标题与缩略图测试,以观看时长占比评估,并可能没有明确胜出者。这些标准属于已记录的工具,并不定义未来视频剪辑版本测试的运作方式。
同一场演示,三种切入方式
以下是一个完全假设的例子:一位创作者准备制作手持吸尘器视频,承诺展示它如何清理表面上的碎屑,并说明使用中观察到的局限。团队想研究演示的切入方式,同时保持产品、出镜人、表面条件和视频主体一致。
第一种开场展示布满碎屑的表面,并说明清理任务。第二种先展示清理结果,明确这是本次演示的结果,再回到过程。第三种直接进入吸尘器吸走碎屑的动作。每个版本都以不同方式开启同一段解释,没有增加其他版本无法支持的性能承诺。
在这一设计中,变量是切入类型:问题、结果或动作。它并不是在单独测试一个词或一帧画面。每种开场都是一个小型编辑结构。因此,可得出的结论针对的是所测试的整体方式,不能将效果完全归于第一幅画面,也不能推广到任何产品。
为减少不必要的差异,团队可以让开场长度相近,采用相同的音频处理,并在同一点进入主体。如果结果先行的版本需要额外背景,才能避免误解,就应加入这些信息。有序的比较不能成为省略关键信息的理由,仅仅为了让文件看起来相似。
寻找胜出版本之前,先安排如何解读
执行前,Renoir 建议简要记录假设、版本差异、保持不变的要素,以及结果应帮助做出的决定。当该账户能够使用此功能时,需要核实它实际提供哪些指标和结论。记录明确问题,文档和报告则界定能够回答什么。
团队还需要检查标题和缩略图是否仍准确描述所有版本。同时更换这些元素,会为解读引入其他差异。把不同剪辑版本放在不同日期发布,再比较总量,也并不自动等同于同步实验:发布时间、触达受众和背景都可能变化。
内部审核可以提前发现理解问题,但回答的是另一个问题。让同事观看文件,有助于发现顺序是否通顺,或剪辑是否隐藏了局限。这个群体的偏好并不能衡量频道受众的行为。记录这一区别,可以避免将审批意见当成效果证据。
结果需要有明确的适用范围
假设可用分析支持直接展示动作的开场。更有依据的决定是将该方式用于这次演示,并在另一条可比内容中研究其适用性。团队应保留文件,记录改变了什么。这样,一次具体选择可以积累为假设记录,而不是成为所有视频都必须遵守的开场规则。
即使某项可用测量显示一个版本留住了更多观众,也不能证明它带来了更多销售。留存、点击和购买描述的是不同的行为。评估商业影响,需要相关数据,以及这些数据与所展示版本之间有依据的关联。没有这种关联,结论就应限于实际观察到的范围。
如果比较无法区分备选方案,就没有必要硬选一个胜出者。团队可以依据清晰度和制作成本选择,承认假设尚未得到解答,并为下一次测试设计更有意义的差异。价值在于减少下一步决策的不确定性,而不是仅为填满工具选项而制作不同版本。
来源
Renoir新闻与分析。