数据与自动化 · closed-loop-analytics-upgrade

营销动作效果验证 Skill

把营销改动前后的平台数据拉取出来,对比核心指标,生成一份决定保留或放弃该改动的验证报告。

在发布推文、修改页面标题、发送冷邮件后使用。该技能抓取平台控制台的真实曝光、点击和转化数据,对比改动前后的业务指标变化,写明哪些指标提升了、是否存在干扰因素,最后给出一份是否要把改动写进操作手册的建议。

WHAT IT SOLVES

把营销改动前后的平台数据拉取出来,对比核心指标,生成一份决定保留或放弃该改动的验证报告

把营销改动前后的平台数据拉取出来,对比核心指标,生成一份决定保留或放弃该改动的验证报告。跑完你拿到的是一份包含改动详情、负责人和数据拉取来源明细的 Markdown 格式验证报告,中间一共 7 步。

最适合的真实场景

  • 01

    海外营销操盘手测试了多条短视频开头,需要根据留存曲线和完播率决定保留哪一条

  • 02

    SEO 编辑修改了 Landing Page 的网页标题,需要核查 GA4 会话数和搜索点击率的变化

  • 03

    B2B 获客团队在外联邮件里换了新钩子,需要检查 Instantly 后台的回复率和会议预约数

  • 04

    社媒运营准备下个月播客选题,需要对比上月 X 平台不同主题推文的点击和互动数据

  • 05

    销售团队调整了跟进话术,需要核查 Gong 通话录音里的购买信号和 HubSpot 商机转化数

你要先准备的资料

  • 改动前基线数据的起止日期与改动后测试数据的起止日期,时间精确到日
  • 平台后台的只读授权凭证,或者从 X、YouTube、GA4 后台直接导出的标准 CSV 数据文件
  • 操盘手在测试时间段内执行的其他运营动作记录,用于排查外部干扰因素
  • 明确标识被测试的具体变量,例如新换的邮件开头文本或更改后的网页标题元数据
  • 提前定义好该次测试的核心判定指标名称,以及不可大幅下滑的次要防守指标

跑完你会拿到什么

  • 一份包含改动详情、负责人和数据拉取来源明细的 Markdown 格式验证报告
  • 基线数据与测试数据各核心指标的数值变化对照表,附带具体差值与数据解读
  • 标注外部干扰因素、缺失数据以及异常来源的数据评估段落
  • 明确的动作采纳、继续测试或直接回退的最终决定指令
  • 下一步操作手册的修改指令列表,以及写明复测日期和复测指标的复测计划

METHOD

收集前后台数据 → 分平台拉取指标 → 清洗异常与干扰 等 7 个环节

一共 7 步。其中 5 项能力决定了换个 AI 会不会更麻烦。

  1. 收集前后台数据输入改动前的基线时间段和改动后的测试时间段,同时提供平台后台只读查看权限或导出的 CSV 数据文件。
  2. 分平台拉取指标根据 X、YouTube、SEO 或外联等不同渠道,提取曝光、点击率、留存曲线、商机转化等原始数据。
  3. 清洗异常与干扰排查并标注数据提取过程中的连接器故障,记录同期其他运营动作或季节性因素造成的干扰。
  4. 对照核心指标变化把基线数据和测试数据放入 Markdown 表格,逐行计算各项指标的具体数值与差值,并给出差值解读。
  5. 执行晋级或回退如果测试组核心指标胜出且无负面异常,决定采纳改动。如果数据量太小或结果下滑,标记继续测试或回退。
  6. 写入修改指令将胜出的动作转化为操作手册的具体修改指令,包括修改提示词、替换邮件模板或更新评分规则。
  7. 设定复测节点在报告末尾写下具体的下一次数据核查日期和重点关注的指标名称,把单次测试变成常规检查。

这个 Skill 用到的能力: 读本地资料写本地文件运行脚本MCP 与连接器中文办公文档 。不同 AI 对这些能力的支持程度不一样,所以同一个 Skill 换个 AI,有几步做法会变。

WORKED EXAMPLE

B2B 团队验证外联邮件新钩子的回复效果

B2B 团队验证外联邮件新钩子的回复效果

B2B 获客团队在 Instantly 软件里把外联邮件的第一句话从案例展示换成了痛点提问。团队需要在一周后向获客负责人交付一份验证报告,确认这次文本改动是否提升了客户的正面回复率,并决定下周是否要在全部外联序列里替换这个新钩子。

  1. 记录基线时间范围为更改文本前的一周,测试时间范围为更改后的最近一周
  2. 从 Instantly 后台拉取这两个时间段的正面回复、会议预约和退订数据
  3. 对比基线数据,计算新钩子带来的各项指标具体差值并生成数据对照表
  4. 核查测试时间段内是否更换了发件域名,并在评估段落中标注为干扰因素
  5. 根据正面回复率是否提升,在报告末尾输出采纳指令或恢复旧文本的指令

预期结果:交付了一份 Markdown 报告,包含基线与测试段的回复率对照表。报告给出了在全序列采纳新钩子的指令,以及下个月五号的复测日期。由于数据中存在一个发信连接器报错,该时间段的异常数据被单独圈出,需要人工向系统管理员确认发送状态。

PITFALLS · VERIFICATION

改动测试期碰上国外公共假期,流量上升被错误判定为钩子写得好

最常踩的坑

  • 改动测试期碰上国外公共假期,流量上升被错误判定为钩子写得好
  • 广告账户预算和定向在测试期间被偷偷改动,导致流量来源不干净
  • 测试时间只跑了两天,样本量太小,无法证明新标题的长期胜出率
  • 新页面上线时统计代码漏装,GA4 拿不到改动后的真实转化数据
  • 凭操盘手个人直觉觉得新文案好,但实际核心指标没有超过基线数据

怎么确认这次跑对了

  • 已经形成可检查的一份包含改动详情、负责人和数据拉取来源明细的 Markdown 格式验证报告,关键判断能回到输入资料或过程证据。
  • 已经形成可检查的基线数据与测试数据各核心指标的数值变化对照表,附带具体差值与数据解读,关键判断能回到输入资料或过程证据。
  • 已经形成可检查的标注外部干扰因素、缺失数据以及异常来源的数据评估段落,关键判断能回到输入资料或过程证据。
  • 已逐项检查「改动测试期碰上国外公共假期,流量上升被错误判定为钩子写得好」等高频问题,并记录需要人工确认的下一步。
营销动作效果验证 Skill适合哪些岗位使用?

海外营销操盘手、B2B 获客团队、SEO 编辑、社媒运营。典型场景包括海外营销操盘手测试了多条短视频开头,需要根据留存曲线和完播率决定保留哪一条;SEO 编辑修改了 Landing Page 的网页标题,需要核查 GA4 会话数和搜索点击率的变化;B2B 获客团队在外联邮件里换了新钩子,需要检查 Instantly 后台的回复率和会议预约数。

开始前需要准备什么资料?

至少需要改动前基线数据的起止日期与改动后测试数据的起止日期,时间精确到日、平台后台的只读授权凭证,或者从 X、YouTube、GA4 后台直接导出的标准 CSV 数据文件、操盘手在测试时间段内执行的其他运营动作记录,用于排查外部干扰因素。资料越具体,结果越能直接用于决策。

最后能得到什么可检查的结果?

一份包含改动详情、负责人和数据拉取来源明细的 Markdown 格式验证报告、基线数据与测试数据各核心指标的数值变化对照表,附带具体差值与数据解读、标注外部干扰因素、缺失数据以及异常来源的数据评估段落。每项都可以逐条核对来源和数字。

哪些情况下结果会不可靠?

改动测试期碰上国外公共假期,流量上升被错误判定为钩子写得好;广告账户预算和定向在测试期间被偷偷改动,导致流量来源不干净。出现这些情况时需要人工复核。

支持哪些 AI Agent?

已适配 WorkBuddy、OpenClaw、Hermes Agent、Codex、Claude Code、TRAE、ZCode 共 7 种,每种都有独立的安装说明和能力对照。

ORIGINAL SOURCE

2 个原始文件,19 个文档章节,固定在 a9f11007

上游原文完整保留在加搜服务器上,可逐节查看,也可以直接下载。 当前镜像共 2 个文件、5.2 KB。

原始 Skill 文档 上游原文完整保留,中文概述已转换为营销任务、输入资料和交付结果。

Closed-Loop Analytics Upgrade

Principle

A workflow is not a closed loop until it checks whether the change worked and updates the playbook from that evidence.

For marketing skills, that means pulling analytics after the change window. Manual opinions are useful. Platform truth wins.

Core pattern

  1. Input: usage logs, recommendations, shipped changes, platform analytics, owner feedback, and cost/runtime data.
  2. AI action: compare baseline vs candidate, find repeatable signals, and propose a skill/playbook patch.
  3. Output: candidate patch to a prompt, skill, connector, brief template, scoring rubric, or next-action rule.
  4. Judgment: success rate, speed, cost, quality, human correction rate, and actual performance delta.
  5. Self-improvement: promote only if it beats baseline. Otherwise keep testing, rollback, or mark unproven.

Analytics by surface

X/Twitter

Track:

  • impressions
  • engagement rate
  • replies
  • reposts
  • bookmarks
  • profile clicks
  • follower delta
  • post length
  • hook style
  • proof number
  • CTA type
  • topic bucket

Use for:

  • title/hook formulas
  • longform structure
  • CTA patterns
  • post timing
  • topic scoring
YouTube

Track:

  • impressions
  • CTR
  • average view duration
  • retention curve
  • watch time
  • subscribers gained
  • comments
  • traffic source
  • title/thumbnail/hook metadata
  • video length and topic bucket

Use for:

  • title formulas
  • thumbnail rules
  • first-15-second hook
  • retention beats
  • chapter structure
  • Shorts cutdowns
  • repurposing guidance
SEO/AEO/GEO

Track:

  • GSC clicks, impressions, CTR, average position, query/page mix
  • GA4 sessions, engaged sessions, conversions, assisted leads
  • Ahrefs rankings, backlinks, traffic estimates, keyword movement
  • ClickFlow opportunities
  • AI-search / answer-engine visibility where available
  • CMS/page change log

Use for:

  • content refresh patterns
  • AEO/GEO opportunity scoring
  • query/page prioritization
  • internal linking and schema recommendations
  • rollback decisions
Revenue / outbound

Track:

  • HubSpot owner, lead, deal, and pipeline movement
  • Gong call language, objections, buying signals, and outcomes
  • Instantly/Smartlead positive replies, booked meetings, unsubscribes, spam risk
  • Metricool/LinkedIn post performance
  • GA4/HubSpot attribution

Use for:

  • outbound sequence patches
  • offer angle scoring
  • sales follow-up language
  • content-to-pipeline investment decisions

Required readback fields

Every promoted change needs:

  • change made
  • owner
  • baseline window
  • candidate window
  • source systems pulled
  • primary metric
  • secondary metrics
  • metric winner
  • caveats/confounders
  • decision: promote / keep testing / rollback / unproven
  • next patch
  • next readback date

Promotion rules

Promote when:

  • the candidate beats baseline on the primary metric, or
  • the candidate exposes a repeatable audience/customer signal, and
  • downside metrics are not meaningfully worse.

Do not promote when:

  • volume is too low
  • attribution is too dirty
  • the result is explained by seasonality or unrelated campaigns
  • the connector failed
  • only the author liked it

That last one is harsh but spiritually important.

Safety boundaries

Read-only analytics pulls are fine. External writes still require approval:

  • posting to X/LinkedIn/YouTube
  • publishing or editing CMS content
  • changing ad accounts, bids, budgets, targeting, or creative
  • mutating CRM/outbound tools
  • sending emails or DMs
  • changing credentials or production systems

Output template

# Readback: <skill/change>

## Verdict
Promote / keep testing / rollback / unproven

## Change tested
<what changed>

## Data pulled
| Source | Window | Status |
|---|---|---|

## Baseline vs candidate
| Metric | Baseline | Candidate | Delta | Interpretation |
|---|---:|---:|---:|---|

## Caveats
<confounders and missing data>

## Patch
<what changes in the skill/playbook>

## Next readback
<date + metric>

来源与版本声明

本页面由加搜科技整理业务说明并托管安装文件。原始 Skill 来源渠道:GitHub; 原始项目名称:closed-loop-analytics-upgrade; 固定版本:a9f11007aca3; 许可证:MIT。技能包内保留完整出处和许可证说明。

各 Agent 能力说明参考对应官方文档。页面不提供外部跳转。

INSTALL

营销动作效果验证 Skill v1.0.0,ZIP 带 SHA256 校验

默认做法是把提示词复制给 AI Agent,让它自己下载并安装。提示词里已经写清要用完整 ZIP、装完报告目录、并先跑一个小任务验证。

METHOD 01 · 交给 AI 自己装

复制提示词

适合大多数情况。Agent 会下载 ZIP、解压、放到正确目录,并在缺少权限时告诉你需要手工做哪一步。

请帮我把「营销动作效果验证 Skill」安装到我正在使用的 AI Agent。
1. 下载完整 Skill ZIP:https://www.vibemarketing.work/packages/skill-closed-loop-analytics-upgrade/1.0.0/skill-closed-loop-analytics-upgrade.zip
   注意:网页 HTML 不能当作 Skill 文件安装,必须使用 ZIP 里的完整文件。
2. 解压后保留 SKILL.md 及全部配套文件,按你所用 Agent 的 Skill 目录规则安装。
3. 安装完成后告诉我实际安装目录。
4. 用一个只读小任务验证 Skill 已被识别。
5. 如果你没有联网、下载或写目录权限,请直接告诉我哪几步需要我手工完成。
参考:原始 SKILL.md https://www.vibemarketing.work/raw/skill-closed-loop-analytics-upgrade/SKILL.md;安装指南 https://www.vibemarketing.work/agent-install/skill-closed-loop-analytics-upgrade.md

FURTHER READING

营销动作效果验证 Skill 相关的实操文章

别人做同类任务时踩过的坑和总结,动手前后都值得翻一下。

AI 搜索曝光上涨却没点击,GEO 该怎么衡量

团队开始做 GEO 以后,常会遇到一组看起来互相矛盾的数据:页面已经被 AI Overviews、AI Mode 或聊天机器人引用,Google Analytics 里的 AI 引荐访问仍然很少。管理

  • Vibe Marketing
  • GEO
  • AI搜索
  • Search Console

营销邮件打开率突然下降,先查送达、名单还是内容

这次营销邮件发出后,打开率比往期低了不少。内容同事先改主题行,运营把发送时间从上午挪到晚上,第二轮数据仍没有起色。这样的排查很常见,问题在于打开率把几件事压成了一个数字:平台怎样统计、邮件有没有被接收

  • Vibe Marketing
  • 营销自动化
  • 内容营销
  • 营销分析

推荐计划发了奖励仍没人转化,先把“分享”和“接受”分开看

推荐计划上线一个月,运营后台常会出现两种相反的尴尬:页面有人点,专属链接也发出去了,新客却没有完成注册或购买;另一种更早,老客户连分享按钮都懒得碰。团队往往把两种情况归到同一个原因——奖励不够大,于是

  • Vibe Marketing
  • 增长策略
  • 营销分析
  • 营销归因

MQL 已经分给销售却没人跟,先补上“接受”这一步

市场团队打开 CRM,看到新来的 MQL 已经有负责人,往往会认为交接已经完成。几天后再查,销售活动仍然是空的:没有电话,没有邮件,也没有退回原因。销售说线索质量差,市场拿出分配记录,双方都能找到对自

  • Vibe Marketing
  • 营销自动化
  • B2B获客
  • 营销分析

自动发文出错了怎么回滚:按发布阶段拆分的恢复清单

自动发文失败后的回滚顺序是"先停、再读、后动":先停止后续任务,再读日志与后台回读确认现场,最后按失败发生的发布阶段执行对应恢复动作。盲目重发是扩大错误的最快方式。本文按阶段给出一张回滚动作表。 自动

  • 营销自动化
  • 增长策略
  • 营销分析

按这个 Skill 的产出能不能直接被下一个 Skill 用上来推荐,不是固定名单。多数情况下按顺序跑完一组,比单独用一个效果更好。

出海增长#01

联盟营销 Skill

把联盟伙伴招募思路整理成包含佣金模型、归因窗口、防作弊规则和推广物料的渠道方案。

来源项目 · kostja94/marketing-skills ★ 968 · Fork 134
SEO 与 GEO#02

AI 搜索流量分析 Skill

在 GA4 与 Search Console 中识别来自 ChatGPT、Perplexity 和 AI 搜索体验的访问与转化。

来源项目 · kostja94/marketing-skills ★ 968 · Fork 134
数据与自动化#04

营销归因分析 Skill

营销归因分析把各广告平台和 CRM 里相互冲突的转化数据,整理成一份带置信区间的渠道收入归因表。

来源项目 · coreyhaines31/marketingskills ★ 49,944 · Fork 7,586
数据与自动化#05

转化率优化 Skill

把流量数据转化为带统计显著性的 A/B 测试方案,产出包含测试变量和样本量的实验执行计划。

来源项目 · kostja94/marketing-skills ★ 968 · Fork 134
内容与创意#06

营销文案润色 Skill

用 7 轮单点审查完成营销文案润色,把堆砌功能的自嗨稿改成消除购买顾虑的转化文案。

来源项目 · coreyhaines31/marketingskills ★ 49,944 · Fork 7,586
  • 01

    联盟营销 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

  • 02

    AI 搜索流量分析 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

  • 03

    海外 App 投放 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

  • 04

    营销归因分析 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

  • 05

    转化率优化 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

  • 06

    营销文案润色 Skill

    这个 Skill 产出的tracking_plan,正好是它需要的输入,可以直接接着跑

VibeMKT COMMUNITY

加入 VibeMKT 社群

微信扫码,交流营销 Skill 的选择、安装、试用与业务化改造。

加入 VibeMKT 社群的微信二维码

二维码会持续显示,关闭弹窗后返回当前页面。