如果无法进行实验,如何推出新产品?或者如何调整指标以便进行实验?
此链接中的示例:https://hbr.org/2018/11/using-experiments-to-launch-new-products
Uber 希望推出 Express Pool,因此他们进行了典型的 A/B 测试并比较指标,但在这种情况下,他们在推出产品之前和之后都有要比较的指标(每个用户的收入、每个用户的平均行程等)
但是如果这是一个全新产品怎么办?示例:Uber 试图推出钱包?
如果我没有反事实,我能做什么?
在推出新产品之前,您可以做很多事情。
您可以针对不同的用户群体进行调查,询问他们的需求。 此调查的范围是确定您可以使用产品解决的问题。这是一种非常早期的策略,您可以使用它来确定您的产品是否有潜力适合市场。
您可以创建推介和众筹活动 这些范围是为了确定市场上是否存在对您的解决方案的潜在需求。你基本上是在想法阶段开始销售,甚至在开始建造任何东西之前。请注意,您并不是想在这里欺骗别人,您只是想确定市场是否有潜力。
您可以启动该产品的 alpha 或 beta 预发行版本。 此预发布的范围是邀请少数用户加入您的早期应用程序并获取他们的反馈。根据您在此处获得的反馈,您可以在发布产品之前改进/更改或更新您的产品。
您可以启动 MVP(最小可行产品),然后跟踪现实世界中的 KPI。 MVP 可以为您提供足够的信息,以便您知道该去哪里。只需确保您跟踪正确的 KPI 祝你好运!
您并不总是需要提出具体的假设并验证它。 有时最好了解并量化新功能如何影响产品的整体健康状况。 过去很多时候,当我们向一小部分用户公开一项新功能时,我们很快就会弄清楚一切是否按预期运行,或者是否会出现不可预见的后果。
如果没有正确的工具,这很难做到。 Statsig就是这样一种工具,可以提供产品健康状况的整体视图。 下面是构建和推出新功能时所期待的快速屏幕截图(无需设置正式的 A/B 实验)。
免责声明:我在 Statsig 工作
很多时候,对于小型初创公司的创始人来说,遵循这个流程是很困难的。您不能像大公司一样在假设检验上浪费 6 个月的时间,而且您没有足够的预算来构建产品的多个变体和 A/B 测试。在这种情况下,您在构建 MVP 时必须大胆尝试,并不断迭代,直到在可重复模型中获得前 10 个客户。
因此,与你的目标角色中的 10 个人交谈,验证你的问题陈述,开始构建一个 hacky 解决方案来帮助他们摆脱痛苦。以零成本进行 PH 发布,并使用博客和 SEO 营销您的产品。如果这确实是一个痛点,人们就会开始访问您的网站。在这个阶段,批评对于完善功能非常重要。你应该遵循“妈妈测试”的规则——不要问你的妈妈你的产品怎么样,她不会批评你。与你不认识的人交谈,他们可以撕毁你的产品并告诉你真相。这就是改进产品的方法。要跟踪的一些指标是:
DAU、WAU、MAU、TOFU 潜在客户、#Signups、#drop-offs、#paid conversions。