样本量为什么决定结论的可信度
结论的可信度取决于两件事:一是你手上这些数本身对不对,二是这些数能不能代表你真正关心的那一整片。第一件事错在怎么把这些数拿到手上,第二件事错在分母上。分母这件事更隐蔽,因为几个数看上去和几十个数长得一模一样,都是真实的数。
举个具体的形态。你想判断这个价格带还挤不挤,看了三条商品,两条挂价很低,于是判断这一档已经打得很凶。而这三条可能是你顺手点进去的两家店,它们本来就用低价打法,跟整个价格带的普遍情况没什么关系。数是真的,代表不了这一片。
分母小还有一层影响是它放大了筛选这件事的影响。你看十条商品,里面有两条正好是最近上的、又正好都是你在意的那个价位,这两条会把你的印象整个带过去。分母大的时候这种巧合会被摊薄,分母小的时候它直接就是结论本身。
有一件事值得说清楚:样本量小不等于数据不对。三个数也可以是三个真实发生的事实,它们没错,只是它们能支撑的话很短。能说的话大概只有我最近看到的几条是这样,而这句话离这个方向有机会中间还差着一大段。
所以判断一个结论该不该信,有一个很快的反问:这句话如果换成三个数、三十个数、三百个数,说的还是同一件事吗。如果换个量级说法就变了,说明你现在这句其实是靠分母撑的;如果三种说法都成立,那这句话本身就比较结实。
分母这件事和覆盖范围常常被混在一起,其实是两回事。覆盖范围说的是你看了哪一块,分母说的是这一块里你抽了多少个对象。范围可以很小但抽得很厚,比如只看一个价格带但把里面的商品翻了一百条;范围也可以很大但抽得很薄,比如全类目只看了五条。前者比后者结实得多。
有一个场景能说明分母的实际影响。周一早上你想知道上周新出的做法有没有起量,随手看了四条新商品,两条在涨,你据此判断这个做法可行。而四条里两条上涨,换成抛硬币也有不小的概率出现,这一批数能支撑的其实只是一句这句话值得再翻二十条看看。
分母还决定了你能说哪一级的话。同样几百条样本,你可以说这个价格带里偏低那一档占了多数,因为这个结论只在类别级别上成立;你不能说这一档里第三条那款卖得最好,因为要落到具体某一条,分母需要的是那一条自己的成交记录,不是整个价格带的商品条数。
还有一层不那么直观的影响:分母小的数在凑合着用的时候会给人制造一种虚假的连续性。前三个数看着往上,后三个数看着往上,你把它连成一条线,感觉是在走强。而这两批很可能是同一周里的同一批对象,中间没有任何时间的间隔,那条线是你自己画上去的。
把这几层合起来看,分母决定的其实是句子的长度。几个数只能说出一条很短的话,几十个数能说一条中等长度的话,上百个数才谈得上说一句能长期放着的话。判断自己手上的结论该不该信,一个实用的办法就是读一遍这句话有多长,再看分母够不够长。
分母还和样本的取法绑在一起。同样三十条,按随机抽的和按销量靠前抽的,能支撑的结论完全不同。销量靠前的那一批天然偏高,用它们去看这一块的整体水位会显得很热;随机抽的虽然不好拿,但它能支撑的话更长。数量不够的时候,取法的影响会被放大。
有一个可以自己做的小检验。把手上这批数重新按另一个顺序取一遍,比如原来是从搜索前几页取的,现在换成从某个词的第三页往后取,看结论变不变。变了说明这个结论对取法很敏感,那就得先把取法固定下来,再谈数量够不够。
分母的影响还有一个时间上的版本。你在一天里看了三十条,这三十条都在同一个下午,它们反映的是那个下午的状态。要判断一个形态稳不稳,样本得跨过几天。同样的三十条分散在两周里,比集中在一天里能支撑的结论长得多。
这一点在实际操作里意味着,攒样本的时候不只要数个数,还要拉开时间。每天顺手翻几条、连续翻两周,这样一个三十条的样本就能同时回答两个问题:形态是什么,以及这个形态稳不稳。一次性翻完三十条只能回答前一个。
把分母、取法、时间跨度这三项放在一起,样本量这件事才算讲完整。三项里缺一项,结论就少一层支撑。手上结论不稳的时候,先检查缺的是哪一项,再去补那一项,比笼统地再多翻几条有效得多。
有一个很好用的判断:这句话如果只用一个数就能说出来,那它多半不需要样本量;如果一个数说不出来,就需要问一下分母。这个类目上月三千件这类整块的话,分母是别人定的;而这几条里多数在往上走这类话,分母是你自己攒的,得由你自己负责。
所以分母这件事其实有一半在做分工。别人给的整块数,你只能接受它的分母有多大;自己攒的那一部分,分母大小完全由你决定。分不清这两者的时候,人会把自己该负责的那个分母也算在别人头上,出了问题就找不到可以从哪里改。

结论不是被看出来的,是被样本量一点点撑起来的
分母小的时候会发生什么
第一个会发生的是方向偏得比你想的多。真实的分布里,往上和往下的比例可能接近平分,这时候随手抓三个数,抓出两个往上走一点都不稀奇。三个数里的两个往上,读起来像是涨,实际可能只是一次七成的硬币抛掷。
第二个会发生的是极端值当道。少了几个数的时候,一条特别高或者特别低的商品就能把整个印象拉过去。比如你看五个款,其中一个走了很多,剩下四个都很淡,如果没有那个高的,你会觉得这一块很冷,有它你就觉得这块很热,中间没有任何过渡。
第三个会发生的是结论反复。今天看三个数得出一个判断,明天又看了三个数,得出相反的判断。两次都不算错,问题在于分母太小的时候,每一批新样本都足以把上一批的印象推翻,来回几次之后,人会开始怀疑自己看数的能力,其实问题在样本量上。
第四个会发生的是把个例当规律。某一条商品这两天走得不错,你顺手归纳出一个做法,比如这个价加这个图更容易动。而这个结论背后只有一条商品,它可能只是那一周恰好被推了一次。样本不足的时候归纳的成本很低,所以归纳会特别多。
第五个会发生的是对已经发生的事情判断得更准。样本少的时候,回头看总是能解释得通,因为回头看的时候你已经知道结果了,顺手挑几个支持这个结果的数很容易。分母小的数在解释过去上很强,在预测未来上很弱,这个区别一定要分清。
还有一个会发生的事是比较失去意义。你想比两个价位哪个更值得进,一边看了三条,一边看了四条,比较出来的高低几乎完全取决于那七条各自是谁。分母厚一些的时候比出来的差才开始有含义,因为两边各自把偶然摊掉了一部分。
举一个具体的场景。本周你打算给某个方向定一笔预算,手上支撑这个判断的数是周四下午随手翻到的六条。六条里四条往上,你觉得这个方向能加。如果把这六条换成周三和周四各三条,你很可能得到不同的结论。这个判断的稳不稳,取决于六条这个分母,不取决于你多想做成这件事。
小分母带来的代价也和动作的大小挂钩。只是再多看一轮,小分母造成的偏差代价很低;要压一批货或者投一笔推广,同样的偏差就会落到真金白银上。同一个分母在这两类动作上的合适程度不一样,这也是为什么样本够不够不能脱离要做什么来回答。
有一种情况下小分母的损失特别大,就是它让你错过了一个本来该看的方向。你随手看了三条,觉得这一块很冷,于是不再往下看,而实际上那三条只是恰好都偏淡。少样本既会让人做出不该做的决定,也会让人放弃本该继续看的方向,后一种更不容易被发现。
还有一件可以自己做的小事:给每一个结论标上它当时的样本量。标三个月之后回看,你会发现推翻的那些结论普遍标着很小的数,而站住的那些样本量都不小。这个对照自己攒出来的印象,比任何道理都更能让人愿意多翻几条。
小分母还会造成一种很奇怪的现象:它对变化的反应特别快。三条里有两条变了,整体的印象就跟着变,而这三条本来就在随机波动里。样本少的时候,你会觉得这块生意天天在变,实际上变的是你的印象,不是这块生意。
有一个具体的形态能说明这件事。你每天看几条文具类商品,今天看到两条主图换了风格,就判断这一块最近在换视觉;明天看到三条还是老样子,又觉得没换。这两天的观察都对,加起来只有一个结论:你每天看到的那几条不足以说明这一块在做什么。
小分母带来的另一个代价是它会消耗判断的耐心。结论反复几次之后,人会从认真看数变成随便瞄一眼,因为认真看也没看出规律。这个过程往往发生得很安静,而它的根源从头到尾都只是样本太少。
要挡住这一条,办法是把看数的时间间隔拉开。与其每天看三条,不如攒一周再一次性看二十条。同一段时间里,看的总数没变,但一次看二十条得出的印象比每天看三条稳得多,因为每天那三条的印象会被第二天的三条推翻掉。
还有一种小分母的变形值得留意:不是样本少,而是样本都来自同一批对象。同一批十条,你在一周里看了五次,每一次注意到的东西不同,于是感觉样本在增加。实际上它一直是那十条,这十条里的随机部分从来没有被摊薄过。
有一个具体的对照可以自己试一次。同一个问题,先按三天各看五条的方式看一遍,记下结论;过一周再用一次看十五条的方式看一遍,记下结论。两次结论的差别,往往比问题本身的变化大得多。这个对照做过一次,之后再看到少样本的结论就会自然多留一分心。
小分母还有一层影响体现在记录上。样本少的时候写下的结论往往带很强的语气,因为当时那几个数给人的印象很直接。语气强的结论留在记录里,后来回看时会被当成已经确认过的东西,而它其实只站在三个数上。

越是要落到一个具体对象上的判断,越需要厚的分母
几个数能看出苗头
三个到五个数能做的事只有一件:给一个方向起个头。你陆续看到三条商品都在用一个类似的做法,这构成一条值得继续看的线索。它的价值不在于证明什么,而在于它让你知道往哪个方向再去看更多。这是这部分样本最大的用途。
举一个具体的形态。这个类目上月三千件是你从某个地方看到的整块数,它不算样本;而你自己翻到的五六条商品,各自大概在一个什么量级,这几条才是样本。前面那个数给你的是一片印象,后面这几条给你的才是相对关系。
几个数还有一个用处是排除明显的错,而不是确认明显的对。五条商品里有两条的描述明显对不上实际的货,那你基本可以判断这一块的信息质量不高。这种在少样本上就能看出来的是坏消息,好消息在少样本上一般看不出来。
要说清几个数为什么不够,可以想一个场景。周二下午你准备调整一批价格,看了三条同类商品,都觉得还能往上走一点,于是你打算提价。而这三条可能来自两个本来就定价偏高的卖家,它告诉你的是那两家怎么做,不是这一档普遍能到哪。
几个数还有一个必须守住的用法:只能用来提出假设,不能用来结束讨论。提出来的假设应该写成一句带条件的句子,比如如果这一档普遍能到这个价,那我这几条也能跟。带条件写出来之后,下一步自然就是去找更多数来看这个前提对不对。
有一个容易被忽略的用处是给一个陌生的方向做定位。你从没接触过某个类目,先翻几条商品,能大致知道这一块的价格区间落在什么位置、主图一般怎么做、描述里通常写什么。这些都不是结论,是坐标,它们让你后面的问题问得更对。
几个数还有一个用法是检查自己的问题写没写清楚。你带着一个模糊的念头翻了五条,如果五条看完之后你还是不知道该看什么,说明问题本身还没定下来。这时候应该回到问题上去,而不是急着多翻几条,样本解决不了问题不清这件事。
要提醒的是几个数在两种场景里特别容易误导。一种是季节性强的品类,你恰好赶上这一段的尾巴,看到的是这一年里最热或者最淡的那几天;另一种是刚经历过一波调整的品类,你看到的几条可能都还停在调整之前的做法上。
如果一定要在少样本上做判断,有一个能降低风险的顺序:先看这一块里数量最多的那一档,再看第二档,把最极端那几条先放在一边。先看主体部分,能避免少数几条把你的印象整个带走,这条顺序在样本很薄的时候比什么都管用。
几个数最后还有一个正当用途,是拿它去问人。你手上有五条具体的例子,拿这五条去问有经验的人怎么看,比空着一句这个类目怎么样去问,得到的回答具体得多。少样本当提问的素材,比当结论的依据有用。
几个数还有一个很实际的用途,是验证一个别人给的判断。有人告诉你这一块现在挺热,你随手翻五条,看看这些商品的上架时间、评价数、描述里的细节,大致就能判断对方说的热是什么意义上的热。这是在用少样本做对照,比用少样本下结论安全得多。
有一个具体的场景。同行说某个价位最近挺好做,你翻了他说的那一档里的四条,发现其中三条的描述都很简略、主图也粗糙,你大概能判断他说的好做指的是还有位置可以站,不是指这一档已经在走量。这两句的含义差别很大,四条就够了。
少样本在提假设这件事上效率很高。翻五条的成本大概是几分钟,一天里可以提好几个假设,然后从中挑一两个值得往下看的。用少样本广撒网、用多样本逐个确认,这个分工比一上来就在一个方向上翻上百条要划算。
要守住的边界是提假设的时候不要顺手把它当成已经验证过的。写下来的时候把后面那半句补上:这一条需要在二十条上再看一遍。补上这半句,假设就不会在几轮口口相传之后变成事实。
几个数能看出的苗头还有一类是关于人的,比如这一块里做描述的人普遍用什么口径、主图上习惯放几个元素。这些属于做法上的共性,几条就能看出来,因为它是刻意的选择,不像销量那样受随机影响。
有一个常见场景值得单说。你在某个词的搜索结果里看了前三条,发现都是同一个价位,于是判断这个价位竞争最激烈。而搜索前三条受排序影响很大,它反映的是平台给你看的顺序,不是这一档的普遍情况。想用几条看价位分布,得把几条取自不同的位置。
还有一点是几个数最好来自不同的来源。三条都来自一家店,你看到的是那家的打法;三条分别来自三家店,即使数量一样,覆盖面也大得多。样本薄的时候,来源的分散程度几乎比数量更重要。
| 样本量 | 能支撑到哪一句 | 不能支撑哪一句 | 下一步该做什么 | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 三 | 个 | 到 | 五 | 个 | ||||||||||
| 我 | 看 | 到 | 的 | 这 | 几 | 条 | 是 | 往 | 这 | 个 | 方 | 向 | 走 | 的 |
| 这 | 个 | 方 | 向 | 有 | 机 | 会 | ||||||||
| 再 | 翻 | 一 | 批 | 同 | 类 | 商 | 品 |
几十个数能说明什么
几十个数能说明的是形态。这一块里低价位的商品是不是明显比高价位的多、新上架的是不是集中在某几个价位、同一个搜索词下前几页的商品大致落在什么区间,这些相对关系在几十个数的量级上开始变得稳定,换个时间点再看也不容易全变。
举一个具体的形态。三家店凑出来的平均,这是几十个数最常见的一种用法。三家店每一家都有几十条商品,合起来看这一个类目的整体价格分布,这种平均比单看一家有意义得多。而如果这三家恰好都是同一类做法,那它代表的范围就要收窄。
几十个数还有一个很实际的用处,是能把范围圈清楚。你原本问的是这个类目怎么样,看到几十条之后你会发现真正想知道的是这个类目里某个价位、某种规格那一段怎么样。样本一多,问题就会自己变具体,这是少样本做不到的。
几十个数为什么要再看一次才比较稳,原因在于两周的时间差会换掉一部分对象。同一个类目里,本周看到的几十条和两周后看到的几十条,中间有一批已经不在了、又有一批新的进来。两次看到的形态如果一致,说明它不是某一批上架节奏造成的。
同样要守住的边界是:几十个数能说这一类里比较常见,不能说整个类目都这样。常见的程度取决于你圈的范围有多宽,而范围是你自己定的。范围圈得越窄,同样的样本量支撑的结论越结实,这一点在样本不够的时候特别有用。
几十个数还有一个用处是把「差不多」拆开。你原本只知道这两块大概差不多,翻了几十条之后会发现差异集中在某一个价位上,或者集中在某一种规格上。把笼统的差不多拆成一处具体的差别,这一步只能靠多翻几十条来完成。
举一个具体形态。某个价格带上有四十条在售,其中三十条集中在中间两档,剩下十条散在两头。这个形态本身就说明这一档的主流在中间,两头的量小。你要是只看了五条,很可能正好看到两边那几条,得出的印象和实际的形态正好相反。
几十个数也是能做一次粗略分类的量级。按价位分三段、按主图风格分两类,四十条足够分出每段的相对比例。分类的意义在于它把一个连续的东西变成了几个能讨论的类别,而样本太薄的时候,每一类里可能只剩一两条,分类也就失去意义了。
有一个使用上的讲究:几十个数最好来自同一批取法。你的四条来自搜索前几页,另外三十条来自某一家店,合起来看时这两部分的分量不一样。样本量到一个量级之后,取法的一致性比数量本身更影响结论,混着取的时候一定要把两部分分开说。
几十个数能说明的还有一件事,是这一块的信息透明度。翻了四十条之后,你对这一块的描述写得清不清楚、主图做得细不细、价位标注明不明白会有个大致感受。这些看起来不是数,但它决定了你后面能拿到多少能用的信息。
几十个数还有一个用处是能把异常挑出来。四十几条里有两三条明显偏离大部队,这时候你能明确地说这几条是特殊的,而不像少样本时那样说不清谁是主体。判断谁是主体这件事,本身就是多样本才能做的事。
举一个具体形态。某个类目下你翻了三家店,每家十几条,合起来四十条。这四十条里,价格集中在两个区间,主图有两种风格,上架时间大致分三批。这些形态在单看一家店的时候看不出来,因为一家店的十几条往往只覆盖其中一小部分。
几十个数也是判断一个做法能不能跟的量级。某一个促销写法出现了十几条,占四十条的三成左右,这说明它不是孤例但也不是主流。三成这个位置的意思是可以看看,但不能当成这一块的通行做法照搬。
用几十个数的时候还有一个次序上的讲究:先把范围定下来,再开始翻。范围定得模糊的时候,四十条很容易变成四个十数,每十条来自不同的价位或者不同的风格,合起来什么也说明不了。范围清楚了这个量级才有意义。
几十个数能说明的另一件事是这一块的更新节奏。四十条里上架时间有明显的前后分布,你能大致看出这一块是持续有新款进来,还是某一段时间集中进了一批之后就没有动静了。节奏这件事只有到几十个样本才看得出来。
有一个具体的检验可以给这个量级用:把这几十条按时间切成前后两半,看两半的形态是不是一致。一致说明这个形态不是某一批上架造成的;差得多说明你可能正好赶上了一批集中上架。切一半再比一次,成本很低。
几十个数还容易遇到一个问题,就是取的时候不知不觉只取好取的那些。搜索前几页、销量排序靠前的,这些都好取。知道这件事之后,取的时候有意往不好取的地方翻一翻,哪怕只补几条,整体样本的偏向也会小很多。
上百个数能确认什么
上百个数开始能确认的是稳定性。同一个现象在一百条里都有,跨过两个时间段还在,这时的结论就比几十个数时结实得多。它不再是这一批恰好这样,而是这一块大致就这样。能确认到这个程度,才谈得上把它写进一个长期的判断里。
上百个数还能照出一类几十个数看不出来的事,就是分布里的小概率部分。某一个价位只占百分之几,这在几十个数的样本里可能一条都抽不到,在几百条里就会稳定地出现。你要判断的是不是那种少见的形态,样本量的要求就比看整体高。
有一条常被忽略的边界要说清楚:上百个数能确认的是这一类的整体情况,不能确认某一条具体商品卖了多少。前者的分母是这个类目里的商品条数,后者的分母是那一条自己的订单,两件事的分母根本不是一个东西,样本量再大也换不过来。
还有一个很实用的提醒:上百个数的意思是样本本身有上百条,不是把三十条翻了三次。同一批对象看上三十遍,看到的还是那三十条的分布,随机那部分一点没少。样本量说的是有多少个不同对象,跟看的次数没有关系。
把几个数量级连起来看,会发现它们各自对应的话长得很不一样。几个数对应我看到的几条是这样,几十个数对应这一类里比较常见,上百个数对应这一块大致就是这样。句子越长,需要的分母越厚,这个对应关系比记任何数字都实用。
上百个数还能确认一件事,就是你之前用几十个数看出的形态是不是还在。一个形态在四十条里出现,又在另一个时间点的四十条里出现,两次合起来接近一百,这时候可以说它不只是某一批上架节奏造成的。这种跨批次的确认,是几十个数单独做不到的。
上百个数也有自己的盲区,最典型的是它看不到很小的变化。整体量级很稳的时候,某一小块可能在悄悄萎缩,而这一块在整体里的占比很小,一百多条里它只占几条,抽到的机会不大。要找这种小变化,得先把范围收窄到那一块再取样,而不是一味加大总量。
还有一个盲区是它只反映你圈定的范围。上百条都取自某个价位,那这一百条能确认的是这个价位的形态,往整个类目推的时候中间隔着一层假设。样本厚不能替代范围对,范围不对的时候,样本越厚只是把这个错的范围描述得越细。
确认这一步在实际操作里有个具体的标志:你可以把这句话写进记录,不再给它加暂时两个字。等到下一次季度回顾时它还在,说明它已经不只是当下这一批数给你的印象了。从观察到能写进记录,这一步的分界线大致就在上百个样本这个位置。
要说清的是,上百个数确认的是这一类在公开范围内的情况,它不包括任何需要进到别人后台才能看到的东西。公开范围内的样本再厚,也照不到库存、成本、真实利润这几项,这几项只能在你自己那一层上算。这个边界和样本量没关系。
上百个数还有一个作用是在几个相近的选项之间做区分。两个价位差得不远、两种做法看着差不多的时候,几十个数里的随机部分会盖住真实差别,上百个数才大致能把这份差别的方向定下来。不过这里也只到方向,差额具体多大仍然不该当真。
需要说清的是这几个量级之间的界线是模糊的。十几个和几十个之间、几十个和上百个之间,没有一道明确的分界。真正在变的是结论的措辞,从待验证到比较常见再到大致就是这样,措辞一变,能支撑的动作也就跟着变。
上百个数确认下来之后还有一个好处,就是它开始能当基线用了。以后这个方向出现新的变化,你可以拿它和这条基线比,判断这次变化是不是超出了平时的波动。没有基线的时候,任何一次起伏看起来都像是新情况。
这条基线的维护成本比想象的低。隔一段时间按同样的取法再取一批上百条,看形态有没有大变化,变了就更新。真正贵的是第一次攒,攒起来之后它就是一件长期能用的东西,这也是多样本投入值得的地方。
最后要提醒一句,上百个数给出的是这一块大致的样子,它不能回答某一条具体商品怎么样。看到整体在往上,你会很自然地想把这份乐观搬到具体某一款上,而这一步的落脚点换了一个分母。要判断具体某一款,得换到它自己的成交记录上去看。
有一个反面例子能说明边界在哪。某一块上百条商品都集中在低价位,你据此判断这一块打价格战。而这一百条里可能有一大半来自少数几个低价打法的卖家,他们在低价位上的商品条数本来就多。样本厚不等于来源分散,这两个条件缺一个,结论的结实程度就差一半。
要补上来源分散这一条并不难,取的时候把每家的条数限一下就行。同一家最多取几条,剩下的名额分给别家。这样一来总量还是上百条,但它覆盖的卖家数从三五家变成几十家,能支撑的话也就长了一截。

同一句结论,换个量级的分母说,站得稳不稳完全不同
不同判断需要的样本不同
第一类是要不要往下投入的判断,这类判断需要的样本最少。判断这一块值不值得再看一看,方向上对就够了,几个到十几个数可以支撑。因为这类判断本身是可逆的,多看一轮的成本很低,不需要等到样本足够厚。
第二类是要不要动一笔钱的判断,这类需要的样本最多。压一批货、开一条新线、投一笔推广,这些动作错了不好收回,判断时用的分母就应该尽量厚。做不到厚的时候,宁可把动作拆小分几批试,也不要拿薄分母去支撑一个大动作。
第三类是解释过去发生了什么,这类判断对样本的要求又不一样。事情已经发生,你只需要在已有的数里找到线索,几十个数通常够。但这类判断有个陷阱,就是它很容易做成看来什么支持我的解释,所以找线索的时候要先写下几种可能的解释。
第四类是要在几个选项里挑一个,这类判断对样本的要求取决于选项之间的差距。两个选项差得很远,几十个数就能分出来;差得很近,就需要厚得多的分母,因为差距小的时候样本里的随机那部分会盖过真实差距。这时候正确的做法是承认分不出来。
第五类是跟别人对齐时的判断,这类对样本的要求比看起来高。你自己心里已经有一个印象,跟别人对的时候容易各说各的,因为双方默认的样本量不一样。这时候最省事的做法是先把双方各自看过多少条摆出来,量级差得远的时候先补样本再讨论。
第六类是给自己定一条长期的规矩,这类判断需要的样本最多,而且需要的是时间上的厚度。某个月发现的一个规律,要变成一条长期用的规矩,至少要跨过几个不同的时间段都成立。只在一个时间段成立的规律,用起来比不用更危险,因为它会让你在上一次奏效的地方再赌一次。
把这几类排一下,会发现需要的样本量和这个动作能不能收回是反着走的。能收回的动作,样本薄一点没关系;收不回的动作,样本就得尽量厚。这条规律比记某个具体数字实用,因为动作能不能收回你自己最清楚。
有一个反直觉的点值得单独说:样本不够的时候,把动作拆小往往比继续攒样本更快。你想判断某一档价位能不能做,与其等三个月攒够样本,不如先用一个小批量的动作去试,用真实结果替代样本。用动作来验证,在样本很难变厚的时候是更划算的路。
最后要提醒的是,这几类判断的样本要求不是固定的,它会随着你对这一块的了解程度变化。刚接触的时候需要的样本多一些,做久了之后这一块的整体形态你已经有了底,同样的判断可能几十条就够。这一点和一开始讲的坐标是一回事:分母的要求也要放在你的位置上看。
有一个实用的次序建议:先从需要样本最少的判断做起。你看一眼就能判断的事情先判断掉,把需要补样本的那几件攒下来一起做。这样安排的好处是不会因为一件事的样本不够,把其他本来能推进的判断也一起停下。
还有一类判断的样本要求跟它的方向有关。判断往上和判断往下需要的样本不一样,往回撤的判断通常可以用薄一些的样本,因为撤回来本身是可逆的,代价有限;往里加的判断就需要厚一些,因为加进去的东西不好收回。
同样是一个动作,分几批做和一次做完需要的样本也不同。分三批做的做法,第一批用不算厚的样本就能开始,后面几批用前面几批的真实结果来校正。一次做完的做法没有这个校正的机会,全部压力都落在开头那批样本上。
这一节讲的这几类判断,可以拿来给自己手上的结论排个序。哪些是只需要方向的,哪些是要动钱的,哪些是要跟别人对齐的。排完之后你会发现,很多本来卡着不动的判断其实样本早就够了,卡住的是它被当成了需要厚样本的那一类。
反过来也有一种情况是样本早就够厚了,而人还在等。等一个更确定的信号、等一个更全的数,实际上手上几十个数已经能支撑这一步动作了。分清等和不够,也是样本量这件事里很实际的一环。
有一个很实际的做法是把判断分开记。需要方向的判断记在一栏,需要动钱的判断记在另一栏,两栏的结论不要混着用。混用最常出现的形态是拿一栏的少样本结论去支撑另一栏的动作,比如用几个数的方向判断去决定要不要压一批货。
把两栏分开之后,你会发现需要动钱的那一栏其实空着很多条。空着不是坏事,它说明这些判断还没有足够的样本撑起来,先空着比硬填一个结论安全。等到样本攒够,这一栏会自己填上。

分母厚起来之后,结论不但更稳,还能管得更久
样本不够时该怎么表述
第一个改法是给结论加上分母。有向上走的迹象和这几条里有两三条在往上走,是两句分量完全不同的话。加上分母之后听的人才能自己判断这句话有多重,而大多数微妙的误传就发生在分母被省略掉的那一刻。
第二个改法是把判断写成条件句。如果这一档普遍能到这个价,那我这几条也可以跟一步,这样写的好处是它把前提摆在了明面上,前提要是不成立,结论自然就不成立,不用另外去解释一遍为什么不算数。
第三个改法是给结论标一个再看的时点。这句话是在五个数上看出来的,两周后再看一次,把下次再看写出来,这句话就从一个静态的判断变成了一个进行中的观察。样本少的时候,把它标成进行中比强行下结论诚实得多。
第四个改法是区分我已经看到的和我在推测的。看到的是三条商品都挂在这个价位,推测的是这一档普遍能到这个价,两句分开写,听的人就知道哪一部分是可以核的、哪一部分是你自己补上去的。这一条在跟别人对齐判断的时候特别重要。
第五个改法是把用词往下调一档。大概、大致、眼下看到的、暂时,这几个词不是含糊,是精确地表达了这套数能支撑到的程度。把一定会改成眼下这几条是在往上走,说的是同一件事,但后者才是那三个数真正能说的话。
第六个改法是给这句话留一个明确的出口。写清在什么条件下这句话就该改口,比如量上到多少、隔了多久、出现了什么新迹象。有出口的话比没有出口的话更好用,因为它在样本变厚的时候会自动被检视,不用你另外安排一次复盘。
这些改法在实际沟通里的效果有一个具体的区别。说这个方向有机会,对方多半会按这句话去安排资源;说这几条里有两三条在往上走、值得再翻二十条看看,对方会知道这是一个进行中的观察。后面这种说法不会让别人在你不确定的地方替你确定。
还有一个用法是把它当成清单。每一次基于少样本的判断,都在记录里留一行:当时的样本量、当时的结论、打算什么时候再看。积累两三周之后,这一列会变成一份很实在的材料,它替你看住了那些当时不够、后来才够的结论。
要注意的是这几条不是措辞上的客气,它们改变的是判断本身。加上分母之后,你自己也会开始留意分母够不够;写成条件句之后,前提不成立的时候你会自然地改口。表述方式反过来会影响判断方式,这一点在很多地方都成立。
把这几个改法和前面几节的量级对起来,会得到一个很清晰的写法。几个数写成一条待验证的观察,几十个数写成这一块里比较常见,上百个数写成这一块大致就是这样。三种写法对应三种分量,用哪个取决于分母,不取决于你多希望这句话成立。
在给别人交代的时候,还有一个很管用的做法,就是把下一步要做什么一起说。样本不够所以先不动和样本不够所以接下来两周会再取一批,听起来是同一件事,实际差别很大。后面这种说法会让别人知道这件事在推进,而不是停在那里。
有一条要守住的界线:给结论加上分母之后,不要顺手再给一个更精确的数来补底气。这个方向有机会改成这个方向的量在一百二到一百五之间,看起来很具体,实际上那个区间是你临时估的,它把一句诚实的话又变回了一句虚的话。
还有一个用法是把自己不确定的地方指出来。这句话里哪一部分是有数支撑的、哪一部分是凭印象补的、哪一部分是听来的,分清楚之后整句话的可信度反而更高。把这三部分混在一起说,才是真的不可信。
这几条改法都不需要额外的时间,只需要在写结论的时候多花一分钟。一分钟的成本和它挡住的东西之间差得很远:一句话如果因为表述得比样本能支撑的更硬而被别人当成依据,后面要花的时间远不止一分钟。
把这些改法用一段时间之后,你会发现自己在看数的时候就已经自动带上了分母的意识。翻五条的时候会自然地说出这几条,翻四十条的时候会说这一块里比较常见。这个变化不用刻意维持,它是被说出来的话反过来带出来的。
有一个细节值得注意,就是加上分母之后不要说了一半又收回去。说了这几条里有两三条在往上走,紧接着又说不过整体看起来还行,后面这句就把分母那层意思盖掉了。加上分母的话要说完,不要用一句更笼统的收尾把前面那半句抵消掉。
跟团队一起看数的时候,这个表述习惯会顺着往下走。你先说出分母,别人回话的时候往往会跟着带上自己的样本量,几轮之后大家讨论的就是同一件事了。反过来,开头省掉分母,后面的讨论很容易变成各说各的。