内容提要
文章以对话形式探讨科研中的“指标”:测量存在误差,需按信噪比大于5或高斯分布两个标准差内等准则筛选数据,以剔除干扰、保证结论可靠。指标类似门高设计,因资源和效率无法照顾每个人;但指标一旦变成目标,往往就不再是好指标。
延伸解读
指标的本质:筛选数据的准则
文章指出,指标在科研中主要用于筛选数据,以剔除测量误差和干扰。例如,通过设定信噪比大于5或高斯分布两个标准差内的准则,可以保证结论的可靠性。这提醒我们,指标并非随意设定,而是基于统计规律或理论支撑,旨在从噪声中提取有效信号。
指标与公平:资源限制下的权衡
文章用门高设计的比喻说明,指标如同统一的门高,无法照顾到每个个体(如姚明或儿童),因为资源和效率的限制使得个性化方案不切实际。这揭示了指标在现实中的两难:它追求多数人的适用性,却可能牺牲少数人的需求,本质上是资源分配下的妥协。
指标异化:当指标成为目标
文章强调,一旦指标变成目标,它往往就不再是好指标。这类似于古德哈特定律,提醒我们警惕指标被滥用或扭曲。在科研中,若为达指标而筛选数据,可能陷入“先射箭再画靶”的误区,损害研究的客观性。因此,指标应作为工具而非终极目的。
Q&A
科研中说的“指标”到底指什么?
指标有点像标准、准则,主要是用来筛选数据的。在科研中,由于测量存在误差和干扰,不能直接把所有数据拿来拟合,需要用一个准则来筛选和剔除数据,这个准则就是指标。
为什么科研数据需要筛选?直接拟合不行吗?
因为测量总会有误差,比如空气波动、光线、手抖等,导致数据包含巨大干扰。如果直接拿这些包含干扰的数据来拟合,结果可能说不清楚,甚至没有意义。所以需要筛选和剔除,以保证结论可靠。
信噪比大于5这个指标是怎么来的?
文章举例说,经过统计,信噪比大于5的数据占到95%,因此对数据进行信噪比为5的一刀切,小于5的就不要了。做科研需要对使用的参数和指标给出合理解释,比如有理论支撑、经过大量测试或别人都那么用。
为什么常用两个标准差(2σ)作为筛选标准?
因为现实中的观测一般符合高斯分布,标准差σ描述测量的差异。测量值在均值正负两个σ内的概率是95%。我们只筛除掉和平均值差异很大的数据,这样得出的结论才符合大多数观测。
门的高度设计为什么用平均身高加两倍标准差?
设计门高时,会分析全国成年人身高数据,得到平均身高和标准差σ,把门高设计为平均值加两倍σ。这样排除了像姚明那样超过两个标准差的人,否则门都定在2米5,很多时候最后半米用不上,造成浪费。
为什么不能给每个人定制一个门,而要搞统一标准?
因为有两个问题:第一,家里会有小朋友和老人,小朋友身高会变,老人会过世,门不好处理;第二,资源难以满足,比如办公楼要修几千万上亿个门,钱财、物料和占地都是问题。所以由于资源和能力的限制以及效率的均衡考虑,没办法照顾到每一个人,才需要搞标准。
为什么说“当一个指标变成目标以后,它往往就不再是一个好指标了”?
文章在对话结尾提到这句话,但没有展开解释。它指出指标一旦成为追求的目标,就可能失去原本作为筛选准则的良好作用。