4个会破坏数据分析的统计陷阱

4个悄无声息地破坏你数据分析的统计陷阱

引言:数字的隐藏规则

当我们面对一组数字时,第一反应就是开始计算。我们理所当然地认为,只要有了数据,就能对其进行任何标准运算——加法、减法、计算平均值或找出比率。这似乎是数学中最基本的规则。然而,在 数据分析领域,这种假设却十分危险。

事实是,并非所有数字都具有相同的意义。变量的基本 类型 决定了哪些数学运算是有意义的,哪些运算在统计上会产生误导。忽略这些区别就像试图在不了解最基本规则的情况下玩游戏一样;你或许能得到一个答案,但不太可能是正确的答案。

对于任何从事数据工作的人来说,这都是一项基本技能。如果不能掌握这项技能,就可能导致错误的结论和具有误导性的可视化结果。在本文中,我们将揭示四个常见但令人惊讶的统计陷阱,即使是经验丰富的从业者也可能落入其中,并阐述理解数据的本质是避免这些陷阱的关键。

变量类型

1. 比例错觉:为什么 100°C 不是 50°C 的两倍

第一个陷阱是当我们混淆两种不同类型的连续数据(区间数据和比率数据)时产生的微妙的意义错觉。

区间变量 是指两个值之间的差异具有一致性和意义,但零点是人为设定的变量。一个经典的例子是摄氏温度。10°C 和 20°C 之间的差异与 80°C 和 90°C 之间的差异相同。然而,0°C(水的冰点)并不代表完全没有温度。与此形成对比的是开尔文温标,其中 0 K 代表绝对零度——真正意义上的热能消失。由于开尔文温标有一个真正的零点,因此它是一个比率温标,你 可以 说 200 K 比 100 K 的温度高两倍。

比率变量另一方面,具有真实的、非任意的零。零值意味着完全缺乏该数量。体重、身高和酶活性都是比率变量;零体重意味着“没有体重”。

由于区间变量的零点是任意的,因此无法计算出有意义的比值。声称 100°C 的温度是 50°C 的两倍,在统计学上是不正确的。这个比值毫无意义,因为刻度的起点并非真正的零点。

说金丝雀(40.5°C)的体温比鸭嘴兽(30.5°C)高33%是不正确的。如果用华氏度进行同样的计算,你会得到不同的结果,这证明这个比值毫无意义。

2. 可视化的欺骗:柱状图如何说谎

第二个陷阱直接源于第一个陷阱:当我们可视化受比例错觉影响的数据时,我们创建的图表会欺骗我们的眼睛。我们习惯于看到一个柱状图的高度是另一个柱状图的两倍,然后就认为“数量是原来的两倍”。

这种视觉捷径在绘制温度等区间数据图表时会造成陷阱。以零为起点的标准柱状图会自然而然地引导读者比较柱状图的相对高度,从而得出一种比例关系,而正如我们刚才所说,这种比例关系毫无意义。即使是基线较高的柱状图也具有误导性;它会产生 截然不同 一种同样具有误导性的比例关系。无论基线如何,柱状图对于区间数据来说都存在问题,因为其格式本身就容易让人比较柱状图的高度——而这种比较对于此类数据而言始终无效。

对于这类数据,用点图而非柱状图来呈现数值,会更清晰明了,也更不容易产生误导。点图能够清晰地展示各个数值及其差异,而不会像柱状图那样,根据数值与任意零点的距离来推断出一个虚假的比例关系。在某些情况下,简单的表格可能比任何图表都更适合展示这些数值。

3. 歧义原则:当变量无法被归类时

第三个统计陷阱并非在于违反硬性规则,而在于未能认识到规则本身具有灵活性。实际上,“变量类别远没有听起来那么泾渭分明”。变量的正确分类往往完全取决于分析的具体情境。

这种模糊性的一个完美例子是, 颜色.

  • 在一项关于感知的心理学研究中,参与者被要求在“红色”、“蓝色”和“绿色”之间做出选择,颜色是一种 公称 变量。这些值是不同的类别,没有固有的顺序。
  • 然而,如果你用电磁波长来测量相同的颜色,颜色就变成了…… 比率 这是一个变量。它有一个真正的零点,因此你可以有意义地说一个波长是另一个波长的两倍。

这一原则表明,语境至关重要。在分析一个变量之前,必须首先理解它是如何测量的,以及它在你提出的具体问题中代表什么。

4. 计算法则:你的数学运算必须与你的数据类型相匹配

最后一个也是最关键的陷阱是缺乏严谨的计算方法:对变量类型进行根本无效的计算。不同的变量赋予你不同的数学运算权限。

例如,虽然你可以计算任何变量类型的频率分布(即,统计每个值出现的次数),但更复杂的计算(如 意味着 或 标准偏差 )仅对区间变量和比率变量有意义。

这对于特别重要的是要记住 序数变量而言,这一点尤其重要。序数变量表达的是等级或顺序,而非数值之间的显著差异。疼痛等级(1 到 10)就是一个常见的例子。7 分高于 5 分,5 分高于 3 分。但你不能假设 7 分和 5 分之间的疼痛差异与 5 分和 3 分之间的疼痛差异相同。从“轻微不适”(3 分)到“中度疼痛”(5 分)的感知差异可能远小于从“中度疼痛”(5 分)到“重度疼痛”(7 分)的感知差异。对这些数值取平均值,就好比在不了解选手之间时间差距的情况下,对比赛的最终名次(第一名、第五名、第十名)取平均值——平均排名并不能反映实际的成绩差异。

类似地,有些计算方法的限制性更强。 变异系数(CV),即标准差除以 意味着是 仅对 比率变量有意义。这是因为该计算依赖于一个真实的零点;如果改变区间变量的单位(例如从摄氏度改为华氏度),变异系数也会改变,从而失去意义。


结论:问问自己“这是什么类型的数字?”

在进行任何计算、排序或可视化之前,任何可靠的数据分析的第一步都是停下来,理解你所处理变量的本质。四大陷阱——比例错觉、可视化欺骗、歧义原则和无效计算——都源于同一个根本错误:将所有数字都视为遵循相同的规则。这种对变量进行深入探究的习惯是成熟数据从业者的标志,也是防止得出无效结论的第一道防线。

下次当你查看数据集时,不要只问数字说明了什么;问问自己,这些数字是什么类型的数字,它们真正能告诉我什么?

类似的帖子