收藏文章 楼主
真假数据的“照妖镜” 关于本福特定律
网友【白晓剩】 2020-11-13 20:54:53 分享在【时代发展的印记】版块    1    5

识别伪造数据,一般都需要专业人士运用专业知识分析数据,作出判断。有没有一种简单的办法,只对数据本身的结构进行分析,而不用理解数据的专业含义,就能看出数据是否造假了呢?就是“外行”也能看出来数据真假?有!这就是神奇的本福特定律。

网友分享在meiguo.com上的图片
图源:网络

本福特定律是说,如果给出一个足够大数量的自然产生的数据,那么其首位开头数字的出现是有规律的,即以数字 1 开头的数据占数据总量的 30.1%,以数字 2 开头的数据占数据总量的 17.6%,等等,以此类推。下面这个表格列出了从 1 到 9 的首位数开头数字的出现概率。

网友分享在meiguo.com上的图片
分别以 1 到 9 开头的数据在整个数据中出现的概率列表

根据这个定律,以数字 1,2,3,4,5,6,7,8,9 开头的数据,占整个数据总量的比例是依次递减的,其出现的概率是恒定的。数学表达式如下。

网友分享在meiguo.com上的图片
本福特定律公式。n 为首位数字

用这个公式,可以计算出不同的首位数字的数字占比。比如当 n = 1 时,就得出首位数为 1 的出现概率为 0.30102999566, 约为 30.01%。

因为这个定律对数据来源的定义不够规范,所以不能严格的证明。但是,当限定条件后,是可以用数学证明它的正确性的。

这个定律最奇妙的地方在于,只有“自然”产生的数据,也就是没有人为修改过的数据才符合这个规律。否则,这个定律就不适用了。另外数据量越大,其结果拟合得越好,一般至少需要 3000 个以上的数据才行。

网友分享在meiguo.com上的图片
西蒙·纽康 (Simon Newcomb)。图源:网络

枯燥的数据竟然还有如此奇特的规律,它是谁发现的呢?最早发现这个有趣现象的是北美(现属于加拿大)天文学家西蒙·纽康(Simon Newcomb)。1881 年,他在翻阅对数表是偶然发现一个现象,前几页的破损程度远超过后面的页数。经过仔细研究他发现,原来自然界中存在的数字不是均匀的,而是首位数为 1 的数据出现的概率总是最大的,首位数为 2 的次之,以此类推。1938 年,物理学家本福特也发现了这个规律,这个规律便以他的名字命名了。

本福特定律在实际中被应用于数据欺骗检测和股票市场分析等领域。最有名的案例是安然公司财务造假案。安然公司曾经是世界上最大的能源和服务公司之一,名列《财富》杂志“美国500强”的第七名。在 2001 年,公司传出财务造假丑闻。有人对安然公司的财务报表数据用本福特定律检验,其结果令人惊讶。下图显示,在 2001 年以前安然公司的报表数据(左图)都严格拟合了本福特定律,只有 2001 年的数据(右图)不符合该定律,显示出有明显的人为篡改痕迹。安然公司随后申请破产倒闭。

网友分享在meiguo.com上的图片
安然公司历年财务数据与本福特定律的拟合程度分析图。图源:网络

让我们把这个规律用到当下最吸引眼球的一件事上:美国大选。参选的共和党和民主党正在相互指责对方在计票上造假。正常的计票结果,只要没有被人为改动过,数量足够大,就应该符合本福特定律的。下图是最近美国一位数据专家罗伯特·博耐瓦托(Robert Bonavito), 根据大选期间公布的宾夕法尼亚州的选举票数作出的分析图。左图是民主党候选人拜登的选票分析,右图是现任总统川普的,两人在宾州的总得票数都超过了三百万票,数据足够大了。大家可以通过这张图自己分析一下,宾州的选票统计有没有造假?

网友分享在meiguo.com上的图片
Robert Bonavito 的分析图。图源:视频截图 https://www.youtube.com/watch?v=1ald3w9FBmA

出处:头条号 @此岸彼岸君何在

meiguo.com 发布人签名/座右铭有我不知晓的吗?如果有请留言或评论告诉我!
大家都在看
楼主新近贴
回复/评论列表
默认   热门   正序   倒序
meiguo.com 创始人

emotion

5   2020-11-13 20:54:53  回复

回复/评论:真假数据的“照妖镜” 关于本福特定律

暂无用户组 升级
退出
等级:0级
美果:
美过
精华推荐
  1. 中美两国元首在釜山会晤:就关税、大豆和稀土已经达成共识
  2. 川普政府终于听说了日本新首相【高市早苗】因为台海表态引发外交危机的事儿了?
  3. 德州少女在圣诞前夜失踪,全力搜寻中!
  4. 特朗普总统宣布“平安夜”和“节礼日”也放假
  5. 中美高层通话后… 川普总统计划明年访华,芯片管制也松口了!
  6. 美国政府批准了对台3.3亿美元的军售
  7. 马杜罗夫妇在纽约法庭短暂出庭,被指为战俘
  8. 学习英语12年后,终于实现了“美国梦”!
  9. 一美分硬币“Penny”铸造历史正式终结
  10. 在特朗普访华之前,白宫向中国“递三份礼物”
  11. 顶级文凭可早获绿卡!H1B签证“全新加权”抽签制度生效
  12. 川普总统正式签属涉台法案,解放军示警!
  13. 多名移民法官在同时期被解雇,引发司法危机
  14. 马斯克或将成为首位身价万亿美元的人类富翁
  15. 美宝家庭关切:双国籍审查和户口注销真相
  16. 英伟达H200芯片的对华销售仍然在受美国的两重限制
  17. 五角大楼的机密报告:中国导弹可以击沉美军航母
  18. 川普政府再次出奇招!拒绝所有胖子的移民申请?
  19. 恢复或加入?重获中国国籍的路径比较
  20. 马斯克指控“美国慈善家”做空特斯拉,涉案逾百亿美元!
  21. 美国移民局(ICE)新提案打算限制福利使用,有记录者可能影响绿卡申请!
  22. SpaceX在加速IPO计划,目标估值1.5万亿美元!
  23. 加州政府推出了“永久删除按钮”,强化个人隐私保护!
  24. 感恩节餐桌的费用回落,零售商推出了低价套餐!
  25. 2026年版的“公共负担”新规复活,华人家庭遭遇精准打击!
  26. 外国人的入境中国手续简化,可以提前在网上填报入境卡了!
  27. 人类史上“最贵CEO”诞生!马斯克的“万亿薪酬”背后
  28. 美国在AI竞争中失利了?阿里千问模型在全球领先
  29. 强制注销户口?传闻中国在加强双重国籍监管
  30. ICE启动了在社交媒体的全天候监控项目
  31. 美企的2026招聘计划“谨慎”了,AI影响显现!
  32. 美国华人揭示的五大高收入职业
  33. 美国仍然依赖纸质信件的真相剖析
  34. 中国已经全额缴纳了联合国会费,联合国的财政危机缓解!
  35. 联邦政府启动“红色日落行动” 审查比特币矿机的供应链
  36. 在海外漂泊12年后的真实感受
头像

用户名:

粉丝数:

签名:

资料 关注 好友 消息
已有0次打赏
(5) 分享
分享
取消