当前位置: 主页 > 网络培训 > 数据分析 >

神奇的数据分析师脑洞

时间:2016-09-18 19:21来源:未知 作者:admin 点击:
针对电商促销活动的数据分析,数据显示不少用户延迟了很多天后(与发放时间相比)才接受了优惠返券

  在数据分析工作中,要尽量避免“过度脑补”的错误,该错误的典型表现是“用一个精细的故事解释高层的统计指标”。以往阅读分析报告,我经常对很多同学从简单、概要的数据指标中,推测出一个曲折、复杂、细节的故事而感叹不已。例如针对电商促销活动的数据分析,数据显示不少用户延迟了很多天后(与发放时间相比)才接受了优惠返券,某份分析报告绘声绘色的推测了各种用户心态:“用户1 非常有钱,所以不在意优惠券;用户2 从来不查看账户信息,所以没注意到优惠”。这些推测使人怀疑,莫非分析师是用户肚子里的蛔虫?如果下这些结论,需要抽样部分用户进行电话调研、加以账户数据的辅助才可以确信。如“用户1 非常有钱”的结论,需要查看他的历史购物记录,消费商品是否都属于较贵重的?是否非常在意品牌和品质?是否关注过或购买过折扣商品?等等。

精细的故事,往往需要细致的数据来支撑。这个原理在机器学习中也有体现,复杂的模型需要更多的数据样本才能防止“过拟合”(注释:模型更多学习到训练集的误差波动,而不是本质规律)。在科学研究中,只基于目前观察,做出“最简”结论,被称为“奥卡姆剃刀原则(Occam's Razor)”,即“简单有效原理”。科学史上多次出现这样的案例,过于复杂的理论大都是人类没有掌握真正的本质规律。例如几百年前,虽然“地心说”统治了当时天文学界,但科学家不断观测到不符合理论的例外现象,所以不断的对地心说理论进行修正,最后导致天体运行的计算体系复杂到难以使用。最终,人们发现“日心说”才是正确的,新的计算体系一下子变得简单极了。

  精细的故事,往往需要细致的数据来支撑。这个原理在机器学习中也有体现,复杂的模型需要更多的数据样本才能防止“过拟合”(注释:模型更多学习到训练集的误差波动,而不是本质规律)。在科学研究中,只基于目前观察,做出“最简”结论,被称为“奥卡姆剃刀原则(Occam's Razor)”,即“简单有效原理”。科学史上多次出现这样的案例,过于复杂的理论大都是人类没有掌握真正的本质规律。例如几百年前,虽然“地心说”统治了当时天文学界,但科学家不断观测到不符合理论的例外现象,所以不断的对地心说理论进行修正,最后导致天体运行的计算体系复杂到难以使用。最终,人们发现“日心说”才是正确的,新的计算体系一下子变得简单极了

(责任编辑:sem培训)
顶一下
(0)
0%
踩一下
(0)
0%
------分隔线----------------------------