▲图1-2 RFM模型示例
经过以上数据分析，我们终于可以进行有针对性的折扣券营销了。细心的读者可以发现，数据分析是按照图1-1所示的工作范式从右至左规划和分析、从左至右实际操作的。本案例比较简单，数据量不大，使用Excel进行数据分析即可。
不过，当一个企业的年销售额达到几十亿元，活跃客户量达到几十万时，其就必须聘请专业的数据科学工作者，使用复杂的算法和专业的分析工具了。
与数据科学相关的知识涉及多个学科和领域，包括统计学、数据挖掘、模式识别、人工智能（机器学习）、数据库等，如图1-3所示。数据科学的算法来源比较复杂，所以同一概念在不同领域的称呼不一样。为了便于读者将来与不同领域的专家沟通，我们力争列出出现的术语在不同领域对应的称呼。
▲图1-3 数据科学知识领域
- 数据库
数据是数据科学的基础，任何数据分析都离不开数据。如今信息化建设日趋完善，数据库作为存储数据的工具，被数据分析人员广泛使用。
Python和R之类的工具都是内存计算，难以处理太大的数据。因此在对数据库中的数据进行分析前，数据分析师需要借助Oracle之类的数据库工具得到待分析的数据，并在数据库内进行适当的清洗和转换。即使在大数据平台上做数据分析，大量的数据也是在Hive或Impala中处理后才被导入Spark进行建模。
- 统计学
统计学一直被认为是针对小数据的数据分析方法，不过其仍旧在数据科学领域担任重要的角色，比如对数据进行抽样、描述性分析、结果检验等。目前商业智能中的数据可视化技术绝大多数使用的是统计学中的描述性分析。而变量降维、客户分群主要还是采用多元统计学中的主成分分析和聚类算法。
- 人工智能/机器学习/模式识别
一些数据科学方法起源于早期科技人员对计算机人工智能的研究，比如神经网络算法是模仿人类神经系统运作的，不仅可以通过训练数据进行学习，而且能根据学习的结果对未知的数据进行预测。
很多人视数学为进入数据科学的拦路虎，这是完全没有必要的。在一开始接触数据科学时，我们完全可以从业务需求出发，以最简单的方法完成工作任务。
02 数理统计技术数理统计博大精深，但入门并不难。只要掌握本节中介绍的描述性统计分析和统计推断的知识，你便可应对绝大部分工作。
1. 描述性统计分析
描述性统计分析是每个人几乎都会使用的方法，比如新闻联播中提及的人民收入是均值，而不是每个人的收入。企业财务年报中经常提及的是年收入、利润总额，而不是每一笔交易的数据。这些平均数、总和就是统计量。
描述性统计分析就是从总体数据中提炼变量的主要信息，即统计量。日常的业务分析报告就是通过标准的描述性统计分析方法完成的。做这类分析时只要明确分析的主题和可能的影响因素，即可确定可量化主题和影响因素的指标，然后根据这些指标的度量类型选择适用的统计表和统计图进行信息呈现。图1-4展现了统计表的类型和对应的柱形图。
▲图1-4 描述性统计分析方法
以图1-5为例，这是某知名商业智能软件的截图，其实就是图1-4中方法的运用。比如图中“普通小学基本情况”报表就是“汇总表”的直接运用；“普通小学专任教师数”是柱形图的变体，使用博士帽的数量替代柱高；“各省份小学学校数量占比”中使用气泡的大小代表各省小学学校数量的占比情况。
▲图1-5 某商业智能软件的截图
剩下的难点就是理解业务和寻找数据了，这要靠多读分析报告、积累业务经验来解决。
2. 统计推断与统计建模
统计推断及统计建模的含义是建立解释变量与被解释变量之间可解释的、稳定的，最好是具有因果关系的表达式。在模型运用时，将解释变量带入该表达式可以预测每个个体被解释变量的均值。目前，针对统计推断，业界存在两个误解。
- 统计推断无用论
认为大数据时代只做描述性统计分析即可，不需要做统计推断。由于总体有时间和空间两个维度，即使通过大容量与高速并行处理得到空间上的总体，也永远无法获取时间上的总体，因为需要预测的总是新的客户或新的需求。
更为重要的是，在数据科学体系中，统计推断的算法往往是复杂的数据挖掘与人工智能算法的基础。比如特征工程中大量使用统计推断算法进行特征创造与特征提取。
- 学习统计推断的产出/投入比低
深度学习大行其道的关键点是产出/投入比高。实践表明，具有高等数学基础的学生可以通过两个月的强化训练掌握深度学习算法并投入生产，而培养同样基础的人开发可落地的商业统计模型的时间至少是半年，原因在于统计推断的算法是根据分析变量的度量类型定制开发的，需要分析人员对各类指标的分布类型有所认识，合理选择算法。
而深度学习算法是通用的，可以在一个框架下完成所有任务。听上去当然后者的投入产出比更高。但是，效率与风险往往是共存的。目前，顶尖AI公司的模型开发人员发现一个现象：解决同样的问题，统计模型开发周期长而更新频次低；深度学习算法开发周期短而优化频次高。
过去，深度学习所鼓吹的实时优化造成企业过度的人员投入，使得企业综合受益不一定高。而我们的目的之一就在于降低统计推断学习的成本。读者将来只要按照表1-2所示方法分析，即可大大缩减学习时间。
