广东训练网

深入浅出数据分析

来源:广东训练网 作者:教练 时间:2024-02-12 07:25:00
《深入浅出数据分析》有感1
提示:

《深入浅出数据分析》有感1

最近读了《深入浅出数据分析》,里面讲述一些使用传统数据分析方法,里面主要通过案例讲解很通俗易懂,值得阅读,以下是第一部分的分享-分解数据,主要是数据分析和心智模型。

1.数据分析的流程主要确认问题–分解数据–评估数据–决策。

确定:明确你要解决的问题,并基于问题搜集数据,以及基本情况(假设、分析、基本事实等等)


分析:把问题和数据分解为更小的组块,将大问题划分为小问题,将数据分解为更小的模块,

评估:和分解时一样,评估分解组块的关键是比较,通过对前两步的数据进行比较,进行有效比较。

决策:把前面几步所得的结论重新组合,得到有效结论和解决方案。

但是在数据分析中需要注意的是客户提出的问题可能本身都是错的,需要沟通确认问题,分析目的,数据来源等。

2.心智模型:你对外界的假设和你确信的观点,由一个人的认识和经验组成。




心智模型的弊病:心智模型会让你注意或忽视一些问题,并产生错误的假设或者结论(认知偏见)

错误的假设会影响数据分析:在不同的假设下,分析相同的数据会得出不同的结论。

因此,务必尽量明确心智模型,统计模型取决于心智模型。要避免认知偏见带来的问题,明确认知盲区,即将不确定因素罗列出来。


这些同样也能适用于产品的开发,例如开发一款产品,首先要确认问题,从客户那里获取信息,分析假设条件,拆分数据拆分问题,然后对问题和数据的观察做出评估,撰写产品模型。

数据分析方法的作品目录
提示:

数据分析方法的作品目录

第1章 数据描述性分析1.1 一维数据的数字特征1.1.1 表示位置的数字特征1.1.2 表示分散性的数字特征1.1.3 表示分布形状的数字特征1.2 数据的分布1.2.1 直方图、经验分布函数与QQ图1.2.2 茎叶图1.2.3 数据的分布拟合检验与正态性检验1.3 多维数据的数字特征及相关分析1.3.1 二维数据的数字特征及相关系数1.3.2 多维数据的数字特征及相关矩阵1.3.3 总体的数字特征、相关矩阵及多维正态分布习题1第2章 线性回归分析2.1 线性回归模型及其参数估计2.1.1 线性回归模型及其矩阵表示2.1.2 参数估计及其性质2.2 统计推断与预测2.2.1 回归方程的显著性检验2.2.2 回归系数的统计推断2.2.3 预测及其统计推断2.2.4 与回归系数有关的假设检验的一般方法2.3 残差分析2.3.1 误差项的正态性检验2.3.2 残差图分析2.3.3 Box-cox变换2.4 回归方程的选取2.4.1 穷举法2.4.2 逐步回归法习题2第3章 方差分析3.1 单因素方差分析3.1.1 单因素方差分析模型3.1.2 因素效应的显著性检验3.1.3 因素各水平均值的估计与比较3.2 两因素等重复试验下的方差分析3.2.1 统计模型3.2.2 交互效应及因素效应的显著性检验3.2.3 无交互效应时各因素均值的估计与比较3.2.4 有交互效应时因素各水平组合(AiBj)上的均值估计与比较3.3 两因素非重复试验下的方差分析习题3第4章 主成分分析与典型相关分析4.1 主成分分析4.1.1 引言4.1.2 总体主成分4.1.3 样本主成分4.2 典型相关分析4.2.1 引言4.2.2 总体的典型变量与典型相关4.2.3 样本的典型变量与典型相关4.2.4 典型相关系数的显著性检验习题4第5章 判别分析5.1 距离判别5.1.1 两个总体的距离判别5.1.2 判别准则的评价5.1.3 多个总体的距离判别5.2 Baves判别5.2.1 Bayes判别的基本思想5.2.2 两个总体的Beyes判别5.2.3 多个总体的Beyes判别习题5第6章 聚类分析6.1 样品间相近性的度量6.2 快速聚类法6.2.1 快速聚类法的步骤6.2.2 用Lm距离进行快速聚类6.3 谱系聚类法6.3.1 类间距离及其递推公式6.3.2 谱系聚类法的步骤6.3.3 变量聚类习题6第7章 Bayes统计分析7.1 Baves统计模型7.1.1 Bayes统计分析的基本思想7.1.2 Bayes统计模型7.1.3 Bayes统计推断原则7.1.4 先验分布的Bayes假设与不变先验分布7.1.5 共轭先验分布7.1.6 先验分布中超参数的确定7.2 Baves统计推断7.2.1 参数的Bayes点估计7.2.2 Bayes区间估计7.2.3 Bayes假设检验习题7第8章 SAS软件及有关数据分析过程简介8.1 SAS基本内容简介8.1.1 数据的输入与输出8.1.2 利用已有的SAS数据集建立新的SAS数据集8.1.3 SAS系统的数学运算符号及常用的SAS函数8.1.4 逻辑语句与循环语句8.2 与本书内容有关的SAS过程简介8.2.1 几种描述性统计分析的SAS过程和作图过程8.2.2 回归分析的SAS过程——PR0C REG过程8.2.3 方差分析的sAS过程——PR0C ANOVA过程8.2.4 主成分分析的SAS过程——PROC PRINc0MP过程8.2.5 典型相关分析的sAS过程——PROC CANC0RR过程8.2.6 判别分析的SAS过程——PR0C DISCRIM过程8.2.7 聚类分析的SAS过程8.2.8 SAS系统的矩阵运算编程语言——PROC IML过程简介主要参考文献

最新文章

更新时间 2024-02-12 07:25:00