数据分析师(实习)试题解析
一、异常值是指什么?请列举 1 种识别连续型变量异常值的方法?
异常值() 是指样本中的个别值,其数值明显偏离所属样本的其余观测值。在数理
统计里一般是指一组观测值中与平均值的偏差超过两倍标准差的测定值。
(是以 命名的),又叫 ,是一种用
于单变量数据集异常值识别的统计检测,它假定数据集来自正态分布的总体。
未知总体标准差 ,在五种检验法中,优劣次序为: 检验法、格拉布斯检验法、峰度检验
法、狄克逊检验法、偏度检验法。
二、什么是聚类分析?聚类算法有哪几种?请选择一种详细描述其计算原理和步骤。
聚类分析是一组将研究对象分为相对同质的群组的统计分析技术。
聚类分析也叫分类分析 !或数值分类。聚类与分类
的不同在于,聚类所要求划分的类是未知的。
聚类分析计算方法主要有: 层次的方法(""")、划分方法(#!!$
" ) 、基 于 密 度 的 方 法 ( %" )、 基 于 网 格 的 方 法 ( $%
")、基于模型的方法(%")等。其中,前两种算法是利用统计学
定义的距离进行度量。
%算法的工作过程说明如下:首先从 个数据对象任意选择 个对象作为初始聚类中
心;而对于所剩下其它对象,则根据它们与这些聚类中心的相似度(距离),分别将它们
分配给与其最相似的(聚类中心所代表的)聚类;然后再计算每个所获新聚类的聚类中心
(该聚类中所有对象的均值);不断重复这一过程直到标准测度函数开始收敛为止。一般
都采用均方差作为标准测度函数 个聚类具有以下特点:各聚类本身尽可能的紧凑,而各
聚类之间尽可能的分开。
其流程如下:
()从 个数据对象任意选择 个对象作为初始聚类中心;
()根据每个聚类对象的均值(中心对象),计算每个对象与这些中心对象的距离;并根
据最小距离重新对相应对象进行划分;
(&)重新计算每个(有变化)聚类的均值(中心对象);
(')循环()、(&)直到每个聚类不再发生变化为止(标准测量函数收敛)。
优 点:本算法确定的 (个划分到达平方误差最小。当聚类是密集的,且类与类之间区别明
显时,效果较好。对于处理大数据集,这个算法是相对可伸缩和高效的,计算的复杂度为
)(,其中 ) 是数据对象的数目, 是迭代的次数。一般来说,(**),**)。
缺点:(是事先给定的,但非常难以选定;初始聚类中心的选择对聚类结果有较大的
影响。
三、根据要求写出 SQL
表 结构如下:
+,-.(用户的 -.,字符型)
/$,!(用户访问页面时间,日期型(只有一天的数据))
01/(访问的页面地址,字符型)
要求:提取出每个用户访问的第一个 01/(按时间最早),形成一个新表(新表名为 2,表
结构和表 一致)
2+,-.3/$,!301/4$#+,-.5
四、销售数据分析
以下是一家 26 电子商务网站的一周销售数据,该网站主要用户群是办公室女性,销售额
评论0
最新资源