# l) ?" a8 F2 K( e 数据分析师近几年在国内互联网圈越来越火,很多开发都因为薪资和发展前景,希望转行到数据分析岗。今天,我们就来聊聊面试数据分析师的那些事。
/ P3 g0 W1 m& d0 A3 K6 Z; h0 s
其实,数据分析能力是每个互联网人的必备技能,哪怕你没有转行数据分析师的计划,也推荐你看看这个文章,提升你的数据能力。
9 d& Z+ K+ T3 v3 @" E$ B3 Z6 G7 s
* d+ V+ L# f. J: w( j) ^( T* C
& q q6 N- F9 S, |% G# v: ?
打开凤凰新闻,查看更多高清图片
5 ]' c& r, ^ z& E
$ }, j* y4 O6 G ' n2 Z5 k, C+ L+ p' b7 T- ~
数据分析的能力要求
2 u9 r$ t: I, d0 h 与数据分析相关的工作有一个特质,就是对数字非常敏感,同时也要求对数据具有良好的思考能力,比如说如何用数据指导业务,如何将数据呈现在报告中。
! P5 `6 E% b( y$ F 在面试的时候,面试官通常会考察以下三个维度的能力:
; u+ n, P0 ^8 D9 y+ T
1. 理论知识(概率统计、概率分析等)
4 X6 H% v$ G; X
掌握与数据分析相关的算法是算法工程师必备的能力,如果你面试的是和算法相关的工作,那么面试官一定会问你和算法相关的问题。比如常用的数据挖掘算法都有哪些,EM 算法和 K-Means 算法的区别和相同之处有哪些等。
6 X; M# Z, A! E3 a* K8 O- P 有些分析师的工作还需要有一定的数学基础,比如概率论与数理统计,最优化原理等。这些知识在算法优化中会用到。
& I6 R" q+ e2 _0 [7 Y
除此以外,一些数据工程师的工作更偏向于前期的数据预处理,比如 ETL 工程师。这个职位考察你对数据清洗、数据集成的能力。虽然它们不是数据分析的“炼金”环节,却在数据分析过程中占了 80% 的时间。
% c& L9 G; q) v4 ]0 r8 {
2. 具体工具(sklearn、Python、Numpy、Pandas 等)
( F/ g, ^- v; d! {8 Q
工程师一定需要掌握工具,你通常可以从 JD 中了解一家公司采用的工具有哪些。如果你做的是和算法相关的工作,最好还是掌握一门语言,Python 语言最适合不过,还需要对 Python 的工具,比如 Numpy、Pandas、sklearn 有一定的了解。
9 S! K1 ]- G% c3 W4 Z- T) Z 数据 ETL 工程师还需要掌握 ETL 工具,比如 Kettle。
" t' _% z0 |* |; j 如果是数据可视化工作,需要掌握数据可视化工具,比如 Python 可视化,Tableau 等。
% ?+ O5 Y+ G7 ^" s n
如果工作和数据采集相关,你也需要掌握数据采集工具,比如 Python 爬虫、八爪鱼。
m _6 p F7 Y+ q/ J
3. 业务能力(数据思维)
8 k5 p2 E8 t6 O1 q 数据分析的本质是要对业务有帮助。因此数据分析有一个很重要的知识点就是用户画像。
: u- j4 _/ G# h+ W 用户画像是企业业务中用到比较多的场景,对于数据分析来说,就是对数据进行标签化,实际上这是一种抽象能力。
; K6 @8 }/ X+ M* M

6 j) X5 v) `/ d5 h! X5 Q3 W& `
题 目
( W- c! L$ w3 b$ J: I( C4 z9 H& U 作为实力检测的一部分,笔试是非常重要的一个环节。它可以直接测验你对数据分析具体理论的掌握程度和动手操作的能力。以下是几道简单的题,你不妨来看下。
9 f- X& g: E/ k {3 H5 T
问答题
8 n8 N2 J1 W) ]7 |* i" F, s4 z! V" |
1. 用一种编程语言,实现 1+2+3+4+5+…+100。
0 B8 s, B( u: S6 l5 O& n 这道题考察的就是语言基础,你可以用自己熟悉的语言完成这道题,比如 Python、Java、PHP、C++ 等。这里我用 Python 举例:
2 D# ~5 @5 @8 O$ ^1 A4 W sum = 0
) `; O+ W8 } s, T2 N& J. F. C* J; ~
for number in range(1,101):
0 C& l" ^* ^; N/ n* J. g1 j* r. B sum = sum + number
" T) H! r5 u' v! i; s
print(sum)
: t' h" @ G. [
2. 如何理解过拟合?
0 Z5 R, l, \2 W) [ 过拟合和欠拟合一样,都是数据挖掘的基本概念。过拟合指的就是数据训练得太好,在实际的测试环境中可能会产生错误,所以适当的剪枝对数据挖掘算法来说也是很重要的。
" J" x% c( V/ {' F, |3 L 欠拟合则是指机器学习得不充分,数据样本太少,不足以让机器形成自我认知。
: U S- u2 i% ^" J2 }4 j
3. 为什么说朴素贝叶斯是“朴素”的?
2 z! K! C1 g; t# }" X
朴素贝叶斯是一种简单但极为强大的预测建模算法。之所以称为朴素贝叶斯,是因为它假设每个输入变量是独立的。这是一个强硬的假设,实际情况并不一定,但是这项技术对于绝大部分的复杂问题仍然非常有效。
1 C" Y8 L5 k8 n* o8 ~; I 4. SVM 最重要的思想是什么?
: \$ V7 H( g. u8 }2 Z7 Z SVM 计算的过程就是帮我们找到超平面的过程,它有个核心的概念叫:分类间隔。SVM 的目标就是找出所有分类间隔中最大的那个值对应的超平面。在数学上,这是一个凸优化问题。同样我们根据数据是否线性可分,把 SVM 分成硬间隔 SVM、软间隔 SVM 和非线性 SVM。
, e* @2 K7 D. u( u# k) _) g: ?
5. K-Means 和 KNN 算法的区别是什么?
' Q! o9 C h8 F" U, V" W4 Y
首先,这两个算法解决的是数据挖掘中的两类问题。K-Means是聚类算法,KNN是分类算法。其次,这两个算法分别是两种不同的学习方式。K-Means是非监督学习,也就是不需要事先给出分类标签,而KNN是有监督学习,需要我们给出训练数据的分类标识。最后,K值的含义不同。K-Means中的K值代表K类。KNN中的K值代表K个最接近的邻居。
: q# W* N6 [# {/ D3 B
动手题
8 p8 G9 J) }( [) x8 ~
1. 我给你一组数据,如果要你做数据清洗,你会怎么做?
0 c0 ?: h9 [: J3 T! |% Z, \ 
: W* `( P, O; X N" x: q; ^ 实际上,这一道题中,面试官考核的是基本的数据清洗的准则,数据清洗是数据分析必不可少的重要环节。你可能看到这个数据存在 2 个问题:典韦出现了 2 次,张飞的数学成绩缺失。
$ ?0 w: ]; C- k9 @: c
针对重复行,你需要删掉其中的一行。针对数据缺失,你可以将张飞的数学成绩补足。
$ l/ @% @3 U3 t: w( i. b
2. 豆瓣电影数据集关联规则挖掘
( R1 p) m$ a; E! l; }" {4 I
在数据分析领域,有一个很经典的案例,那就是“啤酒 + 尿布”的故事。它实际上体现的就是数据分析中的关联规则挖掘。不少公司会对这一算法进行不同花样的考察,但万变不离其宗。
3 Q8 I, ?. V; ~3 |" _) m/ Y
如果让你用 Apriori 算法,分析电影数据集中的导演和演员信息,从而发现两者之间的频繁项集及关联规则,你会怎么做?
2 ?) s! j! l' ~9 | 以上就是有关数据分析面试笔试的一些内容,你或许可以感受到数据分析师这个岗位的特殊性。面试找工作虽说不是一朝一夕就可以完成的事情,但希望此篇能帮到你。
! J$ h. O* T. T q4 @- w
了解IT相关内容,各平台同名“职坐标在线”
# B# X8 W8 Z; ^