-
?
每个人都可以成为数据分析师,没错你也可以
宣绿真
展开
如果你不认为自己有数据素养,那么你并不孤单。尽管我们处于大数据时代,但今天许多专业人士都不愿意在日常工作中使用数据。事实上,最近在Wikibon的“ 大数据:Hadoop,业务分析和超越 ”中说明了这一巨大的数据技能差距,该数据警告称美国可能“面临140,000至190,000人的短缺,具有深厚的分析能力以及1.5拥有专业知识的百万经理和分析师将在2018年之前使用大数据分析做出有效决策。
无论你的职业如何,你都可以开始弥合这一差距。采取最小的步骤来学习如何使用数据将更具洞察力,更高效,并赢得影响业务并可以提高绩效的人的声誉。
1.不要让数字吓到你。
如果不熟悉Excel或不喜欢使用数字,那么很容易将数据推送出去。但是,每个专业人员需要达到的数字和数据都有一定的基本舒适度。首先查看可以获得的最基本的商业号码 - 也许是每个渠道合作伙伴的公司收入数字或公司网站接收的访问者数量。
通过探索重要的数字和指标来克服自己与数据之间的距离,让自己动手 - 谁知道,你甚至可能对它产生兴趣。如果确实发现的兴趣被激发,可能需要一些时间来查看一个自定进度的在线课程,该课程专为想要了解如何构建,可视化和操纵数据的人而设计。
2.保持简单。
试图了解公司数据的最大份额是可以犯的最大错误之一。人们常常痛苦地分析数百种产品或客户或地区。几乎不可能识别超过五到七组的数据模式。寻找制作群组的方法,即按产品颜色,价格点或产品系列类型。问问自己:分类如何简化我的分析?
3.找到公司的80/20。
在学习如何更聪明,更努力地工作时,数据是你的盟友。80/20规则表明,执行的活动中有20%占结果的80%。如果可以使用数据来识别驱动大部分结果的少数操作,那么可以集中精力发挥更大的影响力。
太多的人在任务之间平均分配时间,并且在尝试做太多事情时不知所措。例如,如果一名网络营销人员,并且对网站中流量最大的三个部分(并且专注于这些领域)进行了调整,那么这会对效果产生巨大影响。
4.跟踪一段时间内的趋势。
可以通过识别一些关键统计信息(例如平均销售价格或每位客户的收入)来强制与业务保持一致,并强制自己跟踪它们。很快,将看到数据中的模式并更早地识别趋势。在一周内似乎没有太大变化的趋势可能会在三到六个月内发生显着变化。跟踪随着时间的推移为提供强大的见解,帮助改善业务,使成为公司的宝贵财富。
5.问自己一些棘手的问题。
即使你的老板没有要求它,也要问问自己:我应该从这项活动中获得什么样的投资回报,以及我如何衡量我实际得到的回报?创建一个假设并按照数据查看结果。例如,如果要推出新的营销广告系列来替换旧广告系列,请寻找机会来测试新广告系列与旧广告系列。选择一个城市并将旧广告系列的一半发送给旧广告系列,将其中一半发送给新广告系列,以衡量每个广告系列的效果。
如果跟踪和跟踪数据并且可以引用基于统计数据的结果,那么它将使成为具有良好决策能力的知情且专注的个人。事实上,即使没有获得在测试中寻找的结果,可以指向数据驱动的洞察力这一事实将使的老板将视为能够影响业务并提高绩效的人。
随着习惯使用数据,可以尝试使用中级到高级工具,这些工具可以帮助深入了解各种信息池。一旦看到数据提供有意义的见解并且获得了增强性能的认可,就会被吸引住!幸运的是,可以做的数据分析数量没有尽头。在今天的数据驱动时代,天空真的是极限!
-
?
数据产品经理和数据分析师有什么区别
鲁鹏笑
展开
数据产品经理需要具备的素质:
首先,数据产品经理必须了解不同的公司,在不同的阶段,需要哪些数据产品,并能够制作出来,这是此职位的核心要求。
其次,数据产品经理必须有足够的数据分析能力,如果有了数据分析的思维,再跟公司业务结合就会比较容易。
最后,数据产品经理是产品经理的一种,所以要同时具备产品经理的能力:了解用户,需求调研,方案设计,协调技术、测试、设计等。
数据分析师需要具备的素质:
理论要求及对数字的敏感性,包括统计知识、市场研究、模型原理等。
工具使用,包括挖掘工具、数据库、常用办公软件(excel、PPT、word、脑图)等。
业务理解能力和对商业的敏感性。对商业及产品要有深刻的理解,因为数据分析的出发点就是要解决商业的问题,只有理解了商业问题,才能转换成数据分析的问题,从而满足部门的要求。
汇报和图表展现能力。这是临门一脚,做得再好的分析模型,如果不能很好地展示给领导和客户,成效就大打折扣,也会影响到数据分析师的职业晋升。
2017年1月13日线上产品经理说明会带你入门了解产品经理的工作职责与发展前途,成为年薪50W起的优秀产品经理,你·还差一场入门说明会。报名地址:http://form.mikecrm/riZQwJ
-
?
Top30数据分析师常见面试题(附答案)!
科拉
展开
【IT168 评论】这是一个用数据说话的时代,也是一个依靠数据竞争的时代。各大互联网公司都在不断完善自己的数据分析团队,数据分析师的薪酬也是水涨船高。业内人士透露,应届毕业生的平均薪资大概在6K左右,1至3年经验的大概在10K到20K之间,5至10年经验的大概在25K以上。薪资还是十分诱人的,那么,如何快速成长为一名年薪百万的数据分析师呢?快来看看,以下30道数据分析相关面试题,你会多少?
1、分析数据还要写java代码是不是效率有点低?
2、成为一名数据分析师需要具备哪些技能?
要成为一名数据分析师,需要掌握丰富的报告软件包(Business Objects),编程语言(XML,Javascript或ETL框架),数据库(SQL,SQLite等);能够准确分析、组织、收集或传播数据;掌握数据库设计,数据模型,数据挖掘等方面的技术知识以及分析大型数据集(SAS,Excel,SPSS等)的统计软件包知识。
3、分析项目的各个步骤是什么?
分析项目的各个步骤包括:
·问题定义
·数据挖掘
数据准备
模型化
数据认证
实施跟踪
4、分析的结果数据特别大,在线请求这些结果数据扛不住了,咋搞?
5、列出数据清理的最佳实践?
一些数据清理的最佳实践包括:
按不同的属性排序数据
对于大数据集,逐步清理并改进数据,直到获得良好的数据质量
对大型数据集,可以先将其分解为小数据集,使用更少的数据将增加迭代速度
要处理常见的清理任务,请创建一组实用程序函数/工具/脚本。它可能包括基于CSV文件或SQL数据库重映射值,或者正则表达式搜索和替换,消除所有不匹配正则表达式的值
如果在数据清理方面存在问题,请按照估计的频率进行安排并解决问题
分析每列的汇总统计数据(标准差,均值,缺失值的数量)
保持对每一个清理操作的跟踪,以便可以根据需要更改或删除操作
6、海量日志数据,提取出某日访问百度次数最多的那个IP。
7、可用于数据分析的一些最佳工具清单有什么?
Tableau
RapidMiner
OpenRefine
KNIME
Google Search Operators
Solver
NodeXL
io
Wolfram Alpha’s
Google Fusion tables
8、数据挖掘和数据分析之间的区别是什么?
数据挖掘和数据分析之间的区别在于:
数据分析:针对个别属性的实例分析。提供有关属性的各种信息,如值范围,离散值及其频率,空值的发生,数据类型,长度等。
数据挖掘:重点关注聚类分析,异常记录检测,依赖关系,序列发现,多个属性之间的关系控制等。
9、给定a、b两个文件,各存放50亿个url,每个url各占64字节,内存限制是4G,让你找出a、b文件共同的url?
10、用于处理分布式计算环境中应用程序大数据集的Apache框架有哪些?
Hadoop和MapReduce是由Apache开发的用于处理分布式计算环境中应用程序大数据集的编程框架。
11、腾讯面试题:给40亿个不重复的unsigned int的整数,没排过序的,然后再给一个数,如何快速判断这个数是否在40亿个数当中?
12、解释KNN插补方法是什么?
在KNN插补中,通过使用与其值缺失的属性最相似的属性值来推断缺少的属性值。通过使用距离函数,确定两个属性的相似度。
13、数据分析师使用的数据验证方法是什么?
通常,数据分析师用于数据验证的方法是数据筛选和数据验证。
14、解释应该如何处理可疑或缺失数据?
准备提供所有可疑数据信息的验证报告。它应该提供信息,如失败的验证标准以及发生的日期和时间
有经验的数据分析师应该检查可疑数据以确定其可接受性
应该找出无效数据并用验证码替换
对缺失数据进行处理,使用最佳分析策略,如删除,单一插补方法,基于模型的方法等。
15、如何避免过拟合?
过拟合表现在训练数据上的误差非常小,而在测试数据上误差反而增大。其原因一般是模型过于复杂,过分得去拟合数据的噪声和outliers。常见的解决办法是正则化:增大数据集,正则化
16、解释异常值是什么?
异常值是分析师使用的一个术语,指的是一个远远超出样本总体模式的值。有两种类型的异常值:
Univariate
Multivariate
17、解释分层聚类算法是什么?
分层聚类算法结合并划分现有的组,创建分层结构并展示组划分或合并的顺序。
18、解释K均值算法是什么?
K均值是一种著名的分区方法。对象被分类为属于K个组中的一个,k是先验选择的。
在K均值算法中:
簇是球形的:簇中的数据点以该簇为中心
簇的方差/扩展是相似的:每个数据点属于最接近的簇
19、数据分析师所需掌握的关键技能是什么?
数据科学家必须具备以下技能:
数据库知识
数据库管理
数据混合
数据查询
数据操作
预测分析
基本描述性统计
预测建模
高级分析
大数据知识
大数据分析
非结构化数据分析
机器学习
演示技巧
数据可视化
报告设计
20、解释协同过滤是什么?
协同过滤是一种基于用户行为数据创建推荐系统的简单算法。协同过滤最重要的组件是用户对项目的兴趣。
协同过滤一个很好的例子就是购物网站上出现的类似“为您推荐”的模块,该模块通常会获取用户的浏览记录信息,以弹出用户可能喜欢或需要的商品。
21、大数据中通常会使用到哪些工具?
大数据中使用的工具包括:
Hadoop
Hive
Pig
Flume
Mahout
Sqoop
22、解释什么是KPI,实验设计和80/20规则?
关键绩效指标(KPI):它代表关键绩效指标(Key Performance Indicator),它是关于业务流程的报告或图表
实验设计:这是用于分解数据,采样和建立数据以进行统计分析的初始过程
80/20规则:这意味着你收入的80%来自客户的20%
23、解释Map Reduce是什么?
Map-Reduce是一个处理大型数据集的框架,可以将它们分解成子集,在不同的服务器上处理每个子集,然后混合每个子集上获得的结果。
24、解释聚类是什么?聚类算法的属性?
聚类是一种应用于数据的分类方法。聚类算法将数据集划分为自然组或集群。
聚类算法的属性是:
Hierarchical or flat
Iterative
Hard and soft
Disjunctive
25、对数据分析师有用的统计方法是什么?
对数据科学家有用的统计方法是
贝叶斯方法
马尔科夫过程
空间和集群进程
统计数据,百分位数,异常值检测
计算技巧等
简单的算法
数学优化
26、时间序列分析是什么?
时间序列分析可以在频域和时域两个域中完成。在时间序列分析中,可以通过指数平滑,对数线性回归等各种方法分析数据,来预测特定过程输出。
27、解释空间自相关分析是什么?
空间自相关分析是地理空间分析的常用形式。它由一系列为不同空间关系计算的估计自相关系数组成。当原始数据表示为距离而不是单个点的值时,它可以用于构建基于距离的数据相关图。
28、散列表是什么?散列表冲突是什么?如何避免?
在计算中,哈希表(散列表)是键值对的映射,这是一个用于实现关联数组的数据结构。它使用散列函数来计算一个时隙阵列的索引,从中可以获取所需的值。
当两个不同的键散列到相同的值时,发生散列表冲突。两个数据不能存储在阵列的同一个插槽中。
为了避免散列表碰撞,有很多技巧,这里列出两个:
分离链接:它使用数据结构来存储散列到同一个插槽的多个项目。
再探测:在找到查找位置的index的index-1,index+1位置查找,index-2,index+2查找,依次类推。这种方法称为线性再探测。
29、解释 imputation是什么?列出不同类型的插补技术?哪种插补方法更有利?
在插补过程中,我们用替代值替换丢失的数据。插补技术涉及的类型有:
单一插补
热点插补:从随机选择的类似记录中推断缺失值
冷却板插补:与热点插补相同,但更先进,从其他数据集中选择供体
平均估算:在所有其他情况下,用该变量的平均值代替缺失值
回归插补:用基于其他变量的变量预测值替换缺失值
随机回归:与回归插补一样,但它将平均回归方差加入到回归估计中
多重插补:与单个插补不同,多重插补会多次估计值
虽然单一插补法被广泛使用,但并不能反映随机丢失数据所造成的不确定性。因此,在数据丢失的情况下,多重插补更有利。
30、解释N-gram是什么?
N-gram是来自给定序列文本或语音的n个项目的连续序列。这是一种以(n-1)形式预测下一个项目的概率语言模型。
-
?
数据分析师需要会什么?数据分析师必备工具!
玫瑰
展开
上海数据分析网工欲善其事,必先利其器。想要成为一名优秀的数据分析师,一款顺手的数据分析工具是必不可少的。下面为大家推荐几款数据分析工具
Excel
上海数据分析网让我们一起面对它吧,即使在高水平语言辈出的年代,Excel工具仍旧被很多人所认可。调查发现59%的数据科学家和分析师使用 Excel 工具,这个数据几乎年年如此,少有变化。Excel 是经过检验的可靠的数据分析工具,它广泛存在,非程序人员也能便捷操作,所以大多数企业即使也使用其他工具,但 Excel 工具还是他们的不二选择。
R语言
上海数据分析网R语言主要适用于EDA(探索性数据分析),也就是你与数据之间的对话,是通过作图来找寻单变量,双变量或者多变量之间的关系,进而发现其相关性。
他的学习也不是很难,掌握了基本操作,要掌握核心的几个包(package),然后经常性的练习,善于借助帮助文档,所谓熟能生巧,就是这个道理。
Python
上海数据分析网人生苦短,我用Python。
Python语言是一门功能非常强大,实用型非常强的语言,Web编程,网络爬虫。
数据分析自然少不了要掌握pandas和numpy两个包,如果用到数据可视化(后面会讲到),肯定要用matplotlib包,这三个包基本上就是Python进行数据分析的半壁江山以上了,好好掌握,不能将就。
Google Refine
上海数据分析网Google Refine。用户在电脑上运行这个应用程序后就可以通过浏览器访问之。这个东西的主要功能是帮用户整理数据,接下来的演示视频效果非常好:用户下载了一个 CSV 文件,但是同一个栏中的同一个属性有多种写法:全称,缩写,后面加了空格的,单数复数格式不一的。。。但是这些其实都代表了同一个属性,Google Refine 的作用就是帮你把这些不规范的写法迅速统一起来。
Gephi
上海数据分析网Gephi是进行社会图谱数据可视化分析的工具,不但能处理大规模数据集并且Gephi是一个可视化的网络探索平台,用于构建动态的、分层的数据图表。
Wordart
上海数据分析网Wordart操作简单。可以分析文本,上传excel,还有分析URL,需要注意的是网站本身没有中文字体,需要先自行添加中文字体,然后再生成词云。Wordart最受欢迎的地方就是词云的字体,配色,图形都支持自定义,生成的图看起来非常高上大。另外做好的图可以分享和下载,但是词频不能下载。
-
?
成为数据分析师,只需这7步!
新瑶
展开
一夜之间,几乎所有的企业都开始拼命的抢着不同领域的数据人才:市场分析师、咨询分析师、金融分析师、商品分析员、精算师、数据挖掘分析师等等。
在线社交媒体,希望通过数据时刻洞察用户喜欢什么,提供相应内容和广告;金融巨鳄,希望每天能够从大量的数据中获得深层信息,时刻预测行业走势;电商BAT等数据平台,纷纷开始生产大数据产品,为其他行业提供以数据为基础的服务。数据分析师的薪水也水涨船高,成为目前最有潜力的职业选择之一。
第一步:Excel学习掌握
了解单元格格式,后期的数据类型包括各类timestamp,date,string,int,bigint,char,factor,float等。了解数组,以及怎么用(excel的数组挺难用),Python和R也会涉及到 list。了解函数和参数,当进阶为编程型的数据分析师时,会让你更快的掌握。了解中文编码,UTF8和ASCII,包括CSV的delimiter等,以后你会回来感谢我的。
第二步:数据可视化
数据分析的最终都是要兜售自己的观点和结论的。兜售的最好方式就是做出观点清晰数据详实的PPT给老板看。如果没人认同分析结果,那么分析也不会被改进和优化,不落地的数据分析价值又在哪里?
首先要了解常用的图表:
了解图表后,还应该学会报表制作
如果还不过瘾,我们要掌握信息图和BI,下图就是微软的Power BI:BI(商业智能)和图表的区别在于BI擅长交互和报表,更擅长解释已经发生和正在发生的数据。将要发生的数据是数据挖掘的方向。BI的好处在于很大程度解放数据分析师的工作,推动全部门的数据意识,另外降低其他部门的数据需求
第三步:分析思维的训练
分析思维首推大名鼎鼎的金字塔原理,帮助数据分析师结构化思维。如果金字塔原理让你醍醐灌顶,那么就可以学思维导图,下载一个XMind中文网站,或者在线用百度脑图。再了解SMART、5W2H、SWOT、4P理论、六顶思考帽等框架。这些框架都是大巧不工的经典。你要快速成为数据分析师,思考方式也得跟着改变。网上搜咨询公司的面试题,搜Case Book。题目用新学的思维导图做,先套那些经典框架,做一遍,然后去看答案对比。
第四步:数据库学习
Excel对十万条以内的数据处理起来没有问题,但是互联网行业就是不缺数据。但凡产品有一点规模,数据都是百万起。这时候就需要学习数据库。
学习围绕Select展开。增删改、约束、索引、数据库范式均可以跳过。SQL学习不需要买书,W3C学习就行了,SQL 教程。大多数互联网公司都是MySQL,我也建议学,性价比最高。
如果想要跟进一步,可以学习row_number,substr,convert,contact等。另外不同数据平台的函数会有差异,例如Presto和phpMyAdmin。
第五步:统计知识学习
统计知识会要求我们以另一个角度看待数据。当你知道AB两组的差异用平均值看是多傻的事情,你的分析技巧也会显著提高。这一周努力掌握描述性统计,包括均值、中位数、标准差、方差、概率、假设检验、显著性、总体和抽样等概念。详细的数学推导不用细看,谁让我们是速成呢,只要看到数据,知道不能怎么样,而是应该这样分析即可。
第六步:业务学习(用户行为、产品、运营)
需要了解业务。对于数据分析师来说,业务的了解比数据方法论更重要。当然很遗憾,业务学习没有捷径。
除了业务知识,业务层面沟通也需要掌握。另外建议在面试前几天收集该行业的业务强化一下。
第七步:Python/R 学习
是否具备编程能力,是初级数据分析和高级数据分析的风水岭。数据挖掘,爬虫,可视化报表都需要用到编程能力。掌握一门优秀的编程语言,可以让数据分析师事半功倍,升职加薪,迎娶白富美。
成为数据分析师后,坑才刚刚开始,努力吧。
-
?
Excel数据分析表格你能够玩转吗?看看你属于哪一级
鹿斓
展开
小R刚毕业,每天都在公司忙到10点半回家。
作为室友的我,总是打趣地问他:“是不是又在公司蹭空调蹭网络,干嘛不早点回来陪我吃鸡!”
没想到小R低下头落寞地抱怨道:“我也想早点回来,可是我真的搞不定啊!”
原来,小R每天的工作标配就是统计数据。可同事们十几分钟就能轻松搞定的Excel表格,他经常要加几个小时班才能勉强完成。刚开始,他以为是自己不够熟练,多多练习就好了。没想到埋头苦练了半个月,他还是全组最慢的那个,每天被领导催到怀疑人生,甚至被质疑工作能力。
没有对比就没有伤害。看着旁边妹子敲几下键盘就能轻松搞定表格,小R开始惧怕做Excel和数据统计。
如今,几乎所有公司在招聘时都离不开这条要求:熟练使用Excel,精通数据分析者优先。
做方案、汇报工作、数据分析、总账录入、项目进度、工作记录、写代码、帮助记忆、思维导图.......Excel几乎能解决你工作中的所有问题,它不仅仅是某一职业的必备技能,而真实涵盖所有行业:
做行政,你要学会做考勤表;做财务,你要学会做财会报表;做销售,你要学会做销售业绩表;做运营,你要数据分析、工作汇报;做数据分析师,Excel玩得6也是最最最基本的条件.....
大数据是眼下非常时髦的热词,同时也催生出了一些与大数据处理相关的职业,数据分析师便是其中之一。由于专业技能和量化的数据分析为客户或所在公司控制决策分析、保证利益最大化,“数据分析师”一职备受各界青睐,甚至被视为21世纪的黄金职业。
虽然发展前景大好,但很多想要转行数据分析的小白心里多少都会有些疑惑:不会R、Python、SPSS、Tableau,是不是做不了数据分析师?
事实上,精通Excel,对于转行数据分析来说相当重要。因为Excel拥有最大的客户群体,基本上所有的企业、个人的电脑中装的都是office,这也就意味着90%以上使用电脑的人,都会用到Excel,即便如BAT这样的企业,在处理百万级、千万级数据的时候,也会优先使用Excel。
那么,在没有统计学、数学、计算编程等基础的情况下,如何只用Excel,成功转行成为数据分析师呢?
这里就不得不介绍三款用Excel就可以实现数据分析的插件:Power Query(数据查询)、Power Pivot(数据建模)、Power View(数据可视化)。
这三个模块组成了数据分析全过程,这个过程就好比烹饪过程:
第一个模块数据查询——Power Query。与数据源直接对接,就像获取新鲜的食材,对食材进行清洗、分类、整理,使其达到准备入锅的使用状态。这一步非常重要,因为如果食材不新鲜,那么再厉害的大厨也不可能做出一道健康的美味,所以好的数据源是成功的一半。
第二个模块是数据建模——Power Pivot。这一步是数据分析过程中最具有技术含量的核心部分。我们把数据组合起来实现不同维度的分析,就像把食物组合起来利用烹、炸、煎、炒等方式,再添加油、盐、酱、醋等调料,以烹制出想要的味道。
但是光有味道是不够的,最后我们要呈现给顾客的是一道色、香、味俱全的菜,是否能以视觉效果吸引顾客品尝你的美味,这就要看第三个模块——Power View(数据可视化)的功力了。
例如,如果以前你的做表是这样的 :
那现在通过Power View几秒钟就可以做成这样:
是不是相当神奇?!
无论你是像小R一样的职场小白想要提高工作效率实现逆袭,还是零基础转行成为高大上的数据分析师,精通Excel可以让你彻底告别被数据搞晕的日子,实现加薪不加班!
Excel这么重要,如何在短时间内熟练掌握呢?这有一套为你打造的Excel精品课程:容大教育《Excel速成班——数据处理与分析实战》在线课程,教你用Excel实现数据采集、数据转换和清洗、数据分析与建模等,关注容大教育IT培训机构百家号获取学习资料!
-
?
成为一名数据分析师需要会哪些技能?
狄不评
展开
上海数据分析网数据分析师这个职业越来越火,越来越多的人想往这个方向发展。
有在校生,也有转行的小伙伴来咨询数据分析师这个职业的相关问题。
从大部分情况来看,大家对于数据分析师的职业发展和技能非常关心。
那么别的先不说,数据分析入门到底要学什么?怎么学?
Excel
作为数据分析师,Excel是必备技能。Excel 是经过检验的可靠的数据分析工具,它广泛存在,非程序人员也能便捷操作,所以大多数企业即使也使用其他工具,但 Excel 工具还是他们的不二选择。
统计学
统计学同样是数据分析师的必备技能之一,你只有学好了统计学才能谈得上数据分析。统计知识会要求我们以另一个角度看待数据。当你知道AB两组的差异用平均值看是多傻的事情,你的分析技巧也会显著提高。如果你想成为一名出色的数据分析师,那么你就必须要会统计学。
推荐图书:《深入浅出统计学》
上海数据分析网大概是最啰嗦的深入浅出系列,从卖橡皮鸭到赌博机的案例,囊括了常用的统计分析如假设检验、概率分布、描述统计、贝叶斯等。书本注重应用和趣味性,数学推理一般。
SQL
sql是所有数据库查询的语言,sql非常容易入手。
针对不同的数据库,如mysql、sqlserver、oracle等,sql语法会有所不同,但是总体上大同小异,只是细微处的差别。
而且如果你有数据库基础的话,只需要找些sql查询的习题来做一下,就会很快的得到提高。
推荐图书:《MySQL必知必会》
上海数据分析网学习 SQL 的入门书,薄册子一本,看起来很快。SQL 是个性价比很高的技能,简单而强大。任何想进一步提高自己数据分析技能的产品/运营/分析师 同学,都建议点亮 这个技能点。
数据分析思维
作为一名数据科学家需要很挑剔,并且善于发现他人会遗漏的东西。那么我们应该如何做到像数据科学家一样思考呢?
梳理分析思路,并搭建分析框架,把分析目的分解成若干个不同的分析要点,即如何具体开展数据分析,需要从哪几个角度进行分析,采用哪些分析指标(各类分析指标需合理搭配使用)。同时,确保分析框架的体系化和逻辑性。
推荐图书:金字塔原理
上海数据分析网金字塔的基本结构是:中心思想明确,结论先行,以上统下,归类分组,逻辑递进。先重要后次要,先全局后细节,先结论后原因,先结果后过程。
行业知识
对于数据分析师来说,业务的了解比数据方法论更重要。而且业务学习没有捷径。这一部分也没有什么书可以看的了,基本都靠搜索,总结,思考,再搜索,总结,思考。
-
?
从月薪千元的E表哥到年入十万的数据分析师,你必须会的Excel技能
宛凝
展开
现如今世界已经进入大数据时代,不少企业都开始数据化运营,对数据处理方面人才的需求也越来越多。数据分析师就是其中的典型,作为数据化时代的宠儿,不仅职位需求量大,薪资也十分可观,数据分析师绝对是个有前途的职位,有不少先知先觉的人已经开始往这方面发展了。那如何成为数据分析师呢?
成为数据分析师的基本条件那就是Excel要玩得够6!6到什么程度呢?不同行业、不同等级的数据分析师有不同的要求。为此,小编在这整理了一日常工作中大家必知必会的Excel技巧,也不是很高深难懂,大家认真看完应该都能学会!
一、数据分析师必知必会的Excel快捷键
1、「Alt + =」快速求和
还在傻傻地用SUM求和吗?更快捷的方法是直接选中整列/行数据,然后快捷键「Alt + =」求和结果就直接出来了。
2、「Ctrl + ~」显示所有公式
有时候发现数据出现了异常值,想查看公式有没有输错,一个个看又太麻烦,怎么办?快捷键「Ctrl + ~」(1左边的那个键),直接就可以上所有数据背后的公式显示出来啦。
3、快速设置单元格格式
配合Ctrl、Shift键加上键盘数字可以快速设置单元格格式:
4、快速找出列与列之间差异数据
想要快速找出两列或者多列之间的差异数据,怎么办?快捷键「Ctrl + 」即可解决:
5、「Ctrl + Shift+方向键」快速选择连续单元格
经常看到一些Excel小白选个数据拿鼠标拖了老半天,不小心手抖还得重新来过,真为他们捏把汗!其实,只要活用「Ctrl + Shift+方向键」就可以快速选择连续单元格啦:
6、「Shift + F8」快速选定不连续的单元格
前面提到了快速选择连续单元格的快捷键,那不连续单元格呢?「Shift + F8」啦,更容易使用,按一次之后想点哪里就点哪里,不用按「Ctrl」键按到手酸了。
二、数据分析师必知必会的Excel实用技巧
1、快速删除空白行
有时候从数据库或者其他地方抓取的数据会出现很多空白行,怎么快速删除呢?先「选中所有数据」,然后「Ctrl + G」调出定位条件,选择「空值」,最后右键删除即可。
2、在指定区域输入相同内容
有时候一个数据要输入到指定区域中,怎么快速输入呢?「Ctrl + G」定位区域单元格,然后输入内容,最后按「Ctrl + Enter」键即可。
3、分列
有时候从网上抓取过来的数据太过杂乱,各种数据类型糊在一起,怎么把他们分开呢?可以使用Excel中的「分列」功能:
4、快速创建数据图表
俗话说:“字不如表,表不如图”。做数据报告的时候最不能缺的就是图,哪个领导有兴趣看着那干巴巴的数据表,你说是吧。那怎么创建数据图表,一秒钟让数据表变成数据图呢?只需要一个「F11」键。
5、Excel转换成PDF
最后说个比较常用的:Excel转换成PDF。为什么Excel要转换成PDF呢?首先,PDF更易于打印,不会出现各种排版问题。其次,由于Excel版本的兼容性问题,常常会出现到另外一个电脑上打开,图表就变了样!再者,开评审会的时候,用PDF来展示图表数据也比Excel好看的多。那怎么将Excel转换成PDF?借助个在线转换工具就很简单,我常用的是「在线迅捷PDF转换器」。
OK,关于数据分析师不得不知的Excel技能我们就先说到这,当然上面所讲这些都只是最基本的!想月入过万单单、凭这几招是不行的!以后小编会继续教大家更多你不知道的技能,敬请关注!
-
?
作为数据分析师,用的最多的竟是Excel表格
法马古斯塔
展开
【摘要】:结合实际数据分析工作,简要介绍了VLOOKUP函数的基础应用,重点介绍亲测高效有难度的VLOOKUP函数高级应用。最后分享我运用Excel的一点技巧。
毕业后,第一份工作是在一家互联网公司做数据分析。
尽管和所学专业没那么匹配,但我还是挺满意。因为向来对数字很敏感,对常用统计软件也都有所了解。
正式入职,发现面试时说的什么SPSS,Eviews统统都不用,基本就是用Excel。对于研究生毕业,第一份工作,我多少有些落差。既来之则安之,我心想用什么工具最方便,工作中应该可以自己选择。对于word和ppt还算熟练,Excel也就一般。多学点总不会差。
开始工作,我发现Excel的功能简直太强大,我之前了解的仅是皮毛。尤其在更新到2013版后,操作更智能和快捷,数据量大时计算较费时。对于日常工作影响倒不大,借助Excel我的数据分析工作也很快上手。
除了宏不太会,工作之余也会多琢磨一些公式和操作。以至于同办公室的同事,甚至外部门的同事都来找我帮忙解决Excel的问题。时间久了,领导特意让我在部门内部定期做教学分享。
我确实喜欢和数据打交道的感觉,从冗杂的繁琐数据中分析出最终的结果相当有成就感。在简书上也看到了许多实用的Excel操作指南或技巧。
今天分享一个职场中最常用,功能强大,却少有人掌握的VLOOKUP函数。很多文章都提到过这个函数的基础应用,此外还有一个高级应用,是我在工作中遇到,亲测高效快捷的有力工具。
VLOOKUP函数---最最最常用的查找函数
四个必备参数=(要查找的值,要查找的区域,返回数据在查找区域的第几列数,逻辑值)
注: FALSE或0,则返回精确匹配,如果找不到,则返回错误值 #N/A(首选)
TRUE或1,则返回近似匹配值,如果找不到,则返回小于第一个参数的最大值。
VLOOKUP函数的基础应用:一对一的匹配
理解上述文字很晦涩,用实例来说明。
例1: 下图中左表为源数据:各类产品在三个城市的日销售数据。
需求:查询产品B和F在上海的销售额。
因为提供的数据量很少,人工查找就能完成。但实际工作中数据量很庞大,人工查找费时费力且准确率低。这时用VLOOKUP一秒搞定。
做法:在G2单元格内,输入公式,见红框内。回车后,出现结果;将公式复制或下拉至G3,同理可得结果。
参数解释:
(1)“F2”为我们要查找的参照值,即在源数据第一列查找“产品B”。当公式下拉复制时,自动切换为查找F3。
(2)“A:C”指我们要在此范围内查找数据。该参数也可写为“$A$2:$C$9”,即绝对引用。这样可保证无论公式如何拖拽复制,数据源始终固定引用该区域。
(3)参数“3”指在选择的数据源“A列-C列”范围内,要查询的销量在引用的第三列,即C列。
(4)FALSE,即精确查找。
这样,通过应用该函数,实现了产品型号和销量一对一的匹配查找。
应用该公式的硬性条件:
(1)必须保证需要查找的参照值与源数据格式一致。
即例1中:F列与A列完全一致,不仅内容相同,尤其保证单元格格式一致,否则只会返回错误值 #N/A。如不一致,查找前需转换成一致的格式。有时较难分辨。
(2)必须保证源数据表中的第一列没有重复项。
即A列中没有出现重复的产品类型。假如源数据中出现了多行“产品B”,那么在查找时只能返回第一次“产品B”出现时对应的销量。
当(2)无法满足时,查找不再是一对一,而是一对多的匹配。需要对VLOOKUP函数进行扩展才得以实现查找功能。
VLOOKUP函数的高级应用:一对多的匹配
例2:下图左表为客服中心的每日工作记录,日积月累,这个表数据量庞大且信息冗杂。
需求:王丹和张鹏岗位变动,需将他们接待过的全部客户汇总转交其他同事维护。
数据量小手动筛选即可,使用透视表也可完成。这里我借助简单的例子,介绍如何使用VLOOKUP完成。当数据量庞大,这是较便利的方法。
做法:
第一步:将A列排序,在A与B列间新插入两列。
第二步:计数。在B2输入公式=COUNTIF(A$2:A2,A2),回车,下拉即可。
目的是对A列中同一个名字的出现次数进行计算。如图李珊出现了四次。
第三步:构建辅助列。在C2输入公式=A2&B2,回车,下拉即可。目的在于将A列B列的内容合并。这时C列即为辅助列。保证了源数据的唯一性,此时已满足VLOOKUP基础应用的第二个硬性条件。
第四步:进行匹配查找。在H2输入公式=VLOOKUP($G2&H$1,$C$2:$D$18,2,FALSE), 复制公式至其他单元格即可得到结果。
与基础应用相比,仅参数1有变化,涉及相对引用和绝对引用问题。
参数1:将“客服姓名&序号“合并作为第一个参数。公式向右向下复制后,“客服姓名”行变列不变,所以锁定列。“序号”列变行不变,所以锁定行。即为:“$G2&H$1”。锁定即绝对引用。(此处较难理解,操作中通过尝试能够理解透)
参数2:绝对引用C2至D18区域。即为:“$C$2:$D$18”,新数据源。
参数3:返回所选区域C2至D18中的第2列数据。即为:客户姓名
参数4:FALSE,即精确查找。
第五步:将H2中的公式向下向右复制至K3,即得全部结果。可对比源数据表验证是否正确。
在序号为4的单元格内出现了#N/A值。表明没有找到“王丹4”和“张鹏4”对应的内容,说明这两人接待的客户仅有3人。
这样,通过其他功能辅助,实现了客服与客户一对多的匹配查找。
总结:VLOOKUP的高级应用是在基础应用的基础上,借助了COUNTIF和&函数,构建辅助列,使得源数据表中第一列无重复。四个必备参数中仅参数1涉及绝对引用和相对引用,略有难度。
应用Excel的技巧
1.填充了公式的单元格,在得到结果后,最好将计算结果转换为“值”。
两个好处:一是避免源数据的任何变动再次影响公式的计算结果;二是Excel本身计算较费时。如公式一直存在,每次打开该文件,或是刷新时都会重新计算,严重影响Excel运算速度。
2.Excel的数据承载量相对较小。2013版每个sheet能够填充接近105万行。
如果涉及较多sheet,数据量可想而知。因此在上一条的基础上,必须及时保存,否则数据量大时Excel难免会出现重启。毕竟多数人用的都是免费版,为了避免做无用功,及时保存很重要。这可是次次抓狂的经验教训。
3.Excel的功能很丰富,没有哪一本书或是哪一个老师能够完全教会所有功能。
更实际的是,从点到面去学习。比如说我介绍了VLOOKUP函数的应用,其中涉及到了绝对引用的概念,以及countif函数的应用,这时就引导你去学习新知识。
任何功能的组合都能起到耳目一新的作用。
4.Excel做不到死记硬背,多练习才利于掌握。
比如说,在工作中我给同事教过无数次VLOOKUP函数的应用,当时似懂非懂,勉强会用。想不到的是他们下一次遇到早已忘得一干二净。在我看来是很简单的一个公式而已,仅需掌握四个参数。关键是他们不常用,而我几乎天天用。
任何技能都是如此。孰能生巧,才能更快掌握更多功能。哪怕是多记几个快捷键,都会为你使用Excel加分不少。
多学一点技能,就能少求助别人,且让别人来求助于你。普通离优秀,永远差一项技能。
写出来为分享,也为记录。
PS:如果没有看懂,或是觉得现在用不到我介绍的公式。没关系,请收藏,因为工作后,无论做什么工作一定一定一定会用到VLOOKUP。
请尊重原创的辛苦。欢迎分享,欢迎交流。
-
?
EXCEL数据分析师常用操作技巧
雪卉
展开
快捷键
Excel的快捷键很多,以下主要是能提高效率。
Ctrl+方向键,对单元格光标快速移动,移动到数据边缘(空格位置)。
Ctrl+Shift+方向键,对单元格快读框选,选择到数据边缘(空格位置)。
Ctrl+空格键,选定整列。
Shift+空格键,选定整行。
Ctrl+A,选择整张表。
Alt+Enter,换行。
Ctrl+Enter,以当前单元格为始,往下填充数据和函数。
Ctrl+S,快读保存。
Ctrl+Z,撤回当前操作。
如果是效率达人,可以学习更多快捷键。Mac用户的Ctrl一般需要用command替换。
格式转换
Excel的格式及转换很容易忽略,但格式会如影随形伴随数据分析者的一切场景。
通常我们将Excel格式分为数值、文本、时间。
数值常见整数型 Int和小数/浮点型 Float。两者的界限很模糊。
文本分为中文和英文,存储字节,字符长度不同。
时间格式在Excel中可以和数值直接互换,也能用加减法进行天数换算。
时间格式有不同表达。例如2016年11月11日,2016/11/11,2016-11-11等。当数据源多就会变得混乱。我们可以用自定义格式规范时间。
数组
数组很多人都不会用到,甚至不知道有这个功能。。
数组由多个元素组成。普通函数的计算结果是一个值,数组类函数的计算结果返回多个值。
数组用大括号表示,当函数中使用到数组,应该用Ctrl+Shift+Enter输入,不然会报错。
先看数组的最基础使用。选择A1
1区域,输入={1,2,3,4}。记住是大括号。然后Ctrl+Shift+Enter。我们发现数组里的四个值被分别传到四个单元格中,这是数组的独有用法。
我们再来看一下数组和函数的应用。利用{},我们能做到1匹配a,2匹配b,3匹配c。也就是一一对应。专业说法是Mapping。
=lookup(查找值,{1,2,3},{"a","b","c"})
分列
Excel可以将多个单元格的内容合并,但是不擅长拆分。分列功能可以将某一列按照特定规则拆分。常常用来进行数据清洗。
上文我有一列地区的数据,我想要将市和区分成两列。我们可以用mid和find函数查找市截取字符。但最快的做法就是用“市”分列。
合并单元个格
单元格作为报表整理使用,除非是最终输出格式,例如打印。否则不要随意合并单元格。
一旦使用合并单元格,绝大多数函数都不能正常使用,影响批量的数据处理和格式转换。合并单元格也会造成Python和SQL的读取错误。
数据透视表
数据透视表的主要功能是将数据聚合,按照各子段进行sum( ),count( )的运算。
下图我选择想要计算的数据,然后点击创建透视表。
此时会新建一个Sheet,这是数据透视表的优点,将原始数据和汇总计算数据分离。
数据透视表的核心思想是聚合运算,将字段名相同的数据聚合起来,所谓数以类分。
列和行的设置,则是按不同轴向展现数据。简单说,你想要什么结构的报表,就用什么样的拖拽方式。
删除重复项
一种数据清洗和检验的快速方式。想要验证某一列有多少个唯一值,或者数据清洗,都可以使用。
条件格式
条件格式可以当作数据可视化的应用。如果我们要使用函数在大量数据中找出前三的值,可能会用到rank( )函数,排序,然后过滤出1,2,3。
用条件格式则是另外一种快速方法,直接用颜色标出,非常直观。
冻结首行首列
Excel的首行一般是各字段名Header,俗称表头,当行数和列数过多的时候,观察数据比较麻烦。我们可以通过固定住首行,方便浏览和操作。
Header是一个较为重要的概念。在Python和R中,read_csv函数,会有一个专门的参数header=true,来判断是否读取表头作为columns的名字。
自定义下拉菜单(数据有效性)
数据有效性是一种约束,针对单元格限制其输入,也就是让其只能固定几个值。下拉菜单是一种高阶应用,通过允许下拉箭头即可。
自定义名称
自定义名称是一个很好用的技巧,我们可以为一个区域,变量、或者数组定义一个名称。后续要经常使用的话,直接引用即可,无需再次定位。这是复用的概念。
我们将A1:A3区域命名为NUM
直接使用=sum(NUM) ,等价于sum(A1:A3)。
查找公式错误
公式报错也不知道错在哪里的时候可以使用,尤其是各类IF嵌套或者多表关联,逻辑复杂时。查找公式错误是逐步运算的,方便定位。
分组和分级显示
分组和分级显示,常用在报表中,在报表行数多到一定程度时,通过分组达到快速切换和隐藏的目的。越是专业度的报表(咨询、财务等),越可以学习这块。在数据菜单下。
分析工具库
分析工具库是高阶分析的利器,包含很多统计计算,检验功能等工具。Excel是默认不安装的,要安装需要加载项,在工具菜单下(不同版本安装方式会有一点小差异)。
分析工具库是统计包,规划求解是计算最优解,类似决策树。
内容来源:网络整理
百家号-【袁帅数据分析运营】运营者:袁帅,互联网数据分析运营实践者。会展业信息化、数字化领域专家。认证数据分析师、网络营销师、SEM搜索引擎营销师、SEO工程师、电子商务职业经理人。
excel数据分析师
-
1、只需3秒快速实现求和
-
2、如何快速填充序号
-
3、如何自动填充序号(公式法)
-
4、数据条的神奇应用
-
5、多文本快速合并
-
6、查找与替换的不同玩法
-
7、快速定位到指定区域
-
8、数据排序、工资条制作
-
9、快速筛选(模糊、精确筛选)
-
10、快速插入空行
-
11、快速删除空行
-
12.快速跳转到天涯海角
-
13、.同时查看两个Excel文件
-
14、用条件格式扮靓报表
-
15、一键插入Excel图表
-
16、批量处理行高、列宽
-
17、利用拆分功能查看数据
-
18、批量录入相同内容
-
19、工作表快速跳转
-
20、批量录入表格模板(精品课程)
-
21、Excel函数与公式的应用、公式循环引用的查找
-
22、IF函数单条件判断同比增长
-
23、用sum函数 格式相同,连续多表数据汇总
-
24、excel快捷键
-
25、VLOOKUP函数——根据销售员匹配销售额
-
26、统计各部门销售总额
-
27、统计指定条件个数
-
28、怎样输入当前日期和时间、星期数
-
29、销售业绩排名
-
30、Sumproduct函数-万能函数(销售额汇总求和)
-
31、根据销售员,地区,商品名称汇总
-
32、批量替换PPT字体
-
33、给销售额数据批量添加万元单位
-
34、一秒快速核对两列数据
-
35、快速定位到指定单元格或区域
-
36、快速制作双行标题工资条
-
37、给你的表格做个瘦身
-
38、快速打开常用的Excel文件
-
39、快速打开多个Excel文件
-
40、利用创建组—快速隐藏/展开多列数据
-
41、快速制作下拉菜单
-
42、复制粘贴表格,如何保留数据源列宽格式一致?
-
43、两列数据位置互换
-
44、1秒钟扮靓报表——如何实现表格隔行换色
-
45、快速删除重复记录——保留唯一值
-
46、快速向下填充、向右填充,文本或公式
-
47、给Excel文件添加密码
-
48、插入带图片的批注
-
49、输入公式后不计算?
-
50、如何设置单元格缩进
-
51、快速解决Excel表格总显示货币格式
-
52、批量添加万元单位
-
53、你会四舍五入么?
-
54、用RAND函数机选彩票
-
55、冻结首行你会么?
-
56、超链接的高级应用
-
57、IFERROR函数-屏蔽错误值
-
58、批量填充颜色
-
59、录入数据
-
60、快速输入工号
-
61、快速行列转置
-
62、自定义缩放界面
-
63、多个单元格同时输入
-
64、如何计算立方米?
-
65、快速制作双行标题工资条
-
66、输入带方框的√和×
-
67、快速将姓名对齐
-
68、快速输入性别
-
69、按单位职务排序
-
70、自动计算合同到期日期
-
71、计算时间间隔
-
72、日期和时间的拆分
-
73、快速处理不规范的日期格式
-
74、快速填充合并单元格
-
75、效率加倍的快捷键
-
76、快速复制表格和对象
-
77、快速创建工作表副本
-
78、快速复制序列号
-
79、快速显示公式
-
80、多个单元格同时输入
-
81、快速调整显示比例
-
82、快速自动填充
-
83、快速填充(Ctrl+E)
-
84、Ctrl与数字键结合
-
85、快速将多列数据整理为1列
-
86、快速将1列数据拆分为多列
-
87、快速定位公式
-
88、快速录入数据
-
89、快速累计求和
-
90、身份证号码显示为0怎么办?
-
91、快速制作斜线表头
-
92、文本竖向显示
-
93、神奇的监视窗口
-
94、不一样的格式刷
-
95、快速美化图表
-
96、快速生成当前日期
-
97、快速找出循环引用
-
98、快速提取信息
-
99、二维表快速转换为一维表
-
100、快速多表合并