大数据分析之5种类型的数据科学项目
沉沙 2018-10-29 来源 : 阅读 1400 评论 0

摘要:本篇教程介绍了大数据分析之5种类型的数据科学项目,希望阅读本篇文章以后大家有所收获,帮助大家对大数据云计算大数据分析的理解更加深入。

本篇教程介绍了大数据分析之5种类型的数据科学项目,希望阅读本篇文章以后大家有所收获,帮助大家对大数据云计算大数据分析的理解更加深入。

<

  一年一度的秋招已经打响了发令枪,从去年的薪酬排行来看,算法工程师和数据分析等工作排在前列,很多相关专业的学生一直在自学一些网络上的公开课并阅读一些专业书籍,比如“西瓜书”、“花书”等,如果你现在仍然什么也没有准备的话,然而还想从事数据科学领域这个似乎令人望而生畏的工作话,现在就要抓紧补补相关的知识了。在这里要提示一点,自我完善的知识不要局限于数据分析相关的知识,还要额外补充下相关领域的知识。另外,简历上展示个人技能的最佳方式是使用技能组合的形式,这样能让雇主相信你可以使用你已经学习的技能。为了展示这些技能,以下是你应该着重补充的5种数据科学项目组合类型:

  1.数据清理

  数据科学家预计在一个新项目的清理数据处理上花费多达80%的时间,这对于团队来说是一个巨大的代价。如果你可以证明你在数据清理方面经验丰富,那么你将立即变得更有价值。练习这项能力的方法是创建一个数据清理项目,找到一些混乱的数据集并开始进行清理。


  如果你使用Python语言进行编程,那么Pandas是一个很好用的库,如果你使用R语言编程,那么你可以使用dplyr数据包。你实践的数据清洗项目应该确保展示以下技能:

  导入数据

  加入多个数据集

  检测缺失值

  检测异常

  输入缺失的值

  数据质量保证

  2.探索性数据分析

  数据科学的另一个重要方面是探索性数据分析(EDA),这是一个生成问题并用可视化方法对其进行调查的过程。 EDA允许分析人员从数据中得出结论来推动业务影响,它可能包括基于客户细分的有趣洞察,或基于季节效应的销售趋势。通常你可以通过探索性数据分析来得到一些有趣的发现。


  用于探索性分析的一些有用的Python库有Pandas和Matplotlib。对于R用户而言,ggplot2软件包将会很有用。你实践的EDA项目应该显示以下技能:

  能够制定相关的调查问题

  识别趋势

  识别变量之间的协变

  使用可视化有效地传达结果(散点图,直方图,饼图等)

  3.交互式数据可视化

  交互式数据可视化包括诸如仪表板之类的工具,这些工具对于数据科学团队以及更多面向业务的最终用户都是很有用的。仪表盘允许数据科学团队进行协作并共同绘制见解。更重要的是,它们为面向商业的客户提供了交互式工具,这些人专注于战略目标而不是技术细节。数据科学项目的交付成果往往以仪表板的形式出现。


  对于Python用户而言,Bokeh和Plotly库是非常适合用来创建仪表板的。而对于R用户,可以使用RStudio的Shiny软件包。你实践的仪表板项目应该强调这些重要技能:

  包括与客户需求相关的指标

  创建有用的功能逻辑布局(易于扫描的“F模式”)

  创建最佳刷新率

  生成报告或其他自动操作

  4.机器学习

  机器学习项目是数据科学产品组合的另一个重要组成部分。现在,在开始进行一些深度学习项目之前,请保持耐心。不要一开始就构建复杂的机器学习模型,而要坚持从基础知识开始学起。线性回归和逻辑回归是很好的开始,这些模型更容易解释并能清晰地与上层管理人员沟通。此外,我还建议专注于具有业务影响的项目,例如预测客户流失,欺诈检测或贷款违约等,这些比预测花型更实用。


  如果你是Python用户,请使用Scikit-Learn学习库。而对于R用户,请使用Caret软件包。你实践的机器学习项目应该传达以下技能:

  选择使用某个具体机器学习模型的原因

  将数据分成训练/测试集(k-fold交叉验证)以避免过度拟合

  选择正确的评估指标(AUC、adj-R ^ 2、混淆矩阵等)

  特征工程和选择

  超参数调整

  5.沟通

  沟通是数据科学的一个重要方面,对于工科人员而言这点尤其欠缺。能够有效地传达结果是区分优秀的数据科学家与伟大的数据科学家的重要衡量标准之一。无论你的模型多么华丽,如果你不能向队友或顾客解释它,你都不会得到他们的支持,就如同对牛弹琴一般。幻灯片和Notebook都是很好的沟通工具,可以将你的机器学习项目按照项目过程以PPT的形式展示,也可以使用Jupyter Notebook或RMarkdown文件进行沟通。


  确保了解你的目标受众是谁,向高管呈现的内容与向机器学习专家呈现的内容二者是完全不同的。确保具备这些技能:

  了解目标受众

  提供相关的可视化

  幻灯片不要写太多的内容

  确保演示文稿流畅

  将结果与业务影响联系起来(降低成本,增加收入)

  确保在Jupyter笔记本或RMarkdown文件中记录自己的项目。然后,也可以使用Github 免费将这些Markdown文件转换为静态网站。这是向潜在雇主展示个人技能组合的好方法,即GitHub主页或CSDN博客等。

  最后,在求职的道路上请保持积极的态度,作为应届生,不要被一次次面试、笔试所扰乱心态,请保持继续补充知识、练习项目并参加一些竞赛等。不要慌张,秋招过去,还有春招,春招过去还有社招,只要你一直努力提升自己,相信最终会有好的结果等着你,希望你能够快乐求职,并且在数据科学领域工作顺心。      
          

本文由职坐标整理并发布,希望对同学们有所帮助。了解更多详情请关注职坐标大数据云计算大数据分析频道!

本文由 @沉沙 发布于职坐标。未经许可,禁止转载。
喜欢 | 0 不喜欢 | 0
看完这篇文章有何感觉?已经有0人表态,0%的人喜欢 快给朋友分享吧~
评论(0)
后参与评论

您输入的评论内容中包含违禁敏感词

我知道了

助您圆梦职场 匹配合适岗位
验证码手机号,获得海同独家IT培训资料
选择就业方向:
人工智能物联网
大数据开发/分析
人工智能Python
Java全栈开发
WEB前端+H5

请输入正确的手机号码

请输入正确的验证码

获取验证码

您今天的短信下发次数太多了,明天再试试吧!

提交

我们会在第一时间安排职业规划师联系您!

您也可以联系我们的职业规划师咨询:

小职老师的微信号:z_zhizuobiao
小职老师的微信号:z_zhizuobiao

版权所有 职坐标-一站式IT培训就业服务领导者 沪ICP备13042190号-4
上海海同信息科技有限公司 Copyright ©2015 www.zhizuobiao.com,All Rights Reserved.
 沪公网安备 31011502005948号    

©2015 www.zhizuobiao.com All Rights Reserved

208小时内训课程