导航
  • 报考
  • 备考
  • 政策

报考

备考

复习资料

政策

行业动态

数据分析师课|新公布的7个敏捷数据科学的宣言,这些细节千万不能忽略

环球网校·2020-03-30 10:11:02浏览67 收藏20

请输入下面的图形验证码

提交验证

预约成功

我知道了
摘要 在茫茫的数据发展长河中,人们慢慢掌握了数据处理的方法,其中重要的处理方法之一就是对数据的分析,所以出现了数据分析师这一处理数据的职业,有很多刚入职成为数据分析师的新人都会有数据分析的问题,今天就来讲讲敏捷数据科学的宣言的问题。

1、敏捷数据科学的宣言——迭代,迭代,迭代

经过连续几十次的查询才会得出见解,别指望一上手就能有所发现。数据表必须经过分析、格式化、分类、集合和总结,才能被理解。通常要到第三次或者第四次尝试才能得出具有深刻见解的图表,而不会是第一次。建立准确的预测模型需要经过特征工程和超参数调节的很多次迭代。在数据科学中,迭代是洞见获取、可视化和产品化的基本要素。要构建产品就必须进行迭代。

2、敏捷数据科学的宣言——交付中间产品

迭代是创造分析应用的必要之举,这意味着我们在最后的冲刺阶段常常发现东西还不够完善。如果我们到了这个阶段还没有交付过半成品或中间产品,最后常常就会没有任何东西可交付。这不是敏捷,我称之为“死循环”,浪费无数的时间用于完善没人想要的东西。

好的系统是自文档化的,用敏捷数据科学的话说,我们记录和分享我们创造的不完整资产。我们完全致力于源代码管理。我们跟同事并尽可能快地跟终端用户分享这一成果。这个原则并不是对所有人都显而易见。很多数据科学家拥有学术背景,多年的努力研究最终变成一篇学位论文。

3、敏捷数据科学的宣言——开展实验,而不是执行任务

在软件工程中,产品经理在冲刺期间把一张图表交给一位开发人员去实现。这位开发人员把任务转换成一个SQL GROUP BY,并制作出一个网页。任务完成了?错。以这种方式拟定的图表不可能有价值。数据科学不同于软件工程,因为它是科学和工程兼而有之。

在任何特定的任务中,我们必须通过迭代以获得洞见,实验是对这些迭代的最好诠释。管理一支数据科学团队相当于管理多个同时发生的实验,而不是分派任务。好的资产(图表,报告,预测)是探索性数据分析的产物,因此我们必须从实验而不是任务的角度来思考。

4、敏捷数据科学的宣言——倾听数据的声音

可能性与目标性一样重要。知道什么容易什么困难与期望一样重要。在软件应用开发中,有三个视角需要考虑:客户的视角,开发人员的视角,企业的视角。在分析应用开发中,还有另一个视角:数据的视角。如果不了解数据对特征的“看法”,产品拥有者就无法有良好的表现。数据的意见必须始终囊括进产品讨论中,这意味着产品讨论必须根植于在成为我们努力焦点的内部应用中通过探索性数据分析实现的可视化。

5、敏捷数据科学的宣言——尊重数据价值金字塔

数据价值金字塔(下图)是一个基于马斯洛需求层次理论的五级金字塔。它描述了把原始数据精炼成图表、报告和预测时创造出来的价值增量。不管是记录还是预测,都是为了促成新的行动,或者改善现有的行动:

数据价值金字塔的第一级(记录)是管道工程:让数据从收集处流向在应用中出现的位置。

第二级(图表)是开始精炼和分析的层级。

第三级(报告)是对数据的深入探索,我们能真正弄懂数据背后的含义。

第四级(预测)创造了更多的价值,但准确的预测意味着更低层级所包含和促进的特征工程。

最后一级(行动)是人工智能(AI)大放光彩的地方。如果你的洞见无法促成新的行动或者改善现有的行动,就没有多大价值。

数据价值金字塔使我们的工作有了结构。这个金字塔是我们应该记住的东西,但不是严格遵循的原则。有时可以跳过一级,有时可以后退一级。如果你把一个新的数据集直接放入预测模型作为一个特征,但没有添加进更低层级的应用数据模型中,未能使这个数据集透明和可访问,那么你就会欠下技术债。你应该牢记这一点,一有机会就还债。

6、敏捷数据科学的宣言——找到关键路径

为了尽量提高成功几率,我们应该把大多数时间用于对成功最重要的方面。但哪些方面对成功最重要?这必须通过实验来发现。开发分析产品是对移动目标的搜索和追求。

一旦确定目标,比如要作出一个预测,我们就必须找到实现的关键路径,如果证明是有价值的,还必须找到改善的关键路径。在从一个任务流向另一个任务的过程中,数据被一步步精炼。分析产品常常需要多个阶段的精炼,并运用ETL(提取,转换,加载)过程、统计技巧、信息访问,机器学习,人工智能和图形分析。

这些阶段的相互联系构成了复杂的依赖网。团队领袖要把这个网放在心上,他的职责就是确保团队发现关键路径,然后组织团队落实这条路径。产品经理无法自上而下地管理这个过程,而是必须由产品科学家自下而上地发现它。

7、敏捷数据科学的宣言——获得元

如果不能像开发普通的应用那样,轻松地按时交付好的产品,那我们交付什么?如果什么也交付不了,就不能号称敏捷。为了解决这个问题,在敏捷数据科学中,我们应该“获得元”。重点是记录分析过程,而不是我们寻求的最终状态或者产品。这可以让我们在反复攀爬数据价值金字塔,寻找杀手级产品的关键路径时,变得更加敏捷,可以交付中间产品。那么,产品从哪里来?来自面板。我们通过记录探索性数据分析,创造了这个面板。

以上就是有关于敏捷数据科学的宣言的相关内容,以及相应的解析,不论你是已经入职数据分析师岗位的新人,还是打算进入数据分析岗位的小白,以上的内容都或多或少会对大家有所帮助,环球网校的小编在这里祝大家的数据分析师职业道路顺利。

展开剩余
资料下载
历年真题
精选课程
老师直播

注册电脑版

版权所有©环球网校All Rights Reserved