工作中使用的数据分析实践
我对数据分析感兴趣是因为做过烟草行业的统计应用项目,简单描述一下这个项目:将卷烟的产销存数据,通过实时采集,ETL、最终展现为决策制订的依据。在这个阶段,由于经常要与各种生产系统做数据比对,我积累了一些使用EXCEL做数据分析的经验。
在另一个运维项目中,要监测IBM WebSphere MQ集群不同节点的负载情况。我使用shell编写数据采集的工具,整理成csv格式,将csv导入到Excel,通过图表分析,得出监控结果,最终发现了项目在集群使用中,存在负载差异巨大的情况,通过这个工具,协助项目组改善了集群节点使用情况。
日常工作中,有一项工作是在巡检页面上监视一百多台主机的日志,为了节约生命,把有限的时间投入到更有意义的事情上,我使用Powershell将需要巡检的信息通过多次转化提取,自动将数据发送到EXCEL,通过EXCEL将最终的异常信息展示出来。
学习的动力
从上面的描述中,因为数据分析思维的确能够解决实际工作中的问题,提高工作效率,所以深入学习数据分析,更好的提高工作水平,对我来说是刚需。
上面介绍的数据分析实践虽然使用了数据分析,但是都是基于简单分析目标,数据量不够大,数据分析工具也只用到了EXCEL。而如火如荼的大数据分析,对我来说还是陌生的。我所希望能够处理更复杂的应用,更多的数据和使用主流的工具。
自己走,经常会走走停停,甚至放弃;加入社群,通过一群目标一致的人的互相激励和协助,意义更大,更有动力。非常感谢猴子同学能够组织起这么棒的大数据思维社群。这个群懂实践,会分享,非常难得。
数据分析学习计划
我的学习计划可以概括为:循序渐进,重视基础,重视实战。
以猴子同学提供的学习计划为主线,逐步深入了解数据分析的基础概念,通过《R语言实战》,掌握R语言在数据分析工作中的使用。
具体计划如下: