两年车间技术员转型大数据开发,说说转型这点事儿

黄晓明(化名)是我学习群的一个小伙伴,同时也是我大学的直系学长,都是车辆工程专业。不过我比他比较早脱离苦海,他是从事两年车辆设计行业才转型的。在6月份找的我规划学习路线,8月份就收了联想等offer了,可见学习毅力之强大,目前在广州的某大型银行做大数据开发。


<br />
<br />折腾转型,我不要你觉得,我要我觉得 --黄晓明<br />
<br />
<br />大家好,我是黄晓明。喜欢汽车,车辆专业,正在做数据开发,自己都感到很意外。

转型之前的迷茫<br />
<br />时间线拉到2017年,刚读完车辆工程专业进入主机厂做技术员。两年之后,忍痛离开这个行业。缘由说起,当时选择这一专业主要原因是兴趣所在,其它原因是所谓的朝阳行业。当然,现在步入黄昏。<br />初步接触编程是在15年下半年,进了智能车辆实验室,那个暑假我开始看机器视觉的大部头,开始做运动控制和视觉导航。然而毕业后,却校招进了一家主机厂做技术员,好像两年实验室经历打水漂了。<br />初入职场,刚开始的新鲜劲让我过得很天真,以为按部就班慢慢学习技术就会越老越值钱,后面才明白这不过是理想化的状态。半年后,日复一日的闲散和国企让我开始陷入纠结和准备逃离。

转型之时的准备<br />
<br />考虑到以后的定居城市,老家这一岗位的前景和大城市的发展机会。于是,兜兜转转,我又回到了开发路上,这次是数据开发。<br />和大多数人一样,我开始在网络上了解信息,寻找相应的资源。比如,徐培成的大数据视频,开始边看视频边动手装软件配置开发环境。这一轮视频学习下来,对大数据的部分内容有了初步印象,也局限于此。<br />前后用了两个月时间,当然,在这当中遇到了很多bug。之后开始看JAVA的书籍,从入门到放弃等,一部部的大部头看完了就忘了,根本没有转化为内在知识。之后又开始学习小甲鱼的Python视频,看廖雪峰老师的博客,自身收获不多。现在来看,这些内容都是打一枪换一个地方,啥鸟都没抓住。<br />偶然,在大数据交流群看到锋哥的文章,就关注了大数据肌肉猿这一公众号开始接触里面的内容,真正走上转型的正轨,对大数据的学习进行了完整的规划和核心内容的主攻,在将近两个月的学习之后,我开始投递简历并进行面试。

萌新一枚,处处被拒<br />七月底,我觉得已经准备足够(面试官并不觉得),写好简历开始投递,面试的是数据开发岗位。看着自己在招聘平台上投出的简历只有五分之一的查看,十分之一不到的面试邀请,我的心都凉了半截,开始有些质疑自己。<br />
<br />直到第一次,我收到重庆一家公司的电话面试,简单问了我:<br />1、数据仓库的知识点<br />2、Hive的连接类型<br /><br />电话结束前面试官问我是否能到重庆的某银行的现场进行面试,我回复说要两星期后才能过去之后便了无音讯。<br />之后在武汉现场面试了三家科技公司。其中一家是做信息安全的,主要问了:<br />1、ETL的整个流程和理论<br />2、针对简历问了Hive和MapReduce的调优<br />3、数据倾斜的解决。<br /><br />在对我的回答不太满意的情形下,最后象征性的问了Spark和Hadoop的区别。

一家是做数据服务的国企,面试现场先做了一套Hadoop笔试题:<br />1、HDFS如何保障数据安全;<br />2、MapReduce原理;<br />3、手写统计单词个数的MR程序;<br />4、设计计算框架高效统计10T数据中出现次数TOP10的数据;<br />5、Combiner的作用;<br />6、Hive、Hbase、Zookeeper、Pig的作用及特点;<br />7、对虚拟化的理解,用过的虚拟化工具及特点;<br />8、云服务的分类、云的分类,使用过的云管理平台;<br />9、用多线程的方式批量读取文件,写伪代码;写shell脚本转移大于10K的文件。<br /><br />搞笑的是:笔试了Hadoop内容,面试便开始问各种Spark的理论及其组件,当中还插播了Kafka的丢数据和重复消费的问题。结果就是以资历尚浅为由被拒。

第三家是良心想,在这方面主要做制造业大数据的开发服务。面试官针对简历开始问全部的项目经历、包括很早之前接触的FPGA和视觉算法,往后问到:<br />1、MySQL的引擎;<br />2、Zookeeper的Paxos协议;<br />3、sqoop的原理;<br />4、flume原理;<br />5、Hive的整体架构等。<br /><br />经历前几家的面试打底锻炼,虽然是同一批求职者中年纪最小的,却获得了最高的评分拿到offer(但是价格没谈拢)。

幸运加持,打怪升级<br />
<br />由于我是个吃货,惦记着美食便把目光投向了广州,一家大型银行,最先进行的是IKM的全英文线上测试(APACHE HADOOP FRAMEWORK),达到标准之后开始准备面试,主要是Kafka的相关内容和口语。<br />第一轮出现视频面试闹了场乌龙,面试官以为我可以做运维但是我没能回答上大部分问题便转了其它面试官。于是有了第二轮面试,主要问了:<br />1、kafka丢数据的定位和处理;<br />2、kafka streams的原理;<br />3、flume的source配置等。<br /><br />踩了一点幸运,拿到了offer,选择了入职。在新环境的一个月里,作为实打实的菜鸟一枚,两星期的培训和观摩之后,我开始接触到项目和业务,写点ETL脚本和Python,然而同事说的粤语里只能听懂Kafka,英语里还是只能听懂Kafka。

深深感受到自己多么的菜,但是还得硬着头皮上。业余时间学技术、学英语,直到每晚被保安赶回去,循环往复。

一点点感想
<br /><br />1.找一位相关行业的前辈作为你的教练,很重要。他们能给你方向上的建议以及适当的学习资料,更重要的是能坚定你转型的决心。<br />
<br />2.书本看了三四遍还是容易忘,实操流程畅通但是不知所以然,要是把二者相结合,效果会更好

3.一定记得迎合市场,别迷恋在自己的世界里,多出去面面。

4.在折腾转型的路上,深有体会:我要你觉得,不要我觉得。走在不那么亮堂的路上,自己觉得的路,可能是个深坑。多请教多交流,要你我都觉得。

---end---

本文由博客一文多发平台 OpenWrite 发布!

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,607评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,047评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,496评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,405评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,400评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,479评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,883评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,535评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,743评论 1 295
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,544评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,612评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,309评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,881评论 3 306
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,891评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,136评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,783评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,316评论 2 342

推荐阅读更多精彩内容