从金融行业转型大数据，一路学习点滴的分享！
大数据学习之路，很漫长，但是请放心，Java 转大数据很轻松，零基础学大数据也很轻松，我会陪着你们一起搞起来，干就完事了。 本篇文章有点长，都是我的真实感受。分为：开始、转折、成长、New Flag、关于此号、推荐、总结七个部分。 开始 我大学学的是软件工程专业，2018 年毕业。据统计，近几年毕业生中平均薪资最高的专业就是软件工程！还好我没有拉低平均水平，凭借自己努力和运气毕业去了一家金融大厂（杭州）实习。 我所在的部门是最挣钱的部门--资管，我们的系统覆盖了全部的金融业务，除了保险业务。每天完成正常的任务之后，也学了很多金融的业务，在这里奉劝大家不懂股票的小白，千万不要入市。这个行业，水太深了。具体的东西就不说了。我自己整理的一份最新的大数据进阶资料和高级开发教程，大数据学习群：522189307欢迎进阶中和进想深入大数据的小伙伴加入。 转折 虽然金融行业薪水可观，但是限于技术老套，甚至还在使用delphi。做了一段时间之后，发现不适合自己，由于就有了离职的想法。去年经济大形势不大好，于是也不敢轻易裸辞。此时的心情是：不甘心就这样下去。 当时还不确定之后要走什么方向，看我公众号的改名记录就知道了，但是脑子真的一团糟！ 2018 的 3 月 5 号，我给自己定了一个 Flag，下面是在码农翻身的知识星球里面发的半年目标。此时斗志满满。 事实证明，四个月业余时间学大数据是不够的，坚持下来，时间超出了预期。Hadoop 生态 和 Spark 生态以及数据仓库，数据建模，机器学习等等。有些资料来自于网上，还有来自一些教育机构的资料，剩下的可以从官网上找到文档。 看完了《大型网站架构》、《深入理解Java虚拟机》这两本书，《图解HTTP》耽搁下了。毕业旅行也带女朋友去了，只不过没去四川，去了北京，天津，济南和青岛。 关于大数据方面的书籍，我看了《离线和实时大数据开发实战》、《数据仓库结构设计与实施》、《Spark技术内幕》、《推荐系统实践》。挑重点部分看的，结合自己学的技术进行消化。 这个过程中，我听得最多的是 Beyond 的歌。坚持不下的时候就打开音乐，听一会再接着学。日日夜夜，也曾怀疑自己。 成长 直到目前，写的文章数量不是很多，等到达一定里程碑的时候，我会专门整理成一系列目录的。目前的文章，暂且列一下： 简述大数据技术 什么是数据仓库？谈谈我的理解 PageRank算法，搜索引擎的关键技术 Sqoop不完全实战 Flume原理，分析，架构 kafka简介、架构、安装 Kafka遇上SparkStreaming Kafka的数据丢失和重复消费 HBase架构分析 HBaseRowKey设计 HBase数据模型，体系架构，组件功能说明等总结 Hbase在微博中的表设计，部分 Zookeeper的恢复模式，广播模式，选举流程 HadoopHA深度解剖 Spark调优整合篇-汇总（长文） Spark的数据本地化，提供最佳的计算节点，终于入门了 Spark调优一瞥|shuffle调优 Spark的shuffle文件寻址流程 从收集数据，集群分析数据，BI展示 Flink干货来袭|FlinkForwardChina2018大会资料整理 上面是 2018 年忙里偷闲写的 20 篇关于大数据技术的文章。 New Flag 2019 我也给自己定下了几个目标，其中一个就是更新数量以及频率要提上去。每篇文章尽量短而有用，给大家把大数据讲清楚，这个任重而道远啊。 2018 年，转折。2019 年，蜕变。 三个原则：自我激励，自我认知，自我驱动。 加入合适的圈子，比如「码农翻身」、「帅张和他的朋友们」。 离开舒适区，不能回避痛苦。 刚来上海一周，面试了两家公司。有一个给了 offer，年薪 23 w 对于刚毕业的我来说，比之前的金融岗位少，不过可以接受。那个公司我挺喜欢的，自身发展空间大一些。数据平台要从头开始创建，部门整合为中台大数据部门。 目前我还没有入职，打算继续面试。 未来的计划，「坚持」、「用心」完成每一篇文章，能帮到大家最好了。
