大数据修炼之路

大数据修炼之路

       大数据Spark是用Scala语言编写架构，因此，认真学习Scala是首选。Scala 是一种面向对象编程和函数式编程的多范式编程语言，和java有些不同又比java强大。下载了《Programming in Scala》，慢慢啃，虽然原汁原味，但是毕竟英文理解能力有限，有些非常专业的特性讲解还是一知半解，领悟不到要点，要参考中文版，这样啃一段又返回去看对应中文版加深理解，但是进度非常慢，甚是苦恼，有幸在51CTO上看到了王家林全免费的《Scala深入浅出实战初级入门经典视频》，

喜出外望，像久旱逢春雨，如获至宝，不禁恨自己后知后觉。虽然每天工作十分的繁忙，但还是会抽时间学习，只要工作一闲下来就在手机上观看学习王老师的视频，

发现王老师讲的都是结合源码案例，通俗易懂，实用明了，如沐春风，豁然开朗，比看书效果好了N倍，有些难点也很快逐个消化理解，自己一天一个脚印，学了初级后静下来思考总结了一天，然后继续中级课程的学习。从这些学习中能够看出新一代的高级语言提供了前所未有的抽象高度，同时还提供给我们开发者更人性的关怀。Functional Programming和OOP的结合、超级强大的Pattern Matching、类型参数、类型协变(+T与-T)、函数Curing、范型、更强大的闭包等。例如无比灵活的pattern match，核心其实是Companion Object（尽管不限于此），隐式的apply(构建) 与 unapply(解构) 方法，同时match可以返回各种类型值，使得 matching 的语法特别简洁，高效。王老师如一个睿智的使者，带领我穿越一个个大数据不眠之夜，欣赏大数据过度的各种奇光异彩，使我受益匪浅，收获越来越多，感觉自己如饥似渴，真是恨时不我待，对深入洞悉大数据Spark充满了更多殷切期待与无比渴望。

     大数据正当其道，是未来发展的重点方向，大数据战略也已在十八届五中全会上列为重点战略方向，中国在大数据方面才刚刚起步，但是各种新生力量异军突起，势如破竹，产生的价值与日俱增。当前，大数据与我们息息相关， 在大数据的应用领域，通过用户行为大数据分析用户个性数据，准确认知客户特性，能有效帮助企业提升相关业务(如精准营销/用户细分与市场推广)的经营价值，例如微信的定向推广，还有浏览器的推广的各种商品都是你最近一段时间浏览过的相近相关商品等，HiHunting大数据用户画像产品 帮助企业快速应用大数据洞察客户。。在国外已经产生了数千亿的市场价值，例如沃尔玛的搜索。这家零售业寡头为其网站Walmart.com自行设计了最新的搜索引擎Polaris，利用语义数据进行文本分析、机器学习和同义词挖掘等。根据沃尔玛的说法，语义搜索技术的运用使得在线购物的完成率提升了10%到15%。“对沃尔玛来说，这就意味着数十亿美元的金额。美国通用公司在飞机发动机的每一个零部件上都安装了传感器，这些传感器在飞机发动机运作的同时不断的把发动机状态的数据传到通用公司的云平台上，根据大数据的分析可以随时掌握每一家航空公司发动机的飞行状况，可以告知这些航空公司发动机的哪些部件需要检修或保养，避免飞机事故，通过这种服务通用公司就产生了几百亿美元的产值。Tesco PLC（特易购）连锁超市在其数据仓库中收集了700万部冰箱的数据。通过对这些数据的分析，进行更全面的监控并进行主动的维修以降低整体能耗，每年节省相当可观的费用。PredPol公司通过与洛杉矶和圣克鲁斯的警方以及一群研究人员合作，基于地震预测算法的变体和犯罪数据来预测犯罪发生的几率，可以精确到500平方英尺的范围内。在洛杉矶运用该算法的地区，盗窃罪和暴力犯罪分布下降了33%和21%，挽救的社会财产价值不可估量，而且意义深远。

现在正是学习大数据的最好机遇，要想真正***到大数据的世界，王家林老师不仅是大数据布道师，宛如一位东方巨匠，肩负起他的3000门徒，笑傲大数据过度，欲与天公试比高。因此他的视频和书籍不容错过，只要你一步一个脚印持之以恒，不断思考和奋进，很快就可以成为大数据高手，实现年薪50万的梦想。

王家林的第一个中国梦：免费为全社会培养100万名优秀的大数据从业人员！

您可以通过王家林老师的微信号18610086859发红包捐助大数据、互联网+、O2O、工业4.0、微营销、移动互联网等系列免费实战课程，

目前已经发布的王家林免费视频全集如下：

1，《大数据不眠夜：Spark内核天机解密（共100讲）》：http://pan.baidu.com/s/1eQsHZAq 

2，《Hadoop深入浅出实战经典》http://pan.baidu.com/s/1mgpfRPu

3，《Spark纯实战公益大讲坛》http://pan.baidu.com/s/1jGpNGwu

4，《Scala深入浅出实战经典》http://pan.baidu.com/s/1sjDWG25

5，《Docker公益大讲坛》http://pan.baidu.com/s/1kTpL8UF

6，《Spark亚太研究院Spark公益大讲堂》http://pan.baidu.com/s/1i30Ewsd

7，DT大数据梦工厂Spark、Scala、Hadoop的所有视频、PPT和代码在百度云网盘的链接：
http://pan.baidu.com/share/home?uk=4013289088#category/type=0&qq-pf-to=pcqq.group

王家林免费在51CTO发布的1000集合大数据spark、hadoop、scala、docker视频：

1，《Scala深入浅出实战初级入门经典视频课程》http://edu.51cto.com/lesson/id-66538.html

2，《Scala深入浅出实战中级进阶经典视频课程》http://edu.51cto.com/lesson/id-67139.html

3，《Akka深入浅出实战经典视频课程》http://edu.51cto.com/lesson/id-77672.html

4，《Spark亚太研究院决胜大数据时代公益大讲堂》http://edu.51cto.com/lesson/id-30815.html

5，《云计算Docker虚拟化公益大讲坛 》http://edu.51cto.com/lesson/id-61776.html

6，《Spark 大讲堂（纯实战手动操作）》http://edu.51cto.com/lesson/id-78653.html

7，《Hadoop深入浅出实战经典视频课程-集群、HDFS、Yarn、MapReduce》http://edu.51cto.com/lesson/id-77141.html

8，《从技术角度思考Hadoop到底是什么》http://edu.51cto.com/course/course_id-1151.html

“DT大数据梦工厂”团队第一个中国梦：免费为社会培养100万名优秀的大数据从业人员。

每天早上4点起持续分享大数据、互联网+、O2O、工业4.0、微营销、移动互联网等领域的

精华内容，帮助您和公司在DT时代打造智慧大脑，将生产力提高百倍以上！

DT大数据梦工厂微信公众号：DT_Spark，二维码如下，期待大家加入！

大数据英雄召集令，我来了，你在哪？