大数据实时处理–基于Spark的大数据实时处理及应用技术

课程中结合实例，介绍图工具GraphX如何发现社交网络中的人际关系，大数据挖掘工具MLlib如何进行商品聚类和电影推荐，以及Streaming流挖掘工具,并探讨了Spark与Docker等云环境下新技术的结合，分析了其应用前景。

本课程教学过程中还提供了案例分析来帮助学员了解如何用Spark实时大数据工具来解决业界的问题，并介绍了Spark生产环境搭建的相关知识。

第一讲 Spark大数据实时处理技术

第二讲 Spark安装配置及监控

第三讲 Scala编程语言使用概述

第四讲 Spark分布式计算框架

第五讲 Spark内部工作机制详解

第六讲 Spark数据读取与存储

第七讲 Spark通信模块和容错机制

第八讲 SQL On Spark

第九讲 Spark流数据处理工具Streaming

第十讲 Spark中的大数据挖掘工具MLlib

第十一讲 Spark大规模图处理工具GraphX

第十二讲 Spark与其他大数据技术的融合与应用

孙老师

优就业大数据高级讲师

原中国石化加油卡网上营业厅研发工程师

18年计算机信息系统设计与项目开发经验，曾参与多项重点工程项目的开发和设计，如中国石化加油卡网上营业厅、中国工商银行统一消息平台、黑龙江联通增值业务综合运营平台、新疆/青海/山东无线警务系统等。精通SSH框架，对大数据领域中的常用框架Hadoop、Hive、Flume、Kafka等有深入研究。

授课经验：曾担任过微软ATC培训中心的高级讲师，授课经验丰富，风趣幽默，由浅入深，善于启发学生思考，深受学生的喜爱。

主要科研成果：参与制定《公安部与中国电信移动警务平台设计规范》。

优就业作为IT职业教育培训机构，始终坚持“学员的事是最重要的事”这一办学理念，不断升级软件、硬件实力，对教学质量负责，对培训效果负责，真正地对学员负责。

　　优就业贴合学生的亲身利益需求，以理念的不断升级为导向，为学员提供舒适的学习环境。同时优就业在全国各分部均设置了学习体验中心，并且拥有自己的培训教学基地。多媒体教学设施先进，有着丰富的硬件资源。每一位老师、每一位员工都始终坚持企业的核心教学理念，在各个岗位上为每一个学员提供真诚的服务。

即时沟通:

  通过互联网络，企业可以和顾客做到即时沟通，速度快，效率高，不仅如此，网络营销可以将文字、声音、画面结合之后供用户主动检索观看，顾客还可以主动搜索了解产品信息，不仅减少了等待时间，还有效降低企业营销信息传播的成本。

学习技巧：

安装网站程序:

网站程序上传后，为了能够让网站程序在站点显示效果，就需要安装网站程序，安装网站程序跟我们平时安装软件差不多，安装一下就可以正常使用。