大数据实时处理–基于Spark的大数据实时处理及应用技术

课程中结合实例，介绍图工具GraphX如何发现社交网络中的人际关系，大数据挖掘工具MLlib如何进行商品聚类和电影推荐，以及Streaming流挖掘工具,并探讨了Spark与Docker等云环境下新技术的结合，分析了其应用前景。

本课程教学过程中还提供了案例分析来帮助学员了解如何用Spark实时大数据工具来解决业界的问题，并介绍了Spark生产环境搭建的相关知识。

第一讲 Spark大数据实时处理技术

第二讲 Spark安装配置及监控

第三讲 Scala编程语言使用概述

第四讲 Spark分布式计算框架

第五讲 Spark内部工作机制详解

第六讲 Spark数据读取与存储

第七讲 Spark通信模块和容错机制

第八讲 SQL On Spark

第九讲 Spark流数据处理工具Streaming

第十讲 Spark中的大数据挖掘工具MLlib

第十一讲 Spark大规模图处理工具GraphX

第十二讲 Spark与其他大数据技术的融合与应用

张老师

优就业PHP研究院院长、Linux云计算/Python人工智能高级讲师

原大型企业项目开发经理

10年PHP项目开发经验，5年大型企业项目管理经验，熟悉项目开发的整体流 程。曾带领团队开发过多个大型项目，如大型商城系统、ERP管理系统、OA办公 系统、图书管理系统，有着丰富的项目开发和优化经验。对人工智能、Python等 方面也有着深入的研究。

授课风格：对待学员认真负责，授课方式轻松自然，思路清晰，逻辑严谨，讲解细致入微，让学生在静静的思考中获得知识。

实战：优就业与多家企业实体达成亲密合作关系，创造“实训教学”模式，学员在实训课程中，可以直接进入合作企业研发团队，亲自参与项目的运作，真正做到学以致用、学有所成，避免了培训带来的理论与实践脱节的弊端。目前优就业为百度、新浪、搜狐、联想、阿里巴巴、中软、华为、摩托罗拉、IBM等多家知名企业培养输送IT人才。

优势：

受众关注度高：

  据资料显示，电视并不能集中人的注意力，电视观众40%的人同时在阅读，21%的人同时在做家务，13%的人在吃喝，12%的人在玩赏它物，10%在烹饪，9%在写作，8%在打电话。而网上用户55%在使用计算机时不做任何它事，只有6%同时在打电话，只有5%在吃喝，只有4%在写作。

学习技巧：

安装网站程序:

网站程序上传后，为了能够让网站程序在站点显示效果，就需要安装网站程序，安装网站程序跟我们平时安装软件差不多，安装一下就可以正常使用。