天津光环国际
天津光环国际> 天津大数据开发培训课程课程介绍
天津大数据开发培训课程
天津大数据开发培训课程

对象:

天津大数据开发培训课程-课程详情
天津大数据开发培训课程是天津光环国际专门为了设置的课程,天津大数据开发培训课程滚动开班想了解天津大数据开发培训课程的具体课时、学费、开课时间、师资力量、开课地点等详细信息可咨询客服,也可以咨询客服获取最新优惠活动及试听预约。下面一起来看看具体课程介绍吧。

本文将介绍光环国际大数据开发培训课程业内独有实战课程模式、教你高薪、好用、不过时的技术。

前置视频基础阶段

1-大数据学习中的
    Linux基础

【课程内容】Linux安装使用、Linux文件系统、Linux用户和进程管理、 Shell和网络基础、git工具、 Linux小测验。

【课程目标】掌握Linux使用方式和常见命令;熟悉Linux环境,包括shell和git使用

2-大数据学习中的
    java基础

【课程内容】Java简介,包括跨平台、虚拟机、JDK等、 Java编程基础,函数、循环语句、变量等、Java高级特性,类、继承、多态等、Java数据集合,包括List、Map、Set等介绍、自动化项目管理工具Maven、 Java小测验。

【课程目标】掌握Java基本语法,能够使用Java编写包含类、函数、循环等语言的代码;熟悉Java编程环境,包括集成开发工具eclipse/IDEA,项目管理工具等

3-Hadoop课程延展

【课程内容】分布式文件储存系统HDFS进阶,分布式数据库HBase进阶,分布式计算引擎MapReduce基础与进阶,Zookeeper与YARN

【课程目标】深度学习hadoop系统,包括高级特性,优化等;增加hadoop大数据技术学习广度,拓展眼界

4-Spark课程延展

【课程内容】分布式计算框架Spark Core和Spark SQL进阶和调优,函数式编程语言scala

【课程目标】深度学习Spark系统,包括高级特性,优化等,增加Spark大数据技术学习广度,拓展眼界

入学考试:通过考试后正式进入大数据技术学习阶段
 
周末面授阶段
第 一阶段:Hadoop生态体系本阶段涉及的实战项目:hadoop分布式集群搭建;用户画像系统;日志收集系统;Hive数据仓库构建。

5-大数据概述、分布式数据收集系统:Sqoop与Flume

【理论部分】大数据概论、 大数据技术体系(按照六层架构介绍:数据收集、数据存储、资源管理、计算引擎、数据分析以及可视化),Hadoop发展历程、Hadoop生态系统概述/结构化数据收集Sqoop:背景、架构、原理以及使用 、非结构化(日志)数据收集系统Flume:背景、架构、原理及使用;


【实战部分】利用Flume从指定目录中收集数据到HDFS、利用Sqoop将MySQL表中数据写HDFS。

【课程目标】 掌握大数据收集系统架构,能够使用sqoop和flume构建企业级大数据收集系统。

6-分布式消息队列:Kafka、分布式存储系统:文件系统HDFS

【理论部分】概述 、基本架构与工作原理、应用场景以及经典的架构组合等、HDFS简介、优缺点、架构(主节点NameNode、从节点DataNode、journal node的解析) 、核心设计(数据块、数据副本的存放策略、安全模式、负载均衡、机架感应等)、HDFS操作(命令行接口、Java接口)


【实战部分】搭建Kafka集群、如何编写Producer将数据写入Kafka、如何编写Consumer从Kafka中读取数据、搭建HDFS集群、使用NameNode Web UI、使用HDFS Shell利用Java编写程序从HDFS中读数据、利用Java编写程序将数据写入HDFS中、利用Java删除HDFS上的文件和目录

7-分布式存储系统:分布式数据库HBase

【理论部分】HBase简介、优缺点、架构以及HBase API使用等


【实战部分】搭建Hbase集群、使用Hbase Web UI、使用HBase Shell、利用Java编写程序在hbase中创建表、利用Java编写程序向hbase表中写入和读取数据

【项目案例】用户画像系统、网络爬虫

【课程目标】掌握HBase系统架构,能够编写程序读写 HBase中存储的数据 。

8-分布式分析引擎:Hive基础

【理论部分】Hive背景、架构、 HQL的DML和DDL语法等


【实战部分】Hive环境搭建、利用Hive创建表,并进行查询、Hive创建ORC与Parquet表并查询

【课程目标】熟练掌握HQL编写方式,能够使用Hive构建大数据仓库系统

9-分布式分析引擎:Hive进阶

【理论部分】Hive内部原理,多计算引擎(Tez与Spark),Hive创建ORC/Parquet表,Hive调优


【实战部分】程序方式访问Hive、Hive调优演示

【课程目标】掌握Hive内部原理,了解常见Hive的优化方式。

10-交互式查询引擎Presto

【理论部分】Presto基本架构,Presto与Hive对比,Presto基本使用。


【实战部分】Presto集群搭建、Presto使用方式、Presto与Hive性能对比

【项目测试练习】 Hadoop测试(包括选择题、简单题和编程题三部分)

第二阶段:Spark生态体系本阶段涉及的实战项目:电影受众分析系统、用户手机APP行为分析系统、用户画像系统(机器学习相关)

11-Spark 基础

【理论部分】Java Lambda语法简介 、Spark基础原理与运行架构、Spark部署方式


【实战部分】Spark开发环境搭建、使用Spark Web UI、如何将Spark程序运行到YARN上

【课程目标】掌握Spark基本原理,能够搭建Spark开发和运行环境。

12-Spark 程序设计

【理论部分】Spark编程模型、内存弹性分布式数据集的工作原理和机制、Spark RDD transform、持久化、checkpoint、容错与性能优化


【实战部分】如何利用intellij idea开发一个spark程序并运行到集群中、如何利用spark设计电影受众分析程序

【课程目标】掌握常见的Spark API,熟练使用Spark开发大数据分析程序。

13-Spark SQL

【理论部分】流式计算基础、spark streaming基础原理 、基础API介绍(包括map,filter,flatMap、foreachRDD,saveAsTextFile等)和高级API介绍(window, transform和mapWithState),Redis介绍


【实战部分】利用Spark Streaming读取HDFS中的数据,经统计(按照window统计)后写入HDFS:利用Spark Streaming读取HDFS中的数据,经统计后写入Redis和HBase:利用mapWithState实现wordcount

【课程目标】掌握Spark Streaming工作原理及常见的API,能够使用Spark Streaming编写流式实时计算程序。

14-Spark Streaming进阶

【理论部分】保存kafka offset并恢复、spark streaming容错机制、spark streaming调优方法、structured streaming原理及关键API


【实战部分】利用Spark Streaming+kafka+redis实现“用户手机app行为分析系统”、实现streuctured streaming版本的wordcount

【课程目标】掌握Spark Streaming调优方法和高级编程技巧,能够使用高级API编写更加鲁棒的分布式流式计算程序。

15-Spark MLlib数据分析挖掘程序

【理论部分】数据挖掘与机器学习基础知识,以及机器学习案例、Spark MLib分类、聚类、推荐等算法,用户画像系统设计。


【实战部分】回归预测和局部加权线性回归预测算法、近邻KNN预测分析的算法、协同过滤算法的Spark实现技术应用、决策树分类分析挖掘算法、逻辑回归分类分析挖掘算法、贝叶斯分类分析挖掘算法等,互联网用户性别预测。

【课程目标】掌握常见的机器学习算法,能够使用Spark MLLib工具包解决机器学习问题。

第三阶段:深度学习课程体系本阶段涉及的实战项目:电影评论文本情感分析、电信客户流失预测、基于深度学习的手写字体识别

【第三阶段】

16-深度学习课程体系

【理论部分】人工智能技术体系 ; 人工智能技术的数学与python基础 ; 神经网络(DNN,RNN及CNN等)和开源框架tensorflow及pytorch等


【实战部分】电影评论文本情感分析(监督学习,可应用在:各种评论文本的正负情感分类, 新闻的正负情感分类); 电信客户流失预测(监督学习, 可应用在:股价预测、流量预测,房价预测等方面中); 基于深度学习的手写字体识别

【课程目标】掌握人工智能技术基础,包括数学与python技术,了解神经网络技术及开源框架tensorfow、pytorch等。

第四阶段:企业级大数据项目实战本阶段涉及的实战项目:用户行为实时分析系统、信用卡欺诈分析系统、“双十一”大数据日志分析系统、用户画像系统、电子商务推荐系统、商务智能报表系统。

17-spark企业应用:
用户行为实时分析系统

【实战部分】项目背景、开发需求、 项目架构、核心点讲解; 项目架构、核心点讲解; 数据展示、共性问题答疑 、项目总结。 讲解主要架构:Kafka+Spark Streaming+Mysql


【课程目标】
掌握大数据流式系统基本架构 ; 学会使用kafka和spark streaming构建流式计算系统 ; 熟练掌握使用spark streaming编写鲁棒的流式处理程序

18-spark企业应用:
信用卡欺诈分析系统

【实战部分】项目背景、开发需求、 项目架构、核心点讲解 ; 数据展示、共性问题答疑 、项目总结; 讲解主要架构:HDFS + Spark Core + mllib


【课程目标】
熟悉机器学习应用 ; 熟悉如何使用HDFS和Spark解决实际问题

19-hadoop企业应用:
“双十一”大数据日志分析系统


【实战部分】项目背景、开发需求、 项目架构、核心点讲解; 项目架构、核心点讲解; 数据展示、共性问题答疑 、项目总结。 讲解主要架构:hadoop+kafka+spark+presto/hive+echart/D3


【课程目标】
了解日志分析系统的基本架构 ; 熟练掌握如何采用hadoop和spark解决大数据分析问题 ; 使用常见的开源可视化工具对分析结果可视化

20-hadoop企业应用:
用户画像系统

【实战部分】项目背景、开发需求、 项目架构、核心点讲解; 项目架构、核心点讲解; 数据展示、共性问题答疑 、项目总结。 用户画像系统常见场景简介。 讲解主要架构:flume+hbase+spark+redis+mllib


【课程目标】
掌握用户画像系统基本架构 ; 熟练使用HBase存储海量结构化和半结构化数据 ; 熟练使用mllib求解机器学习问题

21-大数据综合应用:
电子商务推荐系统

【实战部分】项目背景、开发需求、 项目架构、核心点讲解; 项目架构、核心点讲解; 数据展示、共性问题答疑 、项目总结。 讲解主要架构:HDFS + HBase + Spark SQL + Spark Streaming


【课程目标】
掌握大数据设计架构lambda architecture;学会使用Hadoop和Spark技术解决复杂大数据问题

22-大数据综合应用:
基于大数据的商务智能报表系统

【实战部分】项目背景、开发需求、 项目架构、核心点讲解; 项目架构、核心点讲解; 数据展示、共性问题答疑 、项目总结。 讲解主要架构:Hadoop + Hive + Presto + superset/tableau


【课程目标】
掌握大数据报表系统基本架构设计方法;学会使用Hadoop和Spark技术解决复杂大数据报表分析及可视化问题。

23-大数据面试攻略

【课程目标】公司大数据岗位核心技能需求。了解所需知识和技能,以及主流的大数据工具和框架的使用方法。 讲解大数据开发工程师岗位面试的常见笔试题。会涵盖主流的互联网公司的面试题 目,深入浅出,结合实际场景分析。 讲解常大数据研发面试问题,开放式问题和系统设计问题,融汇贯通整个课程知识点。

为什么选择光环国际

定制学习计划

全方位督学服务

定期开展小组活动

以上就是天津光环国际天津大数据开发培训课程的全部介绍,如需了解更多关于天津大数据开发培训课程的信息可以咨询我们客服。咨询客服可以获取天津光环国际最新优惠活动及试听预约。想要了解的同学赶紧和我们联系吧!天津光环国际报名电话4009689396
校区环境
天津光环国际环境图片
天津光环国际环境图片
天津光环国际环境图片

口碑评价

  • 匿名:在杭州这明好小语种这里学习德语有一段时间了,首先就是这边的交通比较好,每天来这里的话比较的方便,这就是我喜欢来这里学习的原因,这边的环境也非常的好,很适合我们在这边学习,这边的话教室也有很多,大的也有小的也有,都是按班来分的,价格也不同,我报的是小班,价格什么的也很不算很贵,这边的话老师比较年轻,但是讲的是一口流利的德语,听着非常的舒服的那种,我的老师是个女的,讲课的方式很幽默,我非常喜欢听她的课。

  • 匿名:再过一年就要去德国留学了,可自己的德语真的很差都不能满足平常的对话。妈妈很上心,给我报了这里的辅导班,自己在这里学了几天后发现这里并没有自己想的那么枯燥,老师的讲课方式都很幽默风趣,很有意思,这样反而让那些抽象的知识变得更容易理解,记忆起来也很为方便。在学习上遇到什么问题可以直接问这里的老师,老师会耐心的一一做出解答。老师还会时常讲一些考试的应试技巧,我觉得这对我们帮助应该很大。自己在这里学习了一段时间,进步还是很大的。

  • 匿名:这边的环境挺好的,顾问老师也很不错,会细心的考虑我是要出国的,给我做了详细的课程规划,淼淼老师也很赞,法语教的很好,而且会分享法国的美食、美景给我们,真想赶紧学好法语,去法国走一走。

  • 匿名:出于兴趣,在这边学了法语,宁宁老师是个大美女,说话很温柔的,而且讲课很耐心的。有时候大家犯困的时候,老师就会给我们介绍法国风俗习惯,以及法国景点等等,调动大家的学习兴趣。而且我们这是小班,人不多,老师把每个人的学习进度都照顾到了。

  • 匿名:自己从小就跟向往德国,学习了法西斯的暴虐后,想去看看那个有个生机的国家,终于高考完了,可以出去旅游,可是爸妈说我语言不同不要我去,我就在网上咨询了明好,想说学点简单的可以用到的,然后这边环境特别好,教师也很专业,态度很好,非常有耐心,教你学语种的老师的口语是非常重要的,这些老师的口语都练得很标准,如果你哪个地方不好或者是读的不好,老师都会把你纠正错误,不用担心嘲笑自己的口语不好,因为风围特别融洽,也很容易让自己练就胆子大。

  • 匿名:明好教育是一家不错的语言培训机构,因为提升自己、对韩语比较感兴趣以及工作的需要,我早就想找一家好一点的语言培训机构学习韩语了,后来在同事和朋友的推荐下我找到了明好教育,我对这里的第一印象特别好,这里的前台接待人员特别有礼貌也十分有耐心,其次这里的教学环境很好,卫生很干净,学习氛围比较浓烈,老师上课教授课程的时候,课堂氛围很活跃,老师教授的内容逻辑清楚,容易理解。而且老师也比较认真负责,因为是语言类的学习,所以老师也会给留课下作业,等下次上课的时候会检查,如果不能完成就会有一个小惩罚,例如唱歌表演节目之类的。

  • 匿名:我前不久在他们家报名学习日语的,因为自身的工作需要,涉及到日常日语的使用,我来这里是一起工作的朋友推荐的,她在这里学习德语。怪不得朋友会推荐我来这里,我来到这里才发现,他们家真的是特别令我满意,首先这里的工作人员特别热情招呼我,积极询问我的需求,根据我的需要替我安排上课那些,对我的提问和担心也是一一解答,特别耐心亲切。他们这里的学习环境也很好,让人感觉很轻松,小班制上课,对我们学习更加有利,老师上课也很风趣幽默,上课的氛围很轻松,一点不死板,特别喜欢,值得推荐给大家!

  • 匿名:这里的服务态度很贴心,一开始我和同学去前台咨询日语的时候,顾问老师就很认真的给我们讲解了他们推出的课程,以及他们机构的特色教学。真的挺礼貌的,给人的感觉就是比较亲切我们报名的小班,就是她推荐的,学费很便宜,大约2000多左右,就能把日语基础学好了,她说这是有保证的,让我们很放心。老师们的教学都是比较新颖的,以前都是用的课件,现在改用新的教学模式,老师上的课程,微信上也有,如果你因为,家里有事或者什么没来上课,微信上也会有的,不怕耽误课程。

  • 匿名:教学环境很好,非常舒适,安静,上课的课程气氛很浓厚,我是网上咨询的,他们联系我,后来告诉我觉得老师讲课还是不错的 最先报名时还是有顾虑 所以跟着朋友试听了下效果非常好,然后就和朋友一起来学习了~

  • 匿名:我在这上过课,朋友介绍的,小语种很火的,我学的西班牙语,现在一个公司上班,算上绩效,每个月工资也不错,大学毕业之后找工作不太顺利,公司说要西班牙语翻译,朋友推荐我来这学,不得不说,朋友很靠谱,学成之后参加了实训,正好公司要我学西班牙语的,我就直接去了,现在很不错的,我对这很满意,无论是师资力量还是学习环境都很棒。

天津光环国际校区
  • 河西校区立即咨询

    黑牛城道与洞庭路交口中海财富中心1110-1112

电话咨询 在线咨询 在线预约