杭州德博教育大数据工程师培训

授课机构:杭州德博教育IT培训学校 上课地点:杭州拱墅湖墅

  • 咨询电话:0571-88051537 15314689439
课程详情

阶段

技能点

能力培养

Java基础    Java基础语法、面向对象、异常处理、集合框架、常用类、I/O操作、多线程、网络编程、XML解析    熟练使用MyElipse开发Java程序    

会使用Java编写常用的流程控制语句    

理解并掌握面向对象思想及其三大特性    

能够运用Java常用类解决实际问题    

会使用集合框架存储数据、I/O技术操作文件    

能够实现多线程及网络编程    

JavaWeb网站开发    HTML5、CSS3、JavaScript/ES6、JQuery、JSP/Servlet、MySQL数据库、JDBC、Linux、SVN    了解B/S架构运行原理    

掌握网页的开发和设计技能    

掌握JavaWeb核心开发技能    

掌握Linux应用部署和监控技能    

掌握基本的JavaEE应用设计和开发技能    

锻炼学员团队协作能力    

SSM/SSH框架    MyBatis框架、Spring框架、Spring MVC框架、Struts2框架、Hibernate框架、Git、Maven 、Oracle数据库    掌握SSM/SSH框架核心技能及应用开发技能    

掌握Oracle数据库设计和应用技能    

学会使用Git进行项目代码版本管理    

学会使用Maven进行项目构建管理    

基于分布式微服的互联网架构    分布式微服架构、Dubbox、Spring Cloud、Spring Boot、Docker环境搭建实现自动化部署、分布式下ID性、Redis、分布式事务处理、分布式下三方接入、Active MQ消息队列等    培养学员基于分布式项目的业务架构、应用架构、技术架构、安全架构、网络拓扑架构等的    

设计和代码开发能力,以及在部署策略等方面的综合能力    

培养学员分布式项目下核心业务处理能力    

培养学员在分布式项目下对于高并发、数据终一致性、性能优化等问题的解决处理能力    

Python爬虫+ELK+分析    Shell编程、Python编程、NumPy&Pandas、Scrapy、LXML、PySpider、数据采集、整理和清洗、Elasticsearch、Logstash、Kibana    掌握Python编程    

具备Python的爬虫开发、 数据获取和整理等能力    

能够使用ELK进行数据导入、 查询和集成    

Hadoop生态圈    HDFS、MapReduce、YARN、Hive、Sqoop、HBase    掌握Hadoop集群配置与管理    

掌握HDFS文件操作    

掌握分布式计算原理    

掌握基于Hive的数据ETL和数据查询    

掌握HBase数据存储    

掌握数据导入导出    

Spark技术线    Scala编程、Spark RDD、Spark SQL、Spark GraphX、PySpark、Jupyter、Hadoop数据模型、Atlas&Ranger、NiFi、Kafka、Oozie、Cassandra&Hive、Redis&Hive、MongoDB、Tableau    掌握Spark集群配置与管理,以及Spark离线计算    

具备Scala和Python编写 Spark应用的能力    

具备在企业数据湖中建立数据流程/通道、实施数据监管、规范数据管理和数据安全    

具备数据采集、数据变换、数据建模、任务调度以及与企业应用的数据集成的能力具备多种NoSQL数据存储的能力    

掌握Hive/Spark实施数据变换、BI工具与 Hive、 NoSQL 的集成    

掌握用户兴趣取向分析/航班飞行网图分析/电子商务消费行为分析/用户交易欺诈分析案例的具体实现    

实时流处理平台    Spark Streaming、Flink、Flume、Storm、d3.js、Echarts    掌握Apache NiFi/Kafka/Flume/Spark Streaming的集成使用    

具备实时流数据存储、计算、查询的能力    

具备多种流处理框架的运用能力    

掌握多种常见可视化工具的使用    

掌握股票流数据实时分析/舆情分析案例    

机器学习    Spark Mllib    掌握Spark机器学习数据结构及流程    

掌握分类,聚类和模型    

掌握垃圾邮件分类    

课程

成体系培养,符合行业发展趋势

课程(岗位)

能力培养

项目经验

大数据开发工程师标准版(Java开发工程师)    掌握Java语言及Java技能体系    互联网项目开发经验:
具备分布式项目的开发经验,具备针对系统中的扩展性、安全性、高性能等问题的分析、解决能力    

掌握SSM/SSH框架技术进行垂直架构项目的开发    

具备架构设计能力,可进行分布式微服架构项目的开发    

具备大数据Hadoop相关基础知识    

大数据开发工程师版(大数据应用开发工程师)    掌握大数据生态圈相关技术的开发及应用,掌握Hadoop、Spark、Spark Streaming、Kafka,掌握Flink,了解Storm    大数据项目开发经验:
包括Python爬虫与ELK搜索、电子商务消费行为分析、航班飞行网图分析、垃圾邮件分类、舆情分析、用户交易欺诈分析、用户兴趣取向分析、股票流数据实时分析    

掌握Java、Python、Scala、Shell编程    

搭建和部署Hadoop、Spark、Flink、Storm集群,并能够利用大数据平台实现对数据的分析和处理    

大数据分析师    流行的学习、分析、挖掘算法、分布式数据处理、数学建模、模型演练、智能化算法优化,以及创造性的算法实现,同时使用R、go、python等进行模型实现    

本页面由主体杭州德博领育软件技术有限公司自行上传,本网不对该页面内容(包括但不限于文字、图片)真实性和知识产权负责,如有侵权请联系处理删除qq:16720809。
看过该课程的人还看了
汇上优课
微信选课
好课0元领
分享立返现!
杭州德博教育IT培训学校杭州市拱墅区湖州街沈半路29号时瑞大厦
【机构】咨询热线: 0571-88051537 15314689439
温馨提示: 提交留言后老师会第一时间与您联系! 热线电话:0571-88051537 15314689439