南京大數(shù)據(jù)開發(fā)工程師培訓(xùn)班

【課程簡(jiǎn)介】

通過數(shù)據(jù)可以了解到大數(shù)據(jù)可視化人才在大數(shù)據(jù)系列職位薪資高，而從地區(qū)上來看，大數(shù)據(jù)相關(guān)人才在北京的薪資待遇高達(dá)16809元。

【課程體系】

大數(shù)據(jù)基礎(chǔ)

1.什么是大數(shù)據(jù)？大數(shù)據(jù)概念；

2.大數(shù)據(jù)主要分類類型；

3.大數(shù)據(jù)和普通數(shù)據(jù)的區(qū)別；

大數(shù)據(jù)現(xiàn)狀

1.現(xiàn)有企業(yè)應(yīng)用場(chǎng)景；

2.大數(shù)據(jù)生態(tài)圈介紹；

群組討論

1."自我定義的大數(shù)據(jù)"-群組討論；

2.學(xué)員技能摸底，情況歸檔；

Linux基礎(chǔ)

Linux基本命令解析

1.熟悉Linux歷史背景；

2.了解Linux基本命令；

虛擬機(jī)-Centos安裝

1.安裝虛擬機(jī)；

2.安裝Mvn，Jdk等工具

Zookeeper

Zookeeper熟悉和用途綜述

1.Zookeeper介紹

2.Zookeeper基礎(chǔ)知識(shí)

3.體系結(jié)構(gòu)

4.數(shù)據(jù)模型

Zookeeper環(huán)境搭建

1.集群搭建和測(cè)試

2.命令行客戶端操作

3.Stat

Zookeeper開發(fā)

1.Watches、Node詳解

2.API介紹

3.Java Client開發(fā)

4.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

Zookeeper集群搭建、 命令行Client操作

1.Zookeeper 節(jié)點(diǎn)類型與體系結(jié)構(gòu)

2.Zookeeper Watch

3.Zookeeper 與 HBase 的關(guān)系

4.Zookeeper 更新Server 實(shí)例實(shí)現(xiàn)

5.Zookeeper 分布式鎖

Hbase數(shù)據(jù)庫(kù)

Hbase熟悉和用途綜述

1.Hbase介紹

2.Hbase基礎(chǔ)知識(shí)

3.體系結(jié)構(gòu)

4.數(shù)據(jù)模型

Hbase環(huán)境搭建

1.集群搭建和測(cè)試

2.命令行客戶端操作

3.Stat

Hbase開發(fā)

1.Hbase增刪改查

2.Hbase的基礎(chǔ)get，scanner等命令

Hadoop

hadoop的前世今生

1.大數(shù)據(jù)背景及hadoop出現(xiàn)的契機(jī)

2.hadoop概述

3.hadoop生態(tài)系統(tǒng)

4.hadoop分布式文件系統(tǒng)HDFS

5.hadoop計(jì)算框架MapReduce

6.hadoop版本發(fā)展歷史

7.hadoop行業(yè)應(yīng)用案例分析

8.hadoop與云計(jì)算和大數(shù)據(jù)的關(guān)系

hadoop的前世今生

1.hadoop 核心組件簡(jiǎn)單介紹

2.hadoop 部署角色簡(jiǎn)單介紹

3.hadoop 試驗(yàn)集群的部署結(jié)構(gòu)

4.hadoop 安裝依賴關(guān)系

5.hadoop 生產(chǎn)環(huán)境的部署結(jié)構(gòu)

6.hadoop 集群部署

7.hadoop 高可用配置方法

8.hadoop 集群簡(jiǎn)單測(cè)試方法

9.hadoop 集群異常debug方法

hadoop YARN架構(gòu)設(shè)計(jì)和核心概念

1.YARN的出現(xiàn)的背景

2.YARN的設(shè)計(jì)思想和背景

3.YARN的基礎(chǔ)架構(gòu)

4.YARN的工作流程

5.YARN的基礎(chǔ)類庫(kù)詳解

6.YARN的核心模塊ApplicationMaster詳解

7.YARN的核心模塊ResourseManager剖析

8.YARN的核心模塊NodeManager詳解

9.YARN 資源調(diào)度器詳細(xì)介紹

Spark

Spark的發(fā)展歷程

1.大數(shù)據(jù)背景及sPARK出現(xiàn)的契機(jī)

2.Spark概述

3.Spark生態(tài)系統(tǒng)

4.Spark核心組件原理和架構(gòu)

5.Spark分布式文件系統(tǒng)HDFS

6.Spark計(jì)算核心算法

7.Spark部署角色

8.Spark版本發(fā)展歷史

9.Spark行業(yè)應(yīng)用案例分析

安裝Spark

1.Spark 核心組件簡(jiǎn)單介紹

2.Spark 部署角色簡(jiǎn)單介紹

3.Spark 試驗(yàn)集群的部署結(jié)構(gòu)

4.Spark 安裝依賴關(guān)系

5.Spark 生產(chǎn)環(huán)境的部署結(jié)構(gòu)

6.Spark 集群部署

7.Spark 高可用配置方法

8.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

Spark 部署模式剖析

1.Spark的工作流程

2.Spark的多種調(diào)度模式區(qū)別

3.Spark的調(diào)度通信機(jī)制

Spark 高級(jí)編程,Spark Streaming高級(jí)編程

1.Spark 核心API介紹

2.Suffle 算法介紹

3.Spark異?；貪L機(jī)制介紹

4.Spark Sql剖析

5.Spark Streaming剖析

6.Spark RDD剖析

7.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

Spark 及Spring搭配

1.Spark和Spring集成

2.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

Spark編程模型及調(diào)優(yōu)

1.Spark編程模型及調(diào)優(yōu)

2.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

storm

Storm基礎(chǔ)知識(shí)

1.包括storm基本概念

2.storm應(yīng)用場(chǎng)景

3.應(yīng)用現(xiàn)狀和發(fā)展趨勢(shì)

4.storm與hadoop的區(qū)別

Storm的架構(gòu)與原理

1.Nimbus進(jìn)程與Supervisor進(jìn)程

2.storm集群環(huán)境搭建

3.zookeeper集群的搭建

4.storm配置文件配置項(xiàng)講解

5.storm常用組件和編程API

6.Topology、Spout、Bolt、Storm分組策略

7.（Stream Groupings）

8.storm項(xiàng)目maven環(huán)境的搭建

9.實(shí)戰(zhàn)內(nèi)容（現(xiàn)場(chǎng)實(shí)驗(yàn)環(huán)節(jié)）

storm可靠性機(jī)制

1.消息處理的含義

2.storm的ack/fail機(jī)制

3.storm如何**可靠性

4.storm如何實(shí)現(xiàn)可靠性

storm高并發(fā)策略

1.工作進(jìn)程、執(zhí)行器與任務(wù)的區(qū)別

2.配置topology的并行度

3.topology實(shí)例

4.如何改變運(yùn)行中topology的并行度

流分組

1.什么是流分組

2.6種不同的流分組方式

組件詳解

1.基本接口:IComponent接口、ISpout接口、IBolt接口、IRichSpout接口、IRichBolt接口、IBasicBolt接口、IStateSpout、IRichStateSpout接口

2.基本抽象類:BaseComponent抽象類、BaseRichSpout抽象類、BaseRichBolt抽象類、BaseBasicBolt抽象類

storm批處理事務(wù)處理

1.storm批處理詳解

2.storm事務(wù)工作原理深入講解

3.storm事務(wù)相關(guān)API詳解

4.storm事務(wù)案例分析

5.storm分區(qū)事務(wù)與不透明分區(qū)事務(wù)

Kafka

kafka概述

1.kafka是什么:kafka概念詳解：Topics/logs、Distributitions、Producers、Consumers、Guarantees。

2.kafka的應(yīng)用場(chǎng)景

3.kafka的體系架構(gòu)與設(shè)計(jì)原理

kafka的安裝部署

1.kafka集群環(huán)境的搭建

2.kafka配置項(xiàng)的配置與講解

3.分布與訂閱的原理

4.分布與訂閱的接口

kafka使用zookeeper進(jìn)行協(xié)調(diào)管理

1.zookeeper在kafka中的作用

2.zookeeper如何進(jìn)行協(xié)調(diào)管理

【師資】

蘇老師 | 教學(xué)總監(jiān)

教學(xué)專長(zhǎng)：

十多年軟件行業(yè)從業(yè)經(jīng)驗(yàn)，精通J2EE開發(fā)、IOS平臺(tái)、Android平臺(tái)的移動(dòng)應(yīng)用App開發(fā)及整體架構(gòu)技術(shù)，精通軟件架構(gòu)及 移動(dòng)應(yīng)用項(xiàng)目的管理及方案設(shè)計(jì)，精通移動(dòng)應(yīng)用后臺(tái)技術(shù)。

國(guó)際認(rèn)證：

Oracle認(rèn)證Java講師、Web前端開發(fā)講師。

個(gè)人履歷：

曾擔(dān)任南京普天通信集團(tuán)主任工程師/系統(tǒng)設(shè)計(jì)師、文思創(chuàng)新移動(dòng)軟件事業(yè)部研發(fā)主管/項(xiàng)目經(jīng)理/架構(gòu)師、江蘇蘇美達(dá)計(jì)算機(jī) 系統(tǒng)有限公司項(xiàng)目經(jīng)理。

陳老師 | 大數(shù)據(jù)高級(jí)講師

教學(xué)專長(zhǎng)：

精通JavaEE，Linux，大數(shù)據(jù)分析統(tǒng)計(jì)；精通Oracle、DB2、informax等數(shù)據(jù)庫(kù)。精通CMMI質(zhì)量體系， TD-SCDMA協(xié)議，GSM協(xié)議，TCP/IP。熟悉測(cè)試?yán)碚撝R(shí)和測(cè)試工具，擅長(zhǎng)web類軟件測(cè)試，對(duì)測(cè)試管理流程有深刻的認(rèn)識(shí)。

個(gè)人履歷：

畢業(yè)于南京工業(yè)大學(xué)，8年軟件測(cè)試軟件開發(fā)經(jīng)驗(yàn)；獲國(guó)家“移動(dòng)端圖像處理”發(fā)明專利。曾任中興通訊高級(jí)工程師，主導(dǎo)bssp項(xiàng)目，電信號(hào)碼百事通項(xiàng)目，以及商城大數(shù)據(jù)平臺(tái)搭建和研發(fā)。

張老師 | 大數(shù)據(jù)高級(jí)講師

教學(xué)專長(zhǎng)：

十年J2EE項(xiàng)目開發(fā)經(jīng)驗(yàn)，精通Java面向?qū)ο缶幊趟枷?，深刻理解MVC模式及Struts框架、精通Hibernate、Spring。

個(gè)人履歷：

參加過眾多大型企業(yè)信息系統(tǒng)開發(fā)工作，具有很強(qiáng)的技術(shù)實(shí)力和豐富的開發(fā)經(jīng)驗(yàn)。對(duì)Java企業(yè)級(jí)軟件開發(fā)平臺(tái)有深刻的理解。在軟件開發(fā)、測(cè)試、項(xiàng)目管理等領(lǐng)域都有多年豐富的實(shí)踐經(jīng)驗(yàn)。

【教學(xué)現(xiàn)場(chǎng)】

【校區(qū)環(huán)境】

【就業(yè)**】

【機(jī)構(gòu)簡(jiǎn)介】

南京萬和創(chuàng)辦于1993 年，自創(chuàng)辦之日起我們就專注于信息服務(wù)和培訓(xùn)領(lǐng)域。面向個(gè)人提供技能提升、認(rèn)證和就業(yè)服務(wù)(2C)；面向高校提供專業(yè)共建、實(shí)驗(yàn)室建設(shè)、實(shí)習(xí)（實(shí)訓(xùn)）服務(wù)(2B)；面向企業(yè)提供員工內(nèi)訓(xùn)、人才服務(wù)、項(xiàng)目外包和研發(fā)服務(wù)(2B)。涵蓋的技術(shù)領(lǐng)域包括網(wǎng)絡(luò)技術(shù)、開發(fā)技術(shù)、數(shù)據(jù)庫(kù)技術(shù)、信息安全、虛擬化技術(shù)、云計(jì)算、人工智能及大數(shù)據(jù)應(yīng)用等?？蛻舾采w政府、金融、電信、能源、制造、科研等眾多行業(yè)，涉及軟件開發(fā)、IT 服務(wù)、培訓(xùn)、咨詢等多個(gè)業(yè)務(wù)領(lǐng)域，獲得了廣泛的客戶認(rèn)可！

南京萬和計(jì)算機(jī)培訓(xùn)中心有限公司系南京萬和全資設(shè)立的教育機(jī)構(gòu)，課程涉及就業(yè)課程（Java開發(fā)、UI設(shè)計(jì)、Web前端、軟件測(cè)試、Python人工智能、大數(shù)據(jù)等）、認(rèn)證課程（Huawei、Cisco、Oracle、Redhat、VUE、PROMETRIC等）及 在線課程。其中認(rèn)證課程，萬和既是原廠授權(quán)培訓(xùn)中心同時(shí)也是其原廠授權(quán)考試中心，在“考培一體雙授權(quán)”的優(yōu)勢(shì)下，萬和學(xué)員的綜合通過率比其他同行機(jī)構(gòu)高！中心現(xiàn)擁有40多間專業(yè)實(shí)訓(xùn)室，包括華為網(wǎng)絡(luò)實(shí)驗(yàn)室、思科網(wǎng)絡(luò)實(shí)驗(yàn)室、云計(jì)算實(shí)驗(yàn)室、大數(shù)據(jù)實(shí)驗(yàn)室、互聯(lián)網(wǎng)實(shí)驗(yàn)室、Oracle 實(shí)驗(yàn)室、國(guó)際認(rèn)證考試中心等。

目前我們已和蘇皖多所高校在聯(lián)合培養(yǎng)、專業(yè)共建、實(shí)訓(xùn)實(shí)習(xí)、華為ICT 學(xué)院、Oracle WDP 等方面展開合作。院?；锇榘|南大學(xué)、揚(yáng)州大學(xué)、南京工程學(xué)院、金陵科技學(xué)院、曉莊師范學(xué)院、鹽城師范學(xué)院、宿遷學(xué)院、無錫職院、南信院、淮信院、常信院、金城學(xué)院、紫金學(xué)院、江蘇第二師范學(xué)院、浦江學(xué)院、三江學(xué)院、淮北師大、安徽科技學(xué)院、皖西學(xué)院、萬博職院等。

萬和IT教育擁有40多位專職資深講師和20多位課程研發(fā)專家，平均5年以上從業(yè)經(jīng)驗(yàn)，人均授課超過6000課時(shí)，超過一半講師具備原廠技術(shù)認(rèn)證和講師資格認(rèn)證（雙證上崗）。學(xué)IT更多人選擇萬和，萬和IT教育，您身邊的IT培訓(xùn)專家。

【機(jī)構(gòu)環(huán)境】

【機(jī)構(gòu)資質(zhì)】

Microsoft 認(rèn)證高級(jí)技術(shù)培訓(xùn)中心

Redhat 授權(quán)培訓(xùn)中心

Cisco 授權(quán)培訓(xùn)中心

HUAWEI授權(quán)培訓(xùn)中心

IBM 授權(quán)培訓(xùn)合作伙伴

VMWare授權(quán)培訓(xùn)合作伙伴

Oracle 認(rèn)證Java學(xué)習(xí)中心

Oracle WDP授權(quán)培訓(xùn)合作伙伴（OCP/OCM）

SAP 授權(quán)培訓(xùn)中心

Adobe 授權(quán)培訓(xùn)中心

AutoDesk 授權(quán)培訓(xùn)中心

商務(wù)部服務(wù)外包重點(diǎn)聯(lián)系培訓(xùn)機(jī)構(gòu)

江蘇省價(jià)格誠(chéng)信單位

江蘇省國(guó)際服務(wù)外包人才培訓(xùn)基地

南京市國(guó)際服務(wù)外包人才培訓(xùn)機(jī)構(gòu)

南京市軟件人才培訓(xùn)基地

江蘇省計(jì)算機(jī)學(xué)會(huì)理事單位

江蘇省互聯(lián)網(wǎng)產(chǎn)業(yè)人才培訓(xùn)基地

江蘇省計(jì)算機(jī)學(xué)會(huì)創(chuàng)新創(chuàng)業(yè)人才培訓(xùn)基地

【發(fā)展歷程】

1993年 江蘇萬和計(jì)算機(jī)培訓(xùn)中心經(jīng)江蘇省教育廳批準(zhǔn)成立。

1994年 經(jīng)南京市勞動(dòng)局授權(quán)推出國(guó)家勞動(dòng)部《職業(yè)資格證書》計(jì)算機(jī)等級(jí)初級(jí)培訓(xùn)。

1995年

經(jīng)南京市勞動(dòng)局授權(quán)推出國(guó)家勞動(dòng)部《職業(yè)資格證書》計(jì)算機(jī)等級(jí)中級(jí)培訓(xùn)。

經(jīng)南京市財(cái)政局授權(quán)推出《會(huì)計(jì)電算化》培訓(xùn)。

1997年 成為微軟公司授權(quán)培訓(xùn)中心（ATC），率先在南京市推出MS Office 97培訓(xùn)。

1998年

率先在江蘇地區(qū)開展微軟公司高級(jí)技術(shù)培訓(xùn)。

成為VUE南京首家授權(quán)考試中心。

1999年

成為微軟認(rèn)證高級(jí)技術(shù)培訓(xùn)中心（ATEC）。

成為Adobe中國(guó)授權(quán)培訓(xùn)中心（ACTC）、授權(quán)考試中心（ACEC）。

2000年

率先在江蘇地區(qū)開展Cisco高級(jí)技術(shù)培訓(xùn)。

率先江蘇地區(qū)開展Oracle數(shù)據(jù)庫(kù)技術(shù)培訓(xùn)。

成為Sun授權(quán)Java培訓(xùn)中心（ASEC）。

成為Prometric授權(quán)考試中心（APTC）。

成為Autodesk授權(quán)培訓(xùn)中心（ATC）。

2001年

成為SCO Unix 授權(quán)培訓(xùn)中心。

成為Turbo Linux授權(quán)培訓(xùn)中心。

2002年

成為中國(guó)首批CIW（網(wǎng)絡(luò)安全）授權(quán)培訓(xùn)中心。

成為年度十大影響力IT培訓(xùn)品牌。

2004年

率先在江蘇地區(qū)開展Redhat Linux高級(jí)技術(shù)培訓(xùn)。

率先在江蘇地區(qū)開展《游戲動(dòng)漫設(shè)計(jì)與開發(fā)》職業(yè)培訓(xùn)項(xiàng)目。

成為Autodesk大中華區(qū)優(yōu)秀培訓(xùn)中心。

2006年 推出《Java軟件工程師》職業(yè)培訓(xùn)項(xiàng)目。

2008年

成為Redhat 授權(quán)培訓(xùn)中心。

成為Oracle WDP 授權(quán)培訓(xùn)合作伙伴。

成為Cisco授權(quán)培訓(xùn)中心。

成為南京市軟件人才培訓(xùn)基地。

成為江蘇省服務(wù)外包人才培訓(xùn)基地。

2009年

成為Oracle WDP 授權(quán)培訓(xùn)合作伙伴（OCM）。

成為江蘇省教育培訓(xùn)工作先進(jìn)單位。

2010年

成為微軟合作伙伴。

成為南京市三信三優(yōu)單位。

2011年

成為南京市首批國(guó)際服務(wù)外包人才培養(yǎng)機(jī)構(gòu)。

成為Oracle認(rèn)證Java學(xué)習(xí)中心。

2012年

成為江蘇地區(qū)SAP授權(quán)培訓(xùn)中心。

成為華為江蘇區(qū)授權(quán)培訓(xùn)中心。

2013年

成為Oracle WDP合作伙伴。

推出《安卓軟件工程師》職業(yè)培訓(xùn)項(xiàng)目。

率先在江蘇地區(qū)開展大數(shù)據(jù)應(yīng)用及開發(fā)技術(shù)培訓(xùn)。

被江蘇省物價(jià)局評(píng)為江蘇省價(jià)格誠(chéng)信單位。

2014年

成為Redhat大中華區(qū)優(yōu)秀合作伙伴。

成為中國(guó)優(yōu)秀服務(wù)外包培訓(xùn)機(jī)構(gòu)。

2015年

成為蘋果江蘇地區(qū)首家運(yùn)營(yíng)合作伙伴。

推出《Python開發(fā)工程師》培訓(xùn)課程。

2016年

獲得中國(guó)服務(wù)外包培訓(xùn)機(jī)構(gòu)規(guī)模獎(jiǎng)。

成為Redhat大中華區(qū)培訓(xùn)交付合作伙伴。

江蘇省計(jì)算機(jī)學(xué)會(huì)理事單位。

江蘇省計(jì)算機(jī)學(xué)會(huì)創(chuàng)新創(chuàng)業(yè)人才培訓(xùn)基地。

2017年

普天科技園設(shè)立萬和卡子門校區(qū)形成學(xué)習(xí)生活一體化實(shí)訓(xùn)基地。

成為首批江蘇省互聯(lián)網(wǎng)產(chǎn)業(yè)人才培訓(xùn)基地。

2018年

獲得華為認(rèn)證HALP貢獻(xiàn)獎(jiǎng)。

獲得十佳華為授權(quán)培訓(xùn)合作伙伴稱號(hào)。

2019年

成為中國(guó)服務(wù)貿(mào)易協(xié)會(huì)服務(wù)外包人才培養(yǎng)校企合作示范機(jī)構(gòu)。

獲得華為優(yōu)秀授權(quán)培訓(xùn)合作伙伴稱號(hào)。

成為紅帽（RedHat）中國(guó)區(qū)培訓(xùn)合作伙伴 。

成為工信部認(rèn)證的工業(yè)和信息化人才培養(yǎng)工程培訓(xùn)基地。

2020年成為南京市社會(huì)培訓(xùn)行業(yè)協(xié)會(huì)先進(jìn)單位。

2021年獲得紅帽授權(quán)培訓(xùn)合作伙伴獎(jiǎng)

獲得華為2020年度優(yōu)秀授權(quán)培訓(xùn)合作伙伴

【萬和的使命】

讓客戶享受IT知識(shí)更新的價(jià)值

【目標(biāo)】

打造中國(guó)優(yōu)秀的IT教育品牌

【價(jià)值觀】

質(zhì)量 誠(chéng)信 積極 合作 行動(dòng)

【教育理念】

知識(shí)、技能、經(jīng)驗(yàn)全面提升，增強(qiáng)競(jìng)爭(zhēng)力，保持競(jìng)爭(zhēng)優(yōu)勢(shì)，從容面對(duì)各種挑戰(zhàn)。

【機(jī)構(gòu)特點(diǎn)】

專業(yè)化——因?qū)I(yè)而精彩