我要預(yù)訂

咨詢電話：027-5111 9925 , 027-5111 9926手機(jī)：18971071887郵箱：Service@mingketang.com

課程介紹

Hadoop實(shí)現(xiàn)了一個(gè)分布式文件系統(tǒng)（Hadoop Distributed File System），簡稱HDFS。HDFS有高容錯(cuò)性的特點(diǎn)，并且設(shè)計(jì)用來部署在低廉的（low-cost）硬件上；而且它提供高傳輸率（high throughput）來訪問應(yīng)用程序的數(shù)據(jù)，適合那些有著超大數(shù)據(jù)集（large data set）的應(yīng)用程序。

課程目標(biāo)

掌握大數(shù)據(jù)方法體系

掌握Hadoop原理技術(shù)

熟悉各項(xiàng)大數(shù)據(jù)處理手段和工具的使用。

培訓(xùn)對(duì)象

全省互聯(lián)網(wǎng)分析人員

課程內(nèi)容

第1天

主題Hadoop入門，了解什么是hadoop

1、Hadoop產(chǎn)生背景

2、Hadoop在大數(shù)據(jù)、云計(jì)算中的位置和關(guān)系

3、國內(nèi)外Hadoop應(yīng)用案例介紹

4、國內(nèi)Hadoop的課程大綱介紹

5、Hadoop生態(tài)圈以及各組成部分的簡介

6、Hadoop核心MapReduce

例子說明

主題分布式文件系統(tǒng)HDFS

1、分布式文件系統(tǒng)DFS簡介

2、HDFS的系統(tǒng)組成介紹

3、HDFS的組成部分詳解

4、副本存放策略及路由規(guī)則

5、命令行接口

6、Java接口

7、客戶端與HDFS的數(shù)據(jù)流講解

8、HDFS的可用性（HA）

第2天

主題初級(jí)MapReduce

1、如何理解map、reduce計(jì)算模型

2、剖析偽分布式下MapReduce作業(yè)的執(zhí)行過程

3、序列化

4、MapReduce的類型與格式

5、MapReduce開發(fā)環(huán)境搭建

6、MapReduce應(yīng)用開發(fā)

7、更多示例講解，熟悉MapReduce算法原理

主題高級(jí)MapReduce

1、使用壓縮分隔減少輸入規(guī)模

2、利用Combiner減少中間數(shù)據(jù)

3、編寫Partitioner優(yōu)化負(fù)載均衡

4、MapReduce優(yōu)化

5、編程實(shí)戰(zhàn)

第3天

主題Hadoop集群與管理

1、Hadoop集群的搭建

2、Hadoop集群的監(jiān)控

3、Hadoop集群的管理

4、集群下運(yùn)行MapReduce程序

主題HBase基礎(chǔ)知識(shí)

1、HBase定義

2、HBase與RDBMS的對(duì)比

3、數(shù)據(jù)模型

4、系統(tǒng)架構(gòu)

5、HBase上的MapReduce

6、表的設(shè)計(jì)

第4天

主題HBase集群及其管理

1、集群的搭建過程講解

2、集群的監(jiān)控

3、集群的管理

主題Zookeeper

1、zookeeper的功能

2、zookeeper集群搭建

3、查看zookeeper中數(shù)據(jù)的存儲(chǔ)

第5天

主題Hive

1、數(shù)據(jù)倉庫基礎(chǔ)知識(shí)

2、Hive定義

3、Hive體系結(jié)構(gòu)簡介

4、Hive集群

5、客戶端簡介

主題HiveQL

1、HiveQL定義

2、HiveQL與SQL的比較

3、數(shù)據(jù)類型

4、表與表分區(qū)概念

5、表的操作與CLI客戶端演示

6、數(shù)據(jù)導(dǎo)入與CLI客戶端演示

7、查詢數(shù)據(jù)與CLI客戶端演示

8、數(shù)據(jù)的連接與CLI客戶端演示

9、用戶自定義函數(shù)（UDF）的開發(fā)與演示

孫老師

講師資質(zhì)

Oracle 數(shù)據(jù)庫 DBA認(rèn)證

SAS 數(shù)據(jù)分析高級(jí)程序員認(rèn)證

Hadoop大數(shù)據(jù)及數(shù)據(jù)分析講師

講師簡介

數(shù)據(jù)庫專家。 孫增輝老師多年從事數(shù)據(jù)庫的管理和教學(xué)工作。對(duì)oracle、sql server、mysql等關(guān)系型數(shù)據(jù)庫有豐富的教學(xué)經(jīng)驗(yàn)。對(duì)于hive、HBase這些非關(guān)系型NoSql數(shù)據(jù)庫也有相當(dāng)成熟的教學(xué)實(shí)踐。

數(shù)據(jù)分析講師。孫增輝老師多年講授SAS數(shù)據(jù)分析軟件的應(yīng)用與數(shù)據(jù)分析實(shí)踐。對(duì)SSPS、R、python等在數(shù)據(jù)分析方向的教學(xué)也有相當(dāng)經(jīng)驗(yàn)。

Hadoop大數(shù)據(jù)、spark大數(shù)據(jù)分析講師。自2015年以來，孫增輝老師頻繁從事大數(shù)據(jù)方向的教學(xué)工作

Python+人工智能

Openstack云計(jì)算技術(shù)

Docker應(yīng)用容器引擎

講師專長

孫增輝老師在數(shù)據(jù)庫、大數(shù)據(jù)、數(shù)據(jù)分析，python+人工智能，這條數(shù)據(jù)應(yīng)用鏈路上，非常擅長。

講師IT從業(yè)經(jīng)驗(yàn)證明和項(xiàng)目經(jīng)驗(yàn)證明?從業(yè)經(jīng)驗(yàn)：

孫增輝老師從2008您進(jìn)入數(shù)據(jù)庫行業(yè)之后，基本上一直從事數(shù)據(jù)相關(guān)工作。沒有脫離這個(gè)行業(yè)。

項(xiàng)目經(jīng)驗(yàn) ：

1.項(xiàng)目名稱：華夏銀行oracle數(shù)據(jù)庫技術(shù)培訓(xùn)

項(xiàng)目描述：孫增輝老師多次在華夏銀行進(jìn)行oracle數(shù)據(jù)庫培訓(xùn)。從2013年至2016年，幾乎每年都要進(jìn)行兩三次數(shù)據(jù)庫培訓(xùn)項(xiàng)目。

工作內(nèi)容：為專業(yè)數(shù)據(jù)庫技術(shù)部門及非技術(shù)相關(guān)部門培訓(xùn)數(shù)據(jù)庫技術(shù)

2.項(xiàng)目名稱：廣東移動(dòng) 鼎湖培訓(xùn)學(xué)院 大數(shù)據(jù)及數(shù)據(jù)分析

項(xiàng)目描述：長期多次在鼎湖培訓(xùn)中心，多次講授大數(shù)據(jù)、大數(shù)據(jù)分析等相關(guān)課程。

工作內(nèi)容：為專業(yè)技術(shù)部門及非技術(shù)相關(guān)部門培訓(xùn)大數(shù)據(jù)、數(shù)據(jù)分析技術(shù)

3.項(xiàng)目名稱：建設(shè)銀行研發(fā)中心 大數(shù)據(jù)技術(shù)培訓(xùn)（北京西城）

項(xiàng)目描述：為研發(fā)人員進(jìn)行大數(shù)據(jù)技術(shù)培訓(xùn)

某銀行數(shù)據(jù)庫遷移項(xiàng)目

因業(yè)務(wù)發(fā)展，舊有的系統(tǒng)無法承擔(dān)業(yè)務(wù)增長造成的壓力，需要將數(shù)據(jù)庫遷移到新的平臺(tái)。

作為項(xiàng)目負(fù)責(zé)人，編寫實(shí)施方案，溝通項(xiàng)目實(shí)踐窗口，安排方案測試并組織實(shí)施。

某銀行全國數(shù)據(jù)庫管理員培訓(xùn)項(xiàng)目

為金融機(jī)構(gòu)的oracle數(shù)據(jù)庫管理員提供培訓(xùn)。

金融機(jī)構(gòu)的技術(shù)人員一般有較好的技術(shù)基礎(chǔ)，這對(duì)講師的能力也是一種考驗(yàn)。

作為主講講師，講授相關(guān)技術(shù)知識(shí)。

某銀行儲(chǔ)蓄數(shù)據(jù)庫性能調(diào)優(yōu)項(xiàng)目

為機(jī)構(gòu)的數(shù)據(jù)庫查詢性能提供優(yōu)化。

由于新業(yè)務(wù)上線，系統(tǒng)老舊，以及管理能力瓶頸造成的性能無法滿足需要，對(duì)數(shù)據(jù)庫進(jìn)行調(diào)優(yōu)。通過優(yōu)化代碼、重新組織存儲(chǔ)、合理建設(shè)索引等方法完成項(xiàng)目。

作為項(xiàng)目工程師，確認(rèn)影響范圍，組織實(shí)施測試，實(shí)施調(diào)優(yōu)。

某銀行數(shù)據(jù)庫開發(fā)項(xiàng)目

審核代碼、優(yōu)化代碼在數(shù)據(jù)庫中的執(zhí)行效率。維護(hù)測試數(shù)據(jù)庫、組織測試數(shù)據(jù)。

作為數(shù)據(jù)庫管理員，提供技術(shù)支持。

ORACLE OCP公開課項(xiàng)目

面向社會(huì)培訓(xùn)的oracle認(rèn)證課程。

主要是對(duì)oracle數(shù)據(jù)庫的初級(jí)學(xué)員進(jìn)行培訓(xùn)。課程內(nèi)容涉及oracle數(shù)據(jù)庫的全方位知識(shí)，知識(shí)點(diǎn)全面，深度中等。

作為主講講師，安排課程進(jìn)度，組織教學(xué)實(shí)驗(yàn)，維護(hù)學(xué)習(xí)氣氛。

ORACLE 數(shù)據(jù)庫災(zāi)備方案 咨詢項(xiàng)目

對(duì)企業(yè)的oracle數(shù)據(jù)庫災(zāi)備項(xiàng)目進(jìn)行咨詢。

企業(yè)的oracle數(shù)據(jù)庫災(zāi)備，是數(shù)據(jù)安全工作的重點(diǎn)，也是保障數(shù)據(jù)安全的重要手段。幫助企業(yè)完成災(zāi)備方案并實(shí)施，是一項(xiàng)十分重要的工作。

作為咨詢顧問，進(jìn)行售前技術(shù)交流、審核實(shí)施方案、安排組織方案測試。

ORACLE系統(tǒng)管理 系列培訓(xùn)/咨詢項(xiàng)目

結(jié)合各行業(yè)企業(yè)客戶的項(xiàng)目和培訓(xùn)需求，設(shè)計(jì)、開發(fā)相應(yīng)的課程體系、定制課件、現(xiàn)場培訓(xùn)、系統(tǒng)規(guī)劃、安裝、配置、性能優(yōu)化、疑難解答等。

作為主講講師/咨詢顧問，提供技術(shù)支持，幫助界定項(xiàng)目范圍、時(shí)間長度安排。

某大學(xué) 計(jì)算機(jī)學(xué)院 oracle培訓(xùn)項(xiàng)目

大學(xué)生的oracle數(shù)據(jù)庫培訓(xùn)，與其他數(shù)據(jù)庫培訓(xùn)有所不同。掌握課堂紀(jì)律，安排好課程的節(jié)奏反而是更重要的部分。

作為主講講師，安排課程進(jìn)度，組織教學(xué)實(shí)驗(yàn)，維護(hù)學(xué)習(xí)氣氛。

廣東移動(dòng) SAS數(shù)據(jù)分析培訓(xùn)項(xiàng)目

培訓(xùn)項(xiàng)目內(nèi)容深度要求并不嚴(yán)格，但是移動(dòng)公司人員對(duì)知識(shí)的廣度要求加大。很多時(shí)候培訓(xùn)組織的過程中，都要求按照學(xué)員的需求，隨時(shí)調(diào)整講授內(nèi)容。這對(duì)講師的講授經(jīng)驗(yàn)、項(xiàng)目經(jīng)驗(yàn)、課程熟悉程度都會(huì)有較高要求。

作為主講講師，安排課程進(jìn)度，組織教學(xué)實(shí)驗(yàn)，維護(hù)學(xué)習(xí)氣氛。

SAS程序開發(fā)

面向社會(huì)的SAS公開課。主要內(nèi)容為數(shù)據(jù)處理與簡單建模。

很多數(shù)據(jù)分析課程，一開始就講授建模部分，但是數(shù)據(jù)的采集、整理、篩選、變換才是一個(gè)數(shù)據(jù)分析師的基本功。本課程的內(nèi)容主要是數(shù)據(jù)處理。

作為主講講師，安排課程進(jìn)度，組織教學(xué)實(shí)驗(yàn)，維護(hù)學(xué)習(xí)氣氛。

SAS數(shù)據(jù)分析

主要內(nèi)容是使用描述統(tǒng)計(jì)、相關(guān)分析、主成分分析、聚類、回歸分析、邏輯回歸、方差分析、時(shí)間序列分析等方法對(duì)數(shù)據(jù)繼續(xù)分析處理。

作為主講講師，安排課程進(jìn)度，組織教學(xué)實(shí)驗(yàn)，維護(hù)學(xué)習(xí)氣氛。

工作內(nèi)容：

組織培訓(xùn)并安排考試考核

講師認(rèn)證證書

講師授課經(jīng)驗(yàn)?廣東移動(dòng)中高級(jí)數(shù)據(jù)庫培訓(xùn)

招商銀行數(shù)據(jù)庫技術(shù)培訓(xùn)

中國征信（北京）公司數(shù)據(jù)庫運(yùn)維培訓(xùn)

建設(shè)銀行大數(shù)據(jù)技術(shù)培訓(xùn)

中石油化工oracle項(xiàng)目技術(shù)培訓(xùn)

廣東移動(dòng)數(shù)據(jù)分析培訓(xùn)

上海CDA數(shù)據(jù)分析師項(xiàng)目培訓(xùn)

泰安煙草數(shù)據(jù)分析培訓(xùn)

我要預(yù)訂

咨詢電話：027-5111 9925 , 027-5111 9926手機(jī)：18971071887郵箱：Service@mingketang.com