【課程介紹】
伴隨著互聯(lián)網(wǎng)技術(shù)、移動互聯(lián)和物聯(lián)網(wǎng)技術(shù)的發(fā)展趨勢,大家早已進(jìn)一步地邁入了一個(gè)大數(shù)據(jù)的時(shí)期。大數(shù)據(jù)就是指沒法在一定時(shí)間上用基本工具軟件對其內(nèi)容開展抓娶管理方法和解決的數(shù)據(jù)信息結(jié)合,對大數(shù)據(jù)的剖析早已變成一個(gè)十分關(guān)鍵且急迫的要求,F(xiàn)階段對大數(shù)據(jù)的分析工具,的是Hadoop服務(wù)平臺。Hadoop在可伸縮性、可擴(kuò)展性、測算特性和成本費(fèi)上具備沒法的優(yōu)點(diǎn),實(shí)際上已變成當(dāng)今互聯(lián)網(wǎng)公司流行的大數(shù)據(jù)剖析服務(wù)平臺。為處理眾多控制系統(tǒng)設(shè)計(jì)工作人員深入分析與開發(fā)設(shè)計(jì)大數(shù)據(jù)技術(shù)的必須,培訓(xùn)學(xué)校特舉行“大數(shù)據(jù)處理技術(shù)-根據(jù)Hadoop的實(shí)戰(zhàn)演練”培訓(xùn)機(jī)構(gòu),實(shí)際事項(xiàng)通告以下:
一、學(xué)習(xí)培訓(xùn)目標(biāo)
1,系統(tǒng)架構(gòu)師、系統(tǒng)分析師、高級程序員、杰出開發(fā)者。
2,涉及大數(shù)據(jù)處理的大數(shù)據(jù)中心運(yùn)作、整體規(guī)劃、設(shè)計(jì)方案責(zé)任人。
3,部門,金融互聯(lián)網(wǎng)、挪動和互聯(lián)網(wǎng)技術(shù)等大數(shù)據(jù)來源于企業(yè)的責(zé)任人。
4,高等院校、科研單位涉及大數(shù)據(jù)與分布式系統(tǒng)數(shù)據(jù)處理方法的項(xiàng)目經(jīng)理。
二、學(xué)生基本
1,對IT系統(tǒng)設(shè)計(jì)方案有一定的理論研究工作經(jīng)驗(yàn)。
2,有一定的數(shù)據(jù)庫管理與大數(shù)據(jù)處理的基本知識。
三、師資力量
由業(yè)內(nèi)著名云計(jì)算專家親身講課:
楊老師
關(guān)鍵科學(xué)研究信息網(wǎng)絡(luò)剖析及其云計(jì)算有關(guān)技術(shù),長期性從業(yè)通訊網(wǎng)管系統(tǒng)、互聯(lián)網(wǎng)信息資源管理、商務(wù)智能(BI)及其電信網(wǎng)信息處理系統(tǒng)的科學(xué)研究開發(fā)設(shè)計(jì)工作中,主持人和參加了好幾個(gè)國家和廳局級基金項(xiàng)目,具備豐富多彩的工程項(xiàng)目實(shí)踐活動及軟件研發(fā)工作經(jīng)驗(yàn)。
四、學(xué)習(xí)培訓(xùn)關(guān)鍵點(diǎn)
互聯(lián)網(wǎng)技術(shù)點(diǎn)一下數(shù)據(jù)信息、傳感技術(shù)數(shù)據(jù)信息、日志文件、具備豐富多彩自然地理空間數(shù)據(jù)的數(shù)據(jù)網(wǎng)絡(luò)和涉及到互聯(lián)網(wǎng)的各種評價(jià),變成了海量數(shù)據(jù)的形式多樣。當(dāng)數(shù)據(jù)信息以不計(jì)其數(shù)TB持續(xù)提高的情況下,我們在內(nèi)部交易軟件的歷史時(shí)間信息內(nèi)容以外,必須一種根據(jù)大數(shù)據(jù)剖析的決策模型和技術(shù)適用。
五、培訓(xùn)計(jì)劃
講云計(jì)算及大數(shù)據(jù)處理技術(shù)詳細(xì)介紹
1)云計(jì)算的定義
2)云計(jì)算發(fā)展趨勢現(xiàn)況
3)大數(shù)據(jù)的定義
4)大數(shù)據(jù)的運(yùn)用
5)大數(shù)據(jù)關(guān)鍵技術(shù)
第二講Google中的關(guān)鍵技術(shù)
1)GFS系統(tǒng)文件
2)Chubby中的Paxos優(yōu)化算法
3)MapReduce技術(shù)體制
4)Bigtable表管理方法技術(shù)
第三講Hadoop系統(tǒng)文件HDFS以及文檔構(gòu)造
1)Hadoop項(xiàng)目概況
2)HDFS系統(tǒng)架構(gòu)
3)HDFS重要管理機(jī)制
4)HadoopvsGoogle
5)HadoopAPI
第四講MapReduce程序編寫實(shí)體模型以及應(yīng)用程序開發(fā)
1)MapReduce造成背景圖
2)MapReduce程序編寫實(shí)體模型
3)MapReduce完成體制
4)MapReduce經(jīng)典案例
第五講PigLatin以及應(yīng)用
1)Pig設(shè)計(jì)方案的總體目標(biāo)
2)PigLatine詳細(xì)介紹
3)Pig至關(guān)重要技術(shù)
4)Pig的好用實(shí)例
第六講數(shù)據(jù)庫管理Hive應(yīng)用
1)Hive設(shè)計(jì)方案總體目標(biāo)
2)Hive數(shù)據(jù)庫系統(tǒng)
3)Hive至關(guān)重要技術(shù)
4)Hive的應(yīng)用實(shí)例
第七講HBase和ZooKeeper應(yīng)用
1)Hbase管理機(jī)制介紹
2)HBase與HDFS
3)HBase的對外開放插口
4)ZooKeeper的數(shù)據(jù)庫系統(tǒng)
5)ZooKeeper的讀寫能力體制
6)ZooKeeper的操作方法
第八講數(shù)據(jù)抽取專用工具Sqoop應(yīng)用
1)數(shù)據(jù)抽取技術(shù)詳細(xì)介紹
2)Sqoop中的關(guān)鍵技術(shù)
3)Sqoop數(shù)據(jù)抽取對策
4)大數(shù)據(jù)挖掘及剖析
第九講當(dāng)今大數(shù)據(jù)中心的更新改造和變換剖析
1)流行商業(yè)服務(wù)大數(shù)據(jù)解決方法較為
2)流行開源系統(tǒng)云計(jì)算系統(tǒng)軟件較為
3)中國象征性大數(shù)據(jù)服務(wù)平臺較為
第十講各生產(chǎn)商的大數(shù)據(jù)產(chǎn)品簡介
1)IBM的大數(shù)據(jù)技術(shù)
2)HP的大數(shù)據(jù)技術(shù)
3)Teradata的大數(shù)據(jù)技術(shù)
4)其他生產(chǎn)商的大數(shù)據(jù)處理
六、培訓(xùn)目標(biāo)
1,全方位掌握大數(shù)據(jù)處理技術(shù)的有關(guān)知識。
2,學(xué)習(xí)培訓(xùn)Hadoop的關(guān)鍵技術(shù)方式 及其運(yùn)用特點(diǎn)。
3,深層次應(yīng)用Hadoop有關(guān)專用工具在大數(shù)據(jù)中的應(yīng)用。
4,把握傳統(tǒng)式大數(shù)據(jù)中心向云計(jì)算管理中心變換的關(guān)鍵技術(shù)。