大數(shù)據(jù)和Python分析應(yīng)用實戰(zhàn)-培訓(xùn)大綱

《大數(shù)據(jù)和Python分析應(yīng)用實踐》
培訓(xùn)大綱
一、課程簡介
大數(shù)據(jù)建模與分析挖掘技術(shù)已經(jīng)逐步地應(yīng)用到新興互聯(lián)網(wǎng)企業(yè)（如電子商務(wù)網(wǎng)站、搜索引擎、社交網(wǎng)站、互聯(lián)網(wǎng)廣告服務(wù)提供商等）、銀行金融證券企業(yè)、電信運營等行業(yè)，給這些行業(yè)帶來了一定的數(shù)據(jù)價值增值作用。
本次課程面向有一定的數(shù)據(jù)分析挖掘算法基礎(chǔ)的工程師，帶大家實踐大數(shù)據(jù)分析挖掘平臺的項目訓(xùn)練，系統(tǒng)地講解：
（1）Hadoop和Spark大數(shù)據(jù)建模、分析挖掘技術(shù)體系及其平臺方案實現(xiàn)；
（2）大數(shù)據(jù)分析挖掘和機器學(xué)習(xí)的模型、建模方法和案例，重點是決策樹機器學(xué)習(xí)模型和關(guān)聯(lián)規(guī)則機器學(xué)習(xí)模型及其應(yīng)用；
（3）SPSS大數(shù)據(jù)建模與挖掘軟件的應(yīng)用實踐，包括決策樹，關(guān)聯(lián)規(guī)則，樸素貝葉斯網(wǎng)絡(luò)，SVM模型的實踐與操作；
（4）Python樸素貝葉斯、決策樹、邏輯回歸機器學(xué)習(xí)模型及應(yīng)用實踐操作；
（5）Spark MLlib大數(shù)據(jù)建模與機器學(xué)習(xí)的應(yīng)用實踐；
（6）機器學(xué)習(xí)和大數(shù)據(jù)建模在電商、電信領(lǐng)域的用戶畫像應(yīng)用案例。
學(xué)員需要準(zhǔn)備的筆記本配置：i5及以上CPU，4GB及以上內(nèi)存，硬盤空間預(yù)留50GB（可用移動硬盤），基本的大數(shù)據(jù)分析平臺所依賴的軟件包和依賴庫等。
本課程基本的實踐環(huán)境是操作系統(tǒng)：Windows或Linux。
大數(shù)據(jù)建模挖掘軟件包括：SPSS Modeler 15，Python 3，Anaconda 4，Hadoop 2.7.*，Spark 2.1.*。
二、培訓(xùn)人群
1.大數(shù)據(jù)分析應(yīng)用開發(fā)工程師
2.大數(shù)據(jù)分析項目的規(guī)劃咨詢管理人員
3.大數(shù)據(jù)分析項目的IT項目高管人員
4.大數(shù)據(jù)分析與挖掘處理算法應(yīng)用工程師
5.大數(shù)據(jù)分析集群運維工程師
6.大數(shù)據(jù)分析項目的售前和售后技術(shù)支持服務(wù)人員
三、培訓(xùn)特色
定制授課+ 實戰(zhàn)案例訓(xùn)練+ 互動咨詢討論，共4天（可擴展到6天和8天）
本課程采用技術(shù)原理與項目實戰(zhàn)相結(jié)合的方式進行教學(xué)，在講授原理的過程中，穿插實際的系統(tǒng)操作，本課程講師也精心準(zhǔn)備的實際的應(yīng)用案例供學(xué)員動手訓(xùn)練。

四、培訓(xùn)目標(biāo)
讓學(xué)員掌握在大數(shù)據(jù)、人工智能下的大數(shù)據(jù)建模、分析挖掘技術(shù)和機器學(xué)習(xí)算法模型的應(yīng)用。
讓學(xué)員掌握大數(shù)據(jù)建模與分析挖掘軟件的應(yīng)用實踐。
讓學(xué)員掌握SPSS Modeler，Python，Spark MLlib等大數(shù)據(jù)建模、分析、挖掘的應(yīng)用實戰(zhàn)。
五、培訓(xùn)大綱
時間
專題
詳細(xì)內(nèi)容與知識點
第一天
Hadoop大數(shù)據(jù)技術(shù)平臺實戰(zhàn)
Hadoop大數(shù)據(jù)平臺
HDFS分布式存儲
MapReduce分布式并行計算
Hadoop解決方案
Hive On Hadoop數(shù)據(jù)倉庫方案
第二天
Spark大數(shù)據(jù)處理平臺實戰(zhàn)
Spark實時處理分析
Spark RDD編程
Spark SQL數(shù)據(jù)分析
Spark MLlib介紹
Spark Streaming流處理實踐
第三天
大數(shù)據(jù)建模、分析挖掘技術(shù)體系及其平臺方案實現(xiàn)
大數(shù)據(jù)挖掘模型
機器學(xué)習(xí)技術(shù)和模型
有監(jiān)督學(xué)習(xí)、無監(jiān)督學(xué)習(xí)和半監(jiān)督學(xué)習(xí)
大數(shù)據(jù)建模和挖掘的應(yīng)用場景、挖掘過程
常見的大數(shù)據(jù)建模工具和機器學(xué)習(xí)工具（SPSS Modeler和Python）
大數(shù)據(jù)分析建模的案例（運營商案例）
Python大數(shù)據(jù)決策樹算法、模型、建模、挖掘和分析實踐
決策樹的原理
決策樹的算法實現(xiàn)
決策樹用于分析挖掘的建模實現(xiàn)
決策樹的評估
決策樹的應(yīng)用：客戶流失預(yù)測
第四天
Python大數(shù)據(jù)建模與挖掘軟件的應(yīng)用實踐
Python決策樹建模實踐操作
Python樸素貝葉斯分類實踐操作
Python關(guān)聯(lián)規(guī)則建模實踐操作
大數(shù)據(jù)關(guān)聯(lián)規(guī)則算法、模型、建模、挖掘和分析實踐
關(guān)聯(lián)規(guī)則和頻繁模式挖掘的原理
關(guān)聯(lián)規(guī)則的算法實現(xiàn)、建模
Apriori和FP-growth關(guān)聯(lián)分析建模
關(guān)聯(lián)規(guī)則分析挖掘模型的評估
關(guān)聯(lián)規(guī)則挖掘的應(yīng)用：交叉銷售、個性化推薦
第五天
Python樸素貝葉斯、決策樹、邏輯回歸機器學(xué)習(xí)模型及應(yīng)用實踐操作
Python：大數(shù)據(jù)建模挖掘和機器學(xué)習(xí)概述
Python樸素貝葉斯建模與應(yīng)用
Python決策樹建模與應(yīng)用
Python邏輯回歸建模與應(yīng)用
Python大數(shù)據(jù)建模與機器學(xué)習(xí)的實踐操作
Python TensorFlow深度學(xué)習(xí)應(yīng)用實踐
TensorFlow深度學(xué)習(xí)框架
CNN深度學(xué)習(xí)實踐
非結(jié)構(gòu)化文本數(shù)據(jù)分類實戰(zhàn)
大數(shù)據(jù)、Python數(shù)據(jù)分析機器學(xué)習(xí)應(yīng)用案例
案例分享
討論、交流

師資簡介
鐘運琴老師，男，目前在中國科學(xué)院某研究所工作，高級工程師，副研究員，課題組長，團隊成員二十余人，博士畢業(yè)于中國科學(xué)院，博士、博士后，獲工學(xué)博士學(xué)位（計算機專業(yè)），博士后研究方向為人工智能與數(shù)據(jù)分析科學(xué)，曾在國內(nèi)某高校和某大型通信企業(yè)工作過。人工智能、大數(shù)據(jù)、云計算系列課程建設(shè)與教學(xué)專家，新技術(shù)課程開發(fā)組長。近八年來帶領(lǐng)團隊主要從事大數(shù)據(jù)管理與高性能分析處理（Hadoop、Spark、Storm）、大數(shù)據(jù)倉庫（HIVE）和實時數(shù)據(jù)倉庫（SparkSQL、Shark），大數(shù)據(jù)建模挖掘與機器學(xué)習(xí)（Mahout、MLib、Oryx、Pentaho BI、SAS、SPSS、R等）、MPP并行數(shù)據(jù)倉庫（Greenplum etc）、NoSQL與NewSQL分布式數(shù)據(jù)庫（HBase、MongoDB、Cassandra etc）、（移動）電子商務(wù)平臺、大數(shù)據(jù)搜索平臺（ElasticSearch、Solr、Lucene等）、云計算與虛擬化（OpenStack，VMware，XenServer，CloudStack，KVM，Docker，SaaS服務(wù)）、云存儲系統(tǒng)、Swift對象存儲系統(tǒng)、網(wǎng)絡(luò)GIS地圖服務(wù)器、互聯(lián)網(wǎng)+在線教育云平臺方面的項目研發(fā)與管理工作。鐘老師參與了十余項云計算、大數(shù)據(jù)分析處理、銀行與證券公司金融客戶分析系統(tǒng)、金融防詐騙分析預(yù)警系統(tǒng)、用戶行為分析系統(tǒng)和銀行理財產(chǎn)品推薦系統(tǒng)、移動互聯(lián)網(wǎng)和網(wǎng)絡(luò)地圖服務(wù)器相關(guān)的國家863、973計劃項目，以及承擔(dān)了二十余項企業(yè)合作的橫向項目，有著豐富的項目咨詢與規(guī)劃論證經(jīng)驗，參與承擔(dān)過十余個大型信息化系統(tǒng)咨詢項目。在學(xué)術(shù)期刊和國際會議上發(fā)表了10余篇SCI/EI索引學(xué)術(shù)論文以及10余項發(fā)明專利和軟件著作。參與過互聯(lián)網(wǎng)產(chǎn)品創(chuàng)業(yè)公司的創(chuàng)建與研發(fā)運營全過程，并擔(dān)任若干家互聯(lián)網(wǎng)公司的咨詢顧問以及兩家上市公司的信息化顧問。鐘老師有著九年多的企業(yè)內(nèi)訓(xùn)和公開課培訓(xùn)講師經(jīng)歷，主要講授大數(shù)據(jù)平臺、云計算、移動互聯(lián)網(wǎng)、電子商務(wù)、IT信息軟件項目管理、企業(yè)信息化規(guī)劃與管理、IT戰(zhàn)略規(guī)劃與企業(yè)架構(gòu)、數(shù)據(jù)中心主機規(guī)劃與IDC系統(tǒng)運營等企業(yè)實戰(zhàn)類培訓(xùn)課程。鐘老師將原理技術(shù)剖析和應(yīng)用實戰(zhàn)相結(jié)合的授課風(fēng)格受到廣大公開課學(xué)員和企業(yè)內(nèi)訓(xùn)客戶學(xué)員的歡迎，鐘老師已授課的企業(yè)內(nèi)訓(xùn)客戶包括：中海油信息中心、中國移動總部和若干個省級分公司、國家電網(wǎng)總部以及若干下屬企業(yè)、中石化信息中心、中國聯(lián)通、廣東移動、中移動南方基地、勝利油田、天津石化、PICC人財保險總部信息部、重慶移動、中國郵政、湖北移動、東軟總部、江蘇移動、徽商銀行、中移動南方基地、攀商銀行、江蘇南瑞集團總部信息部、北京銀行、燕山石化總部信息部、航天科技集團某院所、航天科工某院所、公安部出入境管理局、中國人壽總部信息技術(shù)部、中石油總部信息部與若干直屬企業(yè)信息部、上海寶康電子、中電集團某所、中國移動咪咕公司總部、廣東聯(lián)合電子、瑞中科技、國家電網(wǎng)研究院、廣西移動、廣東電信、汕頭移動、惠州移動、江蘇移動、浙江移動、海南省移動、廣東電信研究院、?？谑幸苿?、中國聯(lián)通研究院、貴州省移動、北京市移動、興業(yè)銀行（上海），中移動研究院杭州研發(fā)中心、大慶油田、廣東電信實業(yè)公司等九十余家國內(nèi)大型國有企事業(yè)單位和民營上市公司。鐘老師還講授過一百三十余場云計算、大數(shù)據(jù)、移動互聯(lián)網(wǎng)公開課培訓(xùn)課程。

鐘運琴老師的其它課程