分布式機器學習實戰(zhàn)

目錄

第1章互聯(lián)網(wǎng)公司大數(shù)據(jù)和人工智能那些事

1.1大數(shù)據(jù)和人工智能在互聯(lián)網(wǎng)公司扮演的角色和重要性

1.1.1什么是大數(shù)據(jù)，扮演的角色和重要性

1.1.2什么是人工智能，扮演的角色和重要性

1.1.3大數(shù)據(jù)和人工智能有什么區(qū)別，又是如何相互關聯(lián)

1.2大數(shù)據(jù)部門組織架構和各種職位介紹

1.2.1大數(shù)據(jù)部門組織架構

1.2.2各種職位介紹和技能要求

1.2.3不同職位相互協(xié)調配合關系

1.2.4各個職位的職業(yè)生涯規(guī)劃和發(fā)展路徑

1.2.5各個職位的市場平均薪資水平

第2章大數(shù)據(jù)算法系統(tǒng)架構

2.1經(jīng)典應用場景

2.2應用系統(tǒng)架構設計

第3章大數(shù)據(jù)基礎

3.1Hadoop大數(shù)據(jù)平臺搭建

3.1.1Hadoop原理和功能介紹

3.1.2Hadoop安裝部署

3.1.3Hadoop常用操作命令

3.2Hive數(shù)據(jù)倉庫實戰(zhàn)

3.2.1Hive原理和功能介紹

3.2.2Hive安裝部署

3.2.3Hive SQL操作

3.2.4UDF函數(shù)

3.2.5Hive數(shù)據(jù)倉庫模型設計

3.3HBase實戰(zhàn)

3.3.1HBase原理和功能介紹

3.3.2HBase數(shù)據(jù)結構和表詳解

3.3.3HBase安裝部署

3.3.4HBase Shell常用命令操作

3.3.5HBase客戶端類SQL工具Phoenix

3.3.6Hive集成HBase查詢數(shù)據(jù)

3.3.7HBase升級和數(shù)據(jù)遷移

3.4Sqoop數(shù)據(jù)ETL工具實戰(zhàn)

3.4.1Sqoop原理和功能介紹

3.4.2Sqoop常用操作

3.5Spark基礎

3.5.1Spark原理和介紹

3.5.2Spark MLlib機器學習介紹

3.5.3Spark GraphX圖計算介紹

3.5.4Spark Streaming流式計算介紹

3.5.5Scala編程入門和Spark編程

3.5.6Spark項目案例實戰(zhàn)和分布式部署

第4章Docker容器

4.1Docker介紹

4.1.1能用Docker做什么

4.1.2Docker容器基本概念

4.2Docker容器部署

4.2.1基礎環(huán)境安裝

4.2.2Docker常用命令

第5章Mahout分布式機器學習平臺

5.1Mahout挖掘平臺

5.1.1Mahout原理和介紹

5.1.2Mahout安裝部署

5.2Mahout機器學習算法

5.2.1Mahout算法概覽

5.2.2潛在狄利克雷分配模型

5.2.3MinHash聚類

5.2.4Kmeans聚類

5.2.5Canopy聚類

5.2.6MeanShift均值漂移聚類

5.2.7Fkmeans模糊聚類

5.2.8貝葉斯分類算法

5.2.9SGD邏輯回歸分類算法

5.2.10隨機森林分類算法

5.2.11關聯(lián)規(guī)則之頻繁項集挖掘算法

5.2.12協(xié)同過濾算法

5.2.13遺傳算法

第6章Spark分布式機器學習平臺

6.1Spark機器學習庫

6.1.1Spark機器學習簡介

6.1.2算法概覽

6.2各個算法介紹和編程實戰(zhàn)

6.2.1推薦算法交替最小二乘法

6.2.2邏輯回歸

6.2.3決策樹

6.2.4隨機森林

6.2.5梯度提升決策樹

6.2.6支持向量機

6.2.7樸素貝葉斯

6.2.8序列模式挖掘PrefixSpan

6.2.9Word2vec詞向量模型

6.2.10多層感知器神經(jīng)網(wǎng)絡

第7章分布式深度學習實戰(zhàn)

7.1TensorFlow深度學習框架

7.1.1TensorFlow原理和介紹

7.1.2TensorFlow安裝部署

7.2MXNet深度學習框架

7.2.1MXNet原理和介紹

7.2.2MXNet安裝部署

7.3神經(jīng)網(wǎng)絡算法

7.3.1多層感知器算法

7.3.2卷積神經(jīng)網(wǎng)絡

7.3.3循環(huán)神經(jīng)網(wǎng)絡

7.3.4長短期記憶神經(jīng)網(wǎng)絡

7.3.5端到端神經(jīng)網(wǎng)絡

7.3.6生成對抗網(wǎng)絡

7.3.7深度強化學習

7.3.8TensorFlow分布式訓練實戰(zhàn)

7.3.9分布式TensorFlow on Kubernetes集群實戰(zhàn)

第8章完整工業(yè)級系統(tǒng)實戰(zhàn)

8.1推薦算法系統(tǒng)實戰(zhàn)

8.1.1推薦系統(tǒng)架構設計

8.1.2推薦數(shù)據(jù)倉庫集市

8.1.3ETL數(shù)據(jù)處理

8.1.4協(xié)同過濾用戶行為挖掘

8.1.5ContentBase文本挖掘算法

8.1.6用戶畫像興趣標簽提取算法

8.1.7基于用戶心理學模型推薦

8.1.8多策略融合算法

8.1.9準實時在線學習推薦引擎

8.1.10Redis緩存處理

8.1.11分布式搜索

8.1.12推薦Rerank二次重排序算法

8.1.13在線Web實時推薦引擎服務

8.1.14在線AB測試推薦效果評估

8.1.15離線AB測試推薦效果評估

8.1.16推薦位管理平臺

8.2人臉識別實戰(zhàn)

8.2.1人臉識別原理與介紹

8.2.2人臉識別應用場景

8.2.3人臉檢測與對齊

8.2.4人臉識別比對

8.2.5人臉年齡識別

8.2.6人臉性別預測

8.3對話機器人實戰(zhàn)

8.3.1對話機器人原理與介紹

8.3.2基于TensorFlow的對話機器人

8.3.3基于MXNet的對話機器人

8.3.4基于深度強化學習的機器人

8.3.5基于搜索引擎的對話機器人

8.3.6對話機器人的Web服務工程化

參考文獻