干貨|簡單易懂的深度學習指南，不服來辯?。ǘ?/h2>

原創|大數據新聞|編輯：蔣永|2019-03-06 11:09:26.000|閱讀 263 次

概述：上次我們學習什么是深度學習，本次我們第二部分，將介紹 Cloudera 數據和機器學習的統一平臺，并展示實施深度學習的四種方法。最后，我們提供六個實用技巧，幫助您的組織開始進行深度學習。

# 界面/圖表報表/文檔/IDE等千款熱門軟控件火熱銷售中 >>

相關鏈接：

• Cloudera助力英國銀行Santander新一代數據倉庫誕生！
• 【Cloudera案例】利用工業物聯網及機器學習技術使設備利用率翻倍
• 【Cloudera案例】應用于中聯重科制造業大數據成功案例
• 工業大數據在智能制造中應用價值原來這么多！
• 案例|Cloudera助力中國大地保險實現大數據應用平臺
• 漲知識！通過物聯網（IoT）技術改善醫院患者護理以及提高醫院安全性
• 采訪|先關注“無聊”的業務問題，才能發掘AI的實際價值
• 干貨|簡單易懂的深度學習指南，不服來辯?。ㄒ唬?/a>
• 它用了不起眼的“企業數據中心”，坐穩了全球搜索引擎領先地位
• 英特爾和Cloudera攜手合作，為客戶帶來性能強悍的傲騰?DC持續性內存
• 保險行業如何實現數字化轉型？通過大數據，機器學習和物聯網發揮核心作用
• 【Cloudera案例】利用數據洞察提供個性化服務，改善保險風險評估
• Cloudera案例|HyGuard ?用聲學為物聯網提供預測性維護解決方案
• Cloudera案例|某大型股份制商業銀行智能大數據營銷平臺
• Cloudera案例|大數據助力航旅企業信息化建設，為客戶創造完美出行體驗
• Cloudera案例|某大型券商機構智能大數據營銷平臺
• Cloudera案例|數據管理的重大轉變—更有效地訪問和探索數據
• Cloudera行業案例|自主車輛方格旗
• Cloudera行業案例|擁抱大數據和多功能分析以更好地管理復雜性
• Cloudera案例|Meharry通過實時數據科學實現醫療保健公平性
• 本期連載目錄 > > > >

在上一節的學習中，我們主要認識了什么是深度學習，深度學習有哪些成功的應用以及深度學習的優點與缺點，總體來說就是讓我們深度的了解何為深度學習，就如文字開頭所說的“人們往往為技術而興奮。但深度學習是企業用來解決實際問題的工具。僅此而已，毋庸夸大，也無需貶低?！?

對于還不了解什么是深度學習的朋友可以先閱讀《干貨|簡單易懂的深度學習指南，不服來辯！（一）》學習一下。

本篇文章我們不在對深度學習的基礎做講解了，而是介紹Cloudera數據和機器學習的統一平臺，并提供六個實用技巧，幫助您的組織開始進行深度學習。

話不多說，開始我們今天的學習吧！

Cloudera 的深度學習

Cloudera是數據和機器學習的統一平臺。使用Cloudera，您可以深度學習您的數據，而不是相反。

對于當今復雜的技術環境，企業需要選擇和靈活性。 Cloudera 具有多種方式來訓練和部署深度學習模型，無需新的孤島或數據遷移。

Cloudera 數據科學工作臺

Cloudera 數據科學工作臺（CDSW）可實現快速，簡單，安全的自助數據科學。缺 省條件下就是安全及合規的，支持完整的 Cloudera 認證、授權、加密和治理。

CDSW 為數據科學家提供了一個基于瀏覽器的開發環境，適用于 Python，R 和 Scala。用戶可以在自定義設置中下載和實驗最新的庫和框架，并輕松地與同行共 享項目。該軟件包括內置的調度，監控和郵件警報。

圖：Cloudera 數據科學工作臺

最新的 CDSW 版本支持 GPU 的設備。 GPU 是加速計算密集型工作負載的專用處理器。 GPU 特別適合于深度學習模型的訓練步驟。 CDSW 使數據科學家可以將傳統硬件用于數據準備和發現等任務，并在 GPU 加速的機器上訓練深度學習模型。

CDSW 用戶共享可用的 GPU 資源。用戶請求特定數量的 GPU 實例，最多可達一個節點上的總數。 CDSW在運行期間將GPU分配給作業。項目可以使用隔離版本的庫，甚至通過 CDSW 的可擴展引擎功能，使用不同的 CUDA 和 cuDNN 版本。

使用CDSW的數據科學家可以使用任何具有Python，R或Scala API的深度學習框架，包 括 TensorFlow，Keras，Theano，Microsoft Cognitive Toolkit（CNTK），Caffe，PyTorch，DL4J，Apache MXNet，Torch 和 BigDL。

如何開始進行深度學習

在最近的數據科學和機器學習 Hype Cycle 報告中，Gartner 將深度學習定位成“膨脹中期望的高峰”：

在這個過份狂熱和不現實的預測階段中，技術領導者的廣泛宣傳活動取得了一些成功，但更多的是失敗，因為技術被推向極限。唯一賺錢的企業是會議組織者和 雜志出版社。

關于深度學習的炒作給企業架構師同時帶來機會和風險。一方面，廣為傳播的成 功案例增加了高管的興趣尋求深度學習獲得競爭優勢。另一方面，過度的熱情可 能導致組織機構投資昂貴而無用，或將股價拉低，因而從長遠角度，削弱了從深度學習中獲利的能力。

與大多數新技術一樣，快速變化的標準使投資具有挑戰性。谷歌發布了用于深度 學習的 TensorFlow 軟件并在 2015 年 11 月開放源代碼；在幾個月內，它成為開源生態系統中最為積極開發的機器學習項目。自從谷歌發布以來，亞馬遜，微軟和英特爾都已經發布了深度學習的開源項目。雖然 TensorFlow 是當今最受數據科學家歡迎的深度學習框架，但是我們并不確認它會永久保持這種狀態。

鑒于深度學習的力量和潛力，我們有幾個務實的提示。

專注于解決業務問題。谷歌，微軟和百度并沒有因為深度學習很酷，或者因為咨詢顧問告訴他們創新是重要的，而成為深度學習的重磅力量。他們這樣做是因為他們有緊迫的業務問題，深度學習為解決這個問題提供了一個辦法。

深度學習也可能是您企業機構的正確工具。但是，如果您沒有仔細地定義業務問題， 概括出捕獲和管理數據的策略，并先嘗試使用簡單的技術，您可能會構建一個沒 人會用的深度學習功能。

仔細選擇試點項目。如果您的機構沒有接觸過深度學習，計劃的長期成功可能取決于您最初幾個項目的結果。深度學習最有可能對以下項目產生影響：

• 圖像和視頻分類或標記
• 對象識別
• 手寫識別
• 語音識別
• 語音翻譯
• 文字處理

這些問題通常具有上述我們認為的深度學習的屬性：高基數結果，維度和未標記 的數據。

嘗試用深度學習改進現有的以常規技術為基礎的模型，大多數時間都會產生令人 失望的結果。為了獲得更好的結果，數據科學家將向建模過程引入新的數據。例如， 醫院通過添加醫療專業人員所記錄的患者數據來提高預測再住院模型的準確性。

首先整理數據。大概很有沖動讓你的團隊一頭扎進訓練深度學習的模型吧。這種做法可能有助于學習。但請記住，在每一個深度學習的成功故事背后，都有一個數據的成功故事。

成功的深度學習應用基于三個不同流程的定義數據流：

• 初步模型訓練
• 模型的更新
• 推論

如何設計這些流程將決定您的應用的成功。例如，盡管可以將大型數據集復制到 一個離線平臺進行初始訓練，但是對于模型的更新，因為要不斷重復執行，而可 能變得成本高昂。在今天快節奏的業務中，模型的頻繁更新是機器學習所有分支 的常態。除非您允許這樣做，否則您的項目可能會成為高維護費用“孤兒”。

同樣，除非您的團隊已經想清楚如何使用一個深度學習模型來進行推論，否則您 很有可能會創建一個沒有人用的偉大模型。使用該應用的業務可能需要具有服務 級別保證的低延遲推論。您的深度學習項目規劃要考慮這一點，否則項目將失敗。

擁抱開源。數據科學家更喜歡開源軟件。所有最廣泛使用的深度學習框架都是開源的。市場上有一些商業選擇，但沒有證據表明它們性能優于開源框架。

利用傳遞學習。除非您的機構已經有從頭開始構建深度學習模型的豐富經驗，否則預先訓練的模型是開始的最佳方式。檢查公開的模型庫，如 Caffe Model Zoo。如果您找到一個近似于您要解決的問題的模型，先不要改變，運行它以建立精確度基線。使用傳遞學習建立在現有的模型上，而不是從頭開始。傳遞學習減少了對大量訓練數據集和計算能力的需求。

不要創建新的孤島。您的組織投資數百萬美元無數時間來消除阻礙整合的孤島。絕對不要再創造一個新的孤單。一些供應商認為，深度學習是新鮮事物與眾不同，因而需要一個全新的高級分析平臺。請記住：將數據帶入深度學習平臺遠遠難于將深度學習帶入您的數據平臺。

關于 Cloudera

Cloudera基于最新的開源技術提供用于機器學習和分析，優化于云端的現代化平臺。全球領先的組織機構都信任 Cloudera，通過高效地捕捉、存儲、處理和分析海量數據來幫助他們解決最具挑戰性的業務問題。

慧都大數據專業團隊為企業提供Cloudera大數據平臺搭建，免費業務咨詢，定制開發等完整服務，快速、輕松、低成本將任何Hadoop集群從試用階段轉移到生產階段。

歡迎撥打慧都熱線023-68661681或咨詢，我們將幫您轉接大數據專家團隊，并發送相關行業資料給您！

標簽：大數據解決方案

本站文章除注明轉載外，均為本站原創或翻譯。歡迎任何形式的轉載，但請務必注明出處、不得修改原文相關鏈接，如果存在內容上的異議請郵件反饋至chenjj@ke049m.cn

上一篇：當日本壽司餐廳相遇Qlik，分析出讓你舌尖心動的料理 下一篇：干貨|簡單易懂的深度學習指南，不服來辯！（一）