百度AI快車道駛入北京,解析高效,易用的推薦排序系統解決方案

“《慶餘年》更新了嗎?”最近,當“追劇大軍”把熱情和目光投向了“小范大人”和“小言公子”後,這句話似乎成了各位“同道中人”每天關心的焦點。在樂此不疲的追劇同時,各大視頻平臺也越來越貼心——“猜你在追”幾乎成了首頁標配。而事實上,這些“個性化”的推薦內容背後是一套非常複雜的系統在運轉,這之中將耗費的精力和成本不言而喻。

ElasticCTR是百度飛槳為了更好實現企業低開發成本、快速集成需求而推出的端到端開發套件之一,這些面向應用任務的產業級開發套件,可專用於實現不同應用任務的全流程開發、訓練和部署。12月21日,百度AI快車道企業深度學習實戰營針對ElasticCTR推薦排序系統解決方案,在北京開啟實踐專場活動。百度多位資深工程師領銜,與開發者們深度解析飛槳推薦系統解決方案ElasticCTR及其應用實戰分享。

百度AI快車道駛入北京,解析高效,易用的推薦排序系統解決方案

(ElasticCTR整體架構)

據講師介紹,ElasticCTR源於產業實踐,融合了百度在推薦排序業務方面成熟的經驗,具備較多工業級的屬性。目前其使用的流式並行訓練設計模式已經在百度內部的信息流產品、搜索產品、原生廣告中得以驗證應用。講師隨後與現場開發者分享了利用飛槳分佈式訓練設計模式的優勢。由於企業在開發過程中需要處理大量的數據,如何節省時間和成本,毫無疑問是企業關注的重點。深度學習模型的效果迭代對訓練速度非常敏感,能夠帶來高性能並行訓練的深度學習框架也符合企業開發和應用的需求。飛槳目前開源的Parameter Server分佈式訓練架構在此體現了顯著特性,可支持千億級別特徵規模的訓練,低成本即可擴展CPU節點,提高數據下載、上傳併發能力,同時還可以保障模型收斂效果,並提供同步訓練、半異步訓練、全異步訓練、 GEO異步訓練四種訓練模式,開發者可根據特定需求選擇最優模式,達到降本增效的目的。

除此之外,在推薦場景下ElasticCTR可採用飛槳高性能分佈式訓練Fleet引擎,作為一個分佈式 High-level API,Fleet可以通過十行代碼完成單機到多機的轉換,Fleet的全異步並行訓練設計,可以在保證模型效果的情況下大幅度提升訓練吞吐,節省大量機器資源。

百度AI快車道駛入北京,解析高效,易用的推薦排序系統解決方案

(ElasticCTR 開源軟件棧)

緊接著,講師與大家分享了ElasticCTR的其他優勢。ElasticCTR提供完全開源的軟件棧,保證企業開發人員能夠快速二次開發和部署。飛槳還提供了遠程預估服務Paddle Serving,其基於Baidu-RPC的高性能預測服務部署框架,來源於內部大規模業務線,通過開源面向企業用戶,具備完整的在線服務能力,並提供易用的client API。此外ElasticCTR採用Kubenetes社區下的Volcano進行任務排版、資源調度,兼容Hadoop生態的文件系統HDFS,訓練過程中的指標可視化集成了MLFlow。無論幫助大廠適配部署自己研發的推薦系統,還是為中小型企業減少“基層”研發時間提供通用的模型,ElasticCTR都在盡最大努力解決企業從開發到部署過程中遇到的問題。

百度AI快車道駛入北京,解析高效,易用的推薦排序系統解決方案

(ElasticCTR配置訓練)

在活動最後的應用實戰環節,導師從環境準備、參數配置、執行訓練、監控狀態、預測服務的整體流程,讓學員們一步步體驗ElasticCTR推薦排序系統解決方案的實際應用。活動現場學員們熱情極高,“沒想到ElasticCTR這麼容易操作,一鍵就可以完成配置訓練”,一位學員這樣說道。另外,大家也表示對於ElasticCTR之後能適用更多特定業務場景表示期待,也希望百度AI快車道能多舉辦ElasticCTR的活動,讓更多人瞭解它的優勢。

百度AI快車道駛入北京,解析高效,易用的推薦排序系統解決方案

(百度AI快車道ElasticCTR北京活動現場)

百度 AI 快車道企業深度學習實戰營是百度依託自身深厚的深度學習技術實踐經驗,面向有 AI 技術需求企業的算法工程師、架構師群體提供的快速應用扶持計劃。計劃的學習內容囊括了10套工程實施與深度學習技術落地結合的詳細方案,覆蓋百度領先的AI技術和業務應用場景的深入剖析,如OCR、精密儀器質檢、推薦排序經典場景、遙感圖像處理等;源於百度業務實踐的深度學習平臺飛槳的性能優勢、模型優勢、生態優勢的解讀;百度自研和頂級學術會議魁首算法、預訓練模型的詳細介紹,還有與案例和算法緊密相扣的在線實驗,並以"學來即用"的課程,進行業務問題定位、框架及算法的快速應用培訓,為更多企業帶去深度學習技術和經驗分享。

今年百度AI快車道帶著自研精品課程已在全國多個城市開講,乾貨滿滿的課程贏得開發者一致好評。雖然AI快車道在2019年的行程即將告一段落,但對於想要重溫課程或錯過現場聽講的開發者朋友,可以進入“IT大咖說”網站後搜索“AI快車道”收看活動直播,百度AI快車道隨時與你相伴,在今後繼續為你帶來“驚喜”。


分享到:


相關文章: