阿里雲重磅開源實時計算平臺,挑戰計算領域的“珠峰”

信息爆炸的時代,智能推薦已經被應用到各類互聯網產品中,但為千萬級甚至億級規模的用戶實時做精準的推薦難度極高。這一難題已經被阿里攻克了:雙11的第1分鐘,數千萬人同時湧進天貓,點開APP的一瞬間,心儀的寶貝就已經出現在屏幕上,這種一秒都沒延遲的體驗來自阿里雲的"計算王牌"——實時計算平臺Blink。

1月28日,阿里雲正式宣佈,將這一技術開源,要讓所有計算在線、實時,幫助人類追趕時間。

阿里雲重磅開源實時計算平臺,挑戰計算領域的“珠峰”

Blink是一項典型的"傳火於薪"開源技術,傳承自Flink開源框架,後者最早適用於小流量互聯網場景的數據處理。

由於看好實時計算,阿里率先對Flink進行改造,並將Flink的計算能力推向巔峰,推出內部版Blink,將計算延遲降低到人類無法感知的毫秒級:瀏覽網頁的時候,你只是眨了一下眼睛,但在淘寶、天貓處理的信息已經刷新了17億次。

實時計算到底有多重要?2004年,谷歌開啟了離線計算時代,可以針對海量數據進行定時計算,但隨著電商、金融等行業的發展對大數據計算提出了新的需求,在金融交易場景裡,風控系統如果不能實時觀察每一個賬戶的行為動態,就可能因為1秒的延遲遺漏風險,無法阻斷危險交易,造成消費者損失。但實時計算突破了這一技術瓶頸。

現在,阿里巴巴集團的全部核心業務已經用上Blink。除了技術大考雙11之外,ET城市大腦實時計算著杭州1300個信號燈路口、4500路視頻,保障著交通動脈的通暢;淘寶、天貓每天為數億用戶展現實時的"專屬"頁面。

未來,這項技術還會被應用到社會的各個場景:工廠設備的物聯網設備能實時分析數據、提高生產良品率;物流派送平臺能第一時間下單,把商品及時送到消費者手中;導航軟件時刻緊隨出行軌跡,不再錯過轉彎口……

關於這次開源,Data Artisans(Flink創始公司)的 CTO Stephan Ewen興奮地表示:"阿里巴巴是Flink最大的貢獻者之一,很高興阿里能將內部優化的Flink版本開源給社區,讓開發者享受到更先進的計算能力。

"阿里巴巴集團副總裁周靖人說:"我們一直密切關注並積極參與最前沿的計算技術。Flink過去幾年在計算領域獲得了很大成功,阿里、Uber、Netflix等都是Flink的受益者,我們希望通過這次開源進一步服務整個社會。"

在此之前,阿里已經為Flink社區貢獻近20萬行代碼改動,參與建立了首個Flink中文社區,推動了這項實時計算技術在國內的發展。

據瞭解,在各大開源社區,阿里表現活躍,已有400多個開源項目,涉及中間件、框架、組件、數據庫、存儲等,包括滴滴、網易、Netflix、Uber在內的互聯網公司都是阿里開源項目的使用者。在GitHub貢獻排行榜上,阿里是唯一一家入圍頂尖貢獻名單的中國公司。


分享到:


相關文章: