阿里“豪擲”9000萬歐元收購 Flink 創(chuàng)始公司Data Artisans

消息，據(jù)外媒報道，1月7日，阿里巴巴以9000萬歐元收購了總部位于德國柏林的創(chuàng)業(yè)公司Data Artisans。

據(jù)了解，Data Artisans 成立于2014年，公司聯(lián)合創(chuàng)始人兼 CEO Kostas Tzoumas為開源流處理框架 Apache Flink 的創(chuàng)建者；公司 CTO Stephan Ewen 為Apache Flink PMC member。

Data Artisans 通過使用Apache Flink 為企業(yè)部署大規(guī)模的數(shù)據(jù)處理解決方案，使企業(yè)能夠管理和部署實時數(shù)據(jù)應(yīng)用程序，對數(shù)據(jù)做出即時反應(yīng)，做出更好更快的業(yè)務(wù)決策。據(jù)官網(wǎng)介紹，它的dA平臺由 Apache Flink 和 dA 應(yīng)用程序管理器組成，包括與容器編制、CI/CD、日志、指標(biāo)和狀態(tài)存儲的即時集成，并為公司提供所有流處理應(yīng)用程序的單一視圖。

包括荷蘭國際集團(tuán)(ING)、Netflix 和 Uber 在內(nèi)的全球公司使用 data Artisans的平臺 Apache Flink 為大型應(yīng)用提供實時分析、機(jī)器學(xué)習(xí)、搜索和內(nèi)容排名以及欺詐檢測服務(wù)。

該公司此前曾獲得 Btov、Tengelmann Ventures 和英特爾公司等投資的兩輪650萬歐元融資。

據(jù)了解，F(xiàn)link 早期起源于德國柏林工業(yè)大學(xué)的一個研究項目 Stratosphere，并于2014年4月捐獻(xiàn)給 Apache 軟件基金會，同時重新定位品牌為 Flink，經(jīng)過8個月孵化期，在2014年12月成功從 Apache 軟件基金會畢業(yè)，成為 Apache 頂級項目，從此開始在大數(shù)據(jù)領(lǐng)域航行。經(jīng)過最近4年的持續(xù)快速發(fā)展，Apache Flink 社區(qū)已經(jīng)培養(yǎng)出了42名 Committer 和19名 PMC Member。

據(jù)阿里技術(shù)官方公眾號介紹，阿里巴巴從2015年開始調(diào)研 Flink，并于2016年第一次在搜索場景中上線Flink，在經(jīng)過搜索大數(shù)據(jù)場景的檢驗后，2017年Flink開始在阿里巴巴集團(tuán)范圍內(nèi)支持各項實時計算業(yè)務(wù)。

到目前為止阿里巴巴基于 Flink 打造的實時計算平臺，已經(jīng)支持了包括淘寶、天貓、支付寶、高德、飛豬、優(yōu)酷、菜鳥、餓了么等所有阿里巴巴集團(tuán)下的所有子公司的數(shù)據(jù)業(yè)務(wù)，并通過阿里云向中小企業(yè)提供一站式實時計算服務(wù)。

至于選擇 Flink 的原因，阿里巴巴計算平臺事業(yè)部資深技術(shù)專家莫問曾在2018云棲大會的演講中表示：

隨著人工智能時代的降臨，數(shù)據(jù)量的爆發(fā)，在典型的大數(shù)據(jù)的業(yè)務(wù)場景下數(shù)據(jù)業(yè)務(wù)最通用的做法是：選用批處理的技術(shù)處理全量數(shù)據(jù)，采用流式計算處理實時增量數(shù)據(jù)。在絕大多數(shù)的業(yè)務(wù)場景之下，用戶的業(yè)務(wù)邏輯在批處理和流處理之中往往是相同的。但是，用戶用于批處理和流處理的兩套計算引擎是不同的。

因此，用戶通常需要寫兩套代碼。毫無疑問，這帶來了一些額外的負(fù)擔(dān)和成本。阿里巴巴的商品數(shù)據(jù)處理就經(jīng)常需要面對增量和全量兩套不同的業(yè)務(wù)流程問題。

所以阿里就在想，我們能不能有一套統(tǒng)一的大數(shù)據(jù)引擎技術(shù)，用戶只需要根據(jù)自己的業(yè)務(wù)邏輯開發(fā)一套代碼。這樣在各種不同的場景下，不管是全量數(shù)據(jù)還是增量數(shù)據(jù)，亦或者實時處理，一套方案即可全部支持，這就是阿里選擇Flink的背景和初衷。

為了思考下一代大數(shù)據(jù)引擎的方向以及未來趨勢，我們做了很多新技術(shù)的調(diào)研。結(jié)合大量調(diào)研結(jié)果，我們最后得出的結(jié)論是：解決通用大數(shù)據(jù)計算需求，批流融合的計算引擎，才是大數(shù)據(jù)技術(shù)的發(fā)展方向，并且最終我們選擇了Flink。

據(jù)阿里巴巴集團(tuán)副總裁、搜索事業(yè)部與計算平臺事業(yè)部負(fù)責(zé)人周靖人介紹，在大數(shù)據(jù)領(lǐng)域，阿里巴巴最近幾年對 Apache Flink 社區(qū)進(jìn)行了持續(xù)大力的投入：

貢獻(xiàn)超過15w行代碼；

主導(dǎo)建立了Flink China中文社區(qū)，加速Flink在國內(nèi)的生態(tài)建設(shè)；

今年開始在北京、杭州、上海、深圳等地多次組織Flink Meetup。

并且，阿里巴巴內(nèi)部 Flink 版本（Blink）將于2019年1月正式開源。

據(jù)了解，2018年12月下旬，阿里巴巴集團(tuán)主辦的Flink Forward China大會專門邀請了 Data Artisans 的 CTO Stephan Ewen 來到現(xiàn)場發(fā)表演講，分享關(guān)于 Flink 發(fā)展趨勢的看法。

此次阿里“豪擲”9000萬歐元將 Flink 創(chuàng)始公司 Data Artisans 收入囊中，可以看出阿里在進(jìn)一步鞏固其大數(shù)據(jù)技術(shù)核心壁壘，完善 Flink 技術(shù)生態(tài)及應(yīng)用場景，主導(dǎo)并引領(lǐng)以 Flink 為主流技術(shù)方向的實時計算平臺建設(shè)。

關(guān)于此次收購的意圖，也第一時間向阿里計算平臺事業(yè)部公關(guān)負(fù)責(zé)人求證，對方表示目前還不方便透露太多。

相關(guān)文章：

超大規(guī)模圖計算在阿里巴巴的應(yīng)用都有哪些？四篇KDD oral論文搶先看（附論文下載）| KDD 2018

阿里巴巴2019財年Q2營收突破850億 云計算、金融科技助陣“核心電商”

阿里巴巴開源深度學(xué)習(xí)框架 X-Deep Learning，引領(lǐng)高維稀疏數(shù)據(jù)場景的深度學(xué)習(xí)標(biāo)準(zhǔn)

原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。