摘要:近日,全球著名開源社區(qū)基金會宣布百度開源的項目全票通過進入孵化器。這是百度繼后第二個進入基金會的項目,充分彰顯了百度開源速度。前身是百度,自年月在上開源以來,收獲多個,目前性能和易用性方面已達到業(yè)界領(lǐng)先水平。
近日,全球著名開源社區(qū)Apache基金會宣布“百度開源的Doris項目全票通過進入Apache孵化器”。這是百度繼ECharts后第二個進入Apache基金會的項目,充分彰顯了百度“開源速度”。
Doris是百度開發(fā)的面向在線報表和分析的數(shù)據(jù)倉庫系統(tǒng),可以對標于商業(yè)的 MPP 數(shù)據(jù)倉庫系統(tǒng),比如Greenplum、Vertica、Teradata 等。
Doris 前身是百度Palo,自2017年8月在Github上開源以來,收獲700多個Star,目前性能和易用性方面已達到業(yè)界領(lǐng)先水平。同時,Doris 在百度內(nèi)部應用于200多個產(chǎn)品線,在公有云和ToB業(yè)務(wù)中也獲得了高度認可,外部已有包括小米、瓜子在內(nèi)的十多家公司使用。
Doris 主要基于 C++ 和 Java 開發(fā),集成了 Google Mesa 和 Apache Impala 的技術(shù)。其中Mesa 是一個高度可擴展的分析數(shù)據(jù)存儲系統(tǒng),用于存儲與 Google 互聯(lián)網(wǎng)廣告業(yè)務(wù)相關(guān)的關(guān)鍵測量數(shù)據(jù)。Impala是一種基于Hadoop數(shù)據(jù)處理環(huán)境的現(xiàn)代 MPP SQL 引擎。
Doris項目負責人馬如悅介紹到:“在 Mesa 與 Impala 進行組合的基礎(chǔ)上,Doris 被設(shè)計為一個不依賴于其他系統(tǒng)的簡單且單一緊密耦合的系統(tǒng),并實現(xiàn)了MySQL協(xié)議,使得用戶可以像使用 MySQL 一樣無門檻的過渡到Doris,包括各種報表應用都可以通過MySQL協(xié)議連接 Doris,同時獲得高并發(fā)低延遲點查詢性能,而且還能進行高吞吐量的即席分析查詢。Doris 不僅提供大批量數(shù)據(jù)加載,而且還提供近乎實時的小批量,甚至流數(shù)據(jù)加載。此外Doris還具備高可用性,可靠性,容錯性和可擴展性?!?/p>
Doris博采眾長,并在此基礎(chǔ)上進行了大膽創(chuàng)新,形成了自己獨特的優(yōu)勢,其特點主要包括:1)完全兼容MySQL協(xié)議;2)采用列式存儲、對數(shù)據(jù)以高壓縮比進行壓縮存儲、向量化執(zhí)行、LLVM優(yōu)化等先進技術(shù),因此獲得了極高的查詢效率;3)支持多種存儲模型:同時支持類似于Mesa將列分為Key和Value的存儲模型,同時支持Unique Key和Dup Key的存儲模型。用戶可以根據(jù)自己的業(yè)務(wù)場景,選用不同的存儲模型;4)支持兩層分區(qū);5)支持多種數(shù)據(jù)導入方式;6)安全資源隔離擴容縮容;7)備份和恢復;8)支持web監(jiān)控和管理;
百度開源推進組負責人譚中意也表示:“百度抱著參與、回饋、影響社區(qū)的態(tài)度進行各種開源活動,充分尊重和理解開源社區(qū)的規(guī)則和精神,而繼 ECharts 成為 Apache 基金會的孵化項目后,百度繼續(xù)捐獻Doris項目給apache 基金會,百度會繼續(xù)跟各個開源社區(qū)進行更加廣泛和深入的合作?!?/p>
Doris項目Champion及導師、Apache基金會副總裁Dave Fisher表示:“很榮幸,也很高興作為Champion參與Doris在 Apache基金會的孵化過程,這是我們第二次看到百度捐獻優(yōu)秀的項目到Apache基金會,我們很高興看到百度在開源方面的巨大進步和突破。Doris作為面向在線報表和分析的數(shù)據(jù)倉庫系統(tǒng),具有獨特的實現(xiàn)優(yōu)勢和較為豐富的使用前景,加入Apache基金會進一步表明Doris擁抱開源的決心,在遵循‘the Apache Way’的基礎(chǔ)上,打造一個更為中立、開放、多元的社區(qū)文化,讓更多人享受Doris項目帶來的技術(shù)革命?!?/p>
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://www.ezyhdfw.cn/yun/35954.html
摘要:近日,騰訊主導的最新版本發(fā)布,為國內(nèi)科技公司邁出了國際開源領(lǐng)域貢獻的重要一步。年發(fā)布,年成為頂級項目。目前在騰訊致力于領(lǐng)導騰訊云大數(shù)據(jù)及人工智能產(chǎn)品研發(fā)工作。 近日,騰訊主導的Apache Hadoop2.8.4最新版本發(fā)布,為國內(nèi)科技公司邁出了國際開源領(lǐng)域貢獻的重要一步。 2006年Apache Hadoop發(fā)布,2008年Hadoop成為Apache頂級項目。在那時,中國移動、百度...
摘要:從用戶成為股東在基金會的天從年開始為的初始版本打補丁,堵俊平已經(jīng)在社區(qū)深耕了近年,年月成為中國第一個的年月,年月榮升。他們有權(quán)選舉董事會,成為董事會選舉的候選人。基金會成員對基金會直接負責,在多個項目中做出貢獻,擁有董事會的投票權(quán)。 3月27日,騰訊云大數(shù)據(jù)及人工智能產(chǎn)品研發(fā)的專家研究員堵俊平受邀成為 Apache 軟件基金會Member(Apache Softeware Founda...
摘要:今天的話題是與的開源現(xiàn)狀和未來規(guī)劃,我們知道,過去一段時間疏于維護,去年阿里高調(diào)宣布重啟開源之后,社區(qū)里問的最多的問題是,這次開源與上次有什么一樣,還有就是和是什么關(guān)系希望通過這次的分享能夠解答這些問題。 摘要: Dubbo 在過去一段時間疏于維護,去年阿里高調(diào)宣布重啟 Dubbo 開源之后,社區(qū)里問的最多的問題是,這次開源與上次有什么一樣,還有就是 Dubbo 和 Spring Bo...
閱讀 3795·2021-10-11 10:59
閱讀 1396·2019-08-30 15:44
閱讀 3605·2019-08-29 16:39
閱讀 2982·2019-08-29 16:29
閱讀 1894·2019-08-29 15:24
閱讀 904·2019-08-29 15:05
閱讀 1333·2019-08-29 12:34
閱讀 2501·2019-08-29 12:19