愛可生開源MySQL數(shù)據(jù)傳輸中間件—DTLE
2018年10⽉24⽇,企業(yè)級數(shù)據(jù)處理技術(shù)整體解決方案提供商上海愛可⽣信息技術(shù)股份有限公司正式開源其 MySQL 數(shù)據(jù)傳輸中間件DTLE。
DTLE:
http://dtle.cloud
https://github.com/actiontech/dtle
對應(yīng)文檔地址:
https://actiontech.github.io/dtle-docs-cn/
DTLE QQ群:852990221
目前,隨著MySQL在各個行業(yè)的深入使用,在不同數(shù)據(jù)系統(tǒng)、不同數(shù)據(jù)中心、不同業(yè)務(wù)系統(tǒng)之間進(jìn)行數(shù)據(jù)傳輸、數(shù)據(jù)訂閱、形成數(shù)據(jù)總線等需求逐漸增多。愛可生推出的DTLE是一個針對MySQL的使用特點、支持多種使用場景的數(shù)據(jù)傳輸中間件。
DTLE是什么?
DTLE是一個開源的數(shù)據(jù)傳輸中間件,其針對的核心場景如下:
跨數(shù)據(jù)中心的數(shù)據(jù)傳輸:DTLE能在數(shù)據(jù)中心間進(jìn)行可靠數(shù)據(jù)傳輸,并提供鏈路壓縮以降低傳輸成本
云間數(shù)據(jù)同步/遷移:DTLE能提供在公有云間架設(shè)數(shù)據(jù)同步通道,以支持?jǐn)?shù)據(jù)容災(zāi)等需求
數(shù)據(jù)匯聚:DTLE能將多個數(shù)據(jù)源匯聚到同一個數(shù)據(jù)源,以提供數(shù)據(jù)分析/數(shù)據(jù)轉(zhuǎn)儲的功能
數(shù)據(jù)訂閱:DTLE能將數(shù)據(jù)源的變更消息發(fā)往Kafka等消息中間件,以支持?jǐn)?shù)據(jù)訂閱通知/緩存失效通知等需求
跨數(shù)據(jù)中心的雙向復(fù)制:DTLE能在數(shù)據(jù)中心間提供雙向復(fù)制通道,以配合業(yè)務(wù)實現(xiàn)數(shù)據(jù)雙寫
為什么要開源?
隨著MySQL在各行業(yè)的使用場景逐漸成熟,以數(shù)據(jù)傳輸為基礎(chǔ)的需求逐漸增多。若要設(shè)計一款良好的數(shù)據(jù)傳輸中間件,要解決的核心問題是:如何保障質(zhì)量、適配復(fù)雜場景、提供多樣功能。
在2017年10月24日,愛可生開源了MySQL分布式中間件—DBLE。時隔一年,DBLE與社區(qū)互動良好,從社區(qū)吸納了許多設(shè)計經(jīng)驗和質(zhì)量反饋,已成為一款成熟的數(shù)據(jù)庫中間件。隨著社區(qū)用戶增多,已實現(xiàn)了與社區(qū)用戶的雙贏。
愛可生此次開源DTLE,是真誠為社區(qū)提供MySQL生態(tài)圈里一個可持續(xù)發(fā)展的工具,并希望與社區(qū)再次達(dá)成雙贏,解決數(shù)據(jù)傳輸中間件的核心問題。
DTLE的設(shè)計特點
分布式架構(gòu):DTLE在數(shù)據(jù)傳輸這個基本場景上,使用了成熟的分布式任務(wù)調(diào)度架構(gòu),可以便捷地在集群中配置大量的數(shù)據(jù)傳輸任務(wù),提供斷點續(xù)傳/故障轉(zhuǎn)移等分布式系統(tǒng)的重要特性
靈活的網(wǎng)絡(luò)適配能力:DTLE可適配復(fù)雜的網(wǎng)絡(luò)架構(gòu),提供跨數(shù)據(jù)中心的數(shù)據(jù)通道功能和公有云間的數(shù)據(jù)通道功能
多場景適配:DTLE通過組合多個原子任務(wù),可適配復(fù)雜的數(shù)據(jù)傳輸場景
關(guān)于開源 MySQL 數(shù)據(jù)傳輸中間件DTLE更多技術(shù)細(xì)節(jié)我們后期會持續(xù)輸出,版本更新維護(hù)及使用問題反饋,歡迎加入DTLE(Q群:852990221)。

愛可生(證券代碼:832768)依托于融合、開放、創(chuàng)新的數(shù)據(jù)處理技術(shù)和服務(wù)能力,為大型行業(yè)用戶的特定場景提供深度挖掘數(shù)據(jù)價值的解決方案。公司持續(xù)積累的核心關(guān)鍵技術(shù),覆蓋到分布式數(shù)據(jù)庫集群、云數(shù)據(jù)庫平臺、數(shù)據(jù)庫大體量運管平臺、海量數(shù)據(jù)集成與存儲、清洗與治理、人工智能分析挖掘、可視化展現(xiàn)、安全與隱私保護(hù)等多個領(lǐng)域。
公司已與多個行業(yè)內(nèi)的專業(yè)公司建立了長期伙伴關(guān)系,不斷促進(jìn)新技術(shù)與行業(yè)知識相結(jié)合,為用戶尋求新的數(shù)據(jù)驅(qū)動的價值增長點。公司已在金融、能源電力、電信、廣電、政府等行業(yè)取得了多個大型用戶典型成功案例,獲得了市場的廣泛認(rèn)可和業(yè)務(wù)持續(xù)的增長。
