隨著新型智慧城市和數字城市的建設，各地的大數據和數字經濟相關的園區(qū)加速落地，大數據產業(yè)規(guī)模持續(xù)增長。據賽迪顧問預計，到2023年，大數據產業(yè)規(guī)模將達到1萬億元，到2027年，將會達到1.8萬億元。

關于數據名詞也層出不窮：數據庫、數據湖、數據中臺、數據倉庫……其中，數據中臺是在DT時代的大背景下，企業(yè)為實現數據快速、準確、低成本賦能業(yè)務發(fā)展目標，將數據進行統(tǒng)一整合，基于One Data方法論而搭建的平臺。借助于數據中臺，企業(yè)可以進行完善的、統(tǒng)一的數據加工和處理，對外提供數據服務能力。因此，整個數據中臺需要有一個龐大的方法論來支撐，且目前市面上的數據中臺，主要以大項目的定制化方式進行私有化的交付，成本較大，周期較長。

青云科技一直與大數據時代同頻共振。從2014年到2018年，青云科技在廣度上實現了數據產品和服務的全覆蓋。從2018年至今，又在深度上對產品性能、服務質量、服務范圍進行了全方位提升。目前，青云科技已經推出了近30款數據產品和服務，同時集成優(yōu)秀的合作伙伴應用，形成了包括數據庫與緩存、消息隊列與中間件、大數據服務、數據倉庫與BI、對象存儲在內的數據產品生態(tài)，構建了一個完整的、可插拔的、全流程的大數據平臺，從最初的數據源接入，到數據的處理，再到數據的呈現，提供了完整的數據處理流程，在任何環(huán)節(jié)都能提供客戶所需的數據產品和服務。

多年來，在與客戶的密切溝通與服務中，青云科技洞察到，客戶的需求已經從最初的“底層資源”問題，逐步進階到“數據層”問題，主要體現在數據同步、實時計算、統(tǒng)一監(jiān)控和調度，以及權限控制、數據倉庫、數據服務等典型場景的需求?；谶@些真實需求，青云科技推出了大數據工作臺。

一站式智能大數據開發(fā)與治理平臺

青云大數據工作臺通過整合青云科技完整的數據產品和服務，為客戶提供了一個一站式智能大數據開發(fā)與治理平臺，幫助客戶降低大數據使用門檻，將代碼開發(fā)降到最低，讓非技術人員也能進行大數據分析。同時，通過青云大數據工作臺，幫助客戶實現數據在云平臺各產品之間的快速流轉，支撐上層業(yè)務，消除企業(yè)“數據孤島”，實現數據的統(tǒng)一調度和計算，進而幫助企業(yè)挖掘數據價值，提升整體的數據洞察能力。

與數據中臺不同，青云大數據工作臺采用云原生架構，沒有基于傳統(tǒng)的Hadoop體系的YARN來做資源調度，而是基于Kubernetes實現資源的調度，聚焦于數據使用場景，解決數據集成、流批一體計算、統(tǒng)一運維和統(tǒng)一數據服務共享的問題，通過一站式、便捷低成本的方式，幫助中小型企業(yè)快速發(fā)揮數據價值，構建“云上數據中臺”。

目前青云大數據工作臺上線1.0版本，主要具備“數據集成、數據加工、統(tǒng)一數據存儲和服務”功能模塊，為企業(yè)數據價值挖掘提供支持。

從整體架構來看，青云大數據工作臺共有五層架構，從底層到上層依次是：云原生、全托管式計算引擎、全生命周期數據開發(fā)、高效的數據同步服務、應對豐富的業(yè)務場景。用數據上云、數據開發(fā)、數據同步、作業(yè)運維調度、引擎資源管理五大模塊，打通了大數據全鏈路。

青云大數據工作臺六大特性

據青云QingCloud大數據產品經理劉雄風介紹，青云大數據工作臺主要適用于精細化運營分析、實時計算、可視化開發(fā)運維、構建數倉場景，有六大產品特性。

首先是開箱即用。幾分鐘即可完成環(huán)境的創(chuàng)建和部署，即開即用、便捷高效，一鍵開啟數據價值洞察之旅。

第二，彈性擴容。具備云原生彈性擴容的能力，可以幫助客戶合理地節(jié)省資源，提高資源的使用率。通過提供細粒度管控，最小資源使用的粒度只需要0.5 CU，支持按量、包年包月計費，可以更好地適配不同的需求，價格低廉，安全穩(wěn)定。

第三，存算分離。與青云的對象存儲服務無縫銜接，海量數據可以高效、低成本的存儲。也支持數據計算按需擴容，極具性價比。

第四，開放兼容。擁抱開源，百分百兼容Apache Flink，支持平滑上云，通過內嵌的Connector可以無縫對接主流的數據產品和開源大數據生態(tài)組件。同時，客戶可以將原有的大數據任務遷移到青云大數據工作臺上，進行統(tǒng)一的調度和監(jiān)控，節(jié)省運維和調度成本。

第五，安全可靠。按照云原生的架構模式進行設計，可以基于多種基礎設施進行部署。內部功能模塊以微服務的方式劃分為多個組件，彼此之間相互隔離，避免相互影響。同時，所有的服務都具備高可用和高擴展能力，可以在部分節(jié)點故障的情況下保障服務的可用性和數據的可靠性。

第六，生態(tài)整合。除了青云大數據工作臺本身提供的服務外，還可以在云上與其他產品緊密整合，連通云平臺上孤立的多種數據存儲的服務，讓客戶在云平臺上的數據流轉更加便捷。

加速物聯網和工業(yè)數智化進程

青云大數據工作臺主要聚焦在新興領域，以物聯網和工業(yè)大數據為代表，并落地應用了青云大數據工作臺融合KubeSphere容器平臺、IoT平臺“三位一體”的技術方案。

青云大數據工作臺、KubeSphere容器平臺、IoT平臺“三位一體”技術方案

某行業(yè)領先的工業(yè)自動化測試設備與整線系統(tǒng)解決方案廠商，其數據源涵蓋多種維度，包括機加工設備、物聯網中的SMT設備和AGV設備、立庫，將來還有可能會引入質監(jiān)相關設備。除了生產以外，還有企業(yè)本身運營相關的IoT數據，包括水電氣、空調供暖、給排水、門閘、溫濕度以及各類樓宇、園區(qū)運營的數據?？蛻艏毙杞y(tǒng)一的數據接收和存儲、統(tǒng)一的數據API服務，以及對接物聯網平臺，建設統(tǒng)一的“物聯網+大數據”平臺。

通過落地青云提供的技術方案，由IoT平臺對不同數據源進行“云、網、邊、端”的統(tǒng)一控制，客戶可將數據通過消息中間件進行統(tǒng)一傳輸到大數據工作臺，做原始庫數據集成的操作。數據存儲到原始數據庫后，客戶可以將原始庫單獨對外提供數據權限、數據存儲和數據查詢的服務。對于原始庫的存儲數據，客戶還能進行數據的二次加工，形成最終結果庫。而結果庫同樣可以對外提供數據權限、數據存儲和數據查詢的服務。

未來，除了智慧工業(yè)，青云科技還將把大數據工作臺應用到智慧零售、智慧政務和智慧校園，覆蓋到四個“數智”化場景，持續(xù)產生“數智”化價值。