[No.H001]
12月12日,以“Data@Future”為主題,由StartDT(奇點云、GrowingIO)主辦的2023 StartDT Day數(shù)智科技大會暨數(shù)據(jù)云操作系統(tǒng)產品發(fā)布會召開。
會上,奇點云自研的新一代數(shù)據(jù)云操作系統(tǒng)StartDT SimbaOS正式亮相,具備跨云原生、全域集成、混合調度、高效建模、安全合規(guī)、智能運維等特性,幫助客戶建立企業(yè)級的數(shù)據(jù)能力,管好、用好全域數(shù)據(jù)資產。
告別“煙囪”
進階的數(shù)字化需要“DT時代的OS”
面向數(shù)據(jù)量爆發(fā)、數(shù)據(jù)需求激增的未來,企業(yè)的數(shù)據(jù)系統(tǒng)應做好哪些準備?
從眾多客戶的實踐出發(fā),StartDT COO、奇點云聯(lián)合創(chuàng)始人劉瑩談到,企業(yè)對數(shù)據(jù)系統(tǒng)的要求可歸納為三層:
· 更簡單有效的數(shù)據(jù)應用,讓數(shù)據(jù)直接為業(yè)務所用。
· 更強大的數(shù)據(jù)平臺,來保障規(guī)�;�、持續(xù)穩(wěn)定的數(shù)據(jù)生產。
· 更極致的存算調度能力,來滿足越來越高難度的數(shù)據(jù)處理需求。
過去,數(shù)據(jù)產品廠商往往只能“煙囪式”地提供或拼裝上述三層能力:以數(shù)據(jù)應用需求為起點,逐個對接云資源、數(shù)據(jù)源和存算引擎,逐個配置權限體系和安全機制,在該應用涉及的范圍內進行數(shù)據(jù)治理和分析。
而當數(shù)字化轉型深入,企業(yè)的數(shù)據(jù)應用越來越多,每每出現(xiàn)應用新增或配置變更時,仍然只能采用“煙囪式”從0到1建設,甚至不得不把過去的應用鏟平重建。
這不僅會累積時間與資源浪費,也無從實現(xiàn)全域數(shù)據(jù)資產的統(tǒng)一管理。最終,一家企業(yè)的數(shù)據(jù)系統(tǒng)里煙囪林立,迭代困難。
在StartDT CEO、奇點云創(chuàng)始人行在看來,面向因時而變的業(yè)務,面對層出不窮的數(shù)字化進階挑戰(zhàn),數(shù)據(jù)云操作系統(tǒng)是最優(yōu)解。
與計算機領域的操作系統(tǒng)原理相似,數(shù)據(jù)云操作系統(tǒng)封裝底層各項常用能力,以標準接口的方式向外提供:
· 對于應用開發(fā)者而言,直接調用OS已有的能力,一套代碼解決“多云適配”、“多數(shù)據(jù)源集成”、“多引擎整合”等難題,有效降低對接底層的復雜性,更專注于應用本身的研發(fā)。
· 對于企業(yè)而言,則能實現(xiàn)用同一套穩(wěn)定的基礎設施支撐豐富的數(shù)據(jù)應用,避免“煙囪式”開發(fā);架構具備靈活度,告別“數(shù)據(jù)系統(tǒng)逐漸‘鎖死’又鏟平重建”的輪回。
StartDT SimbaOS
奇點云自研的第一代數(shù)據(jù)云操作系統(tǒng)
“歷經(jīng)4年‘雪藏式研發(fā)’,今天,奇點云第一代數(shù)據(jù)云操作系統(tǒng)StartDT SimbaOS終于面世。”
SimbaOS是奇點云自研的數(shù)據(jù)云操作系統(tǒng),具備跨云原生、全域集成、混合調度、高效建模、安全合規(guī)、智能運維等特性,幫助客戶建立企業(yè)級的數(shù)據(jù)能力,管好、用好全域數(shù)據(jù)資產。
談及設計邏輯與技術實現(xiàn),StartDT合伙人、CTO地雷介紹,SimbaOS采用分層結構,中間層為SimbaOS Kernel(數(shù)據(jù)云操作系統(tǒng)內核),將數(shù)據(jù)領域常用的存算、調度、服務、安全、元數(shù)據(jù)等核心能力抽象,封裝為一套對象體系。“這極為重要,也是OS研發(fā)的關鍵挑戰(zhàn)所在。”地雷介紹,目前Kernel共包含32個對象,分為6個域。
通過API、SDK、Schema三類方式,數(shù)據(jù)應用開發(fā)者可以快速調用SimbaOS的能力,高效創(chuàng)建數(shù)據(jù)應用:
· API:提供南向接口和北向接口,前者對接多云、多引擎、多數(shù)據(jù)源(包括數(shù)據(jù)源集成接口、元數(shù)據(jù)采集接口、數(shù)據(jù)引擎適配接口、云對接接口等),后者面向應用開發(fā)者,便于他們調用各個對象的動詞。
· SDK:在API基礎上,提供Java、Python、JS等編程語言開發(fā)包SDK。
· Schema:支持用戶使用SQL查詢系統(tǒng)元數(shù)據(jù),并基于多款內置的分析模型,洞察系統(tǒng)狀態(tài)。
“把復雜交給操作系統(tǒng),把簡單留給開發(fā)者。”行在介紹,“基于SimbaOS構建數(shù)據(jù)應用,效率可以提升4倍,幫助企業(yè)應對洶涌而來的數(shù)據(jù)應用需求和進階的數(shù)據(jù)技術挑戰(zhàn)。”
內核加持,能力升級
多款數(shù)據(jù)應用產品更新
目前,StartDT SimbaOS生態(tài)內的應用共有“開發(fā)”、“安全”、“增長”、“增效”、“AI”五大類。
沒錯,面向AI應用大爆發(fā)的未來,SimbaOS不僅支持開發(fā)者構建數(shù)據(jù)應用,也支持構建AI應用,幫助開發(fā)者基于數(shù)據(jù)優(yōu)化算法,提升訓練數(shù)據(jù)的質量,加快模型部署的速度。
本次發(fā)布會,針對數(shù)據(jù)開發(fā)、指標資產管理及安全合規(guī)場景,三款數(shù)據(jù)應用率先帶來最新動態(tài):
企業(yè)級“RAS”的數(shù)據(jù)云平臺 DataSimba
地雷介紹,構建企業(yè)級“RAS”(可靠性、可用性、可服務性)的數(shù)據(jù)生產系統(tǒng),既需要數(shù)據(jù)工程的最佳實踐,也需要專業(yè)可靠的數(shù)據(jù)云平臺。就像“好車手”和“好賽車”,兩者缺一不可。
因此,一方面,DataSimba持續(xù)加固穩(wěn)定性,提供高可用部署方案,可用性達99.95%。依托SimbaOS的Schema,幫助用戶構建可觀測性,以數(shù)據(jù)驅動運維巡檢、血緣治理、研發(fā)風控等多個場景;
另一方面,還提供針對大數(shù)據(jù)遷移、備份、CI/CD等場景的專業(yè)自動化工具,以及開發(fā)陪跑、遷移發(fā)布及各類運維服務包,支持客戶數(shù)據(jù)團隊成為“好車手”、“好車隊”。
指標全生命周期管理平臺 SimbaMetric
SimbaMetric提供數(shù)倉規(guī)劃、維度建模、業(yè)務指標體系等完善功能,支持業(yè)務、研發(fā)等角色通過一個產品完成無縫協(xié)作,實現(xiàn)圍繞指標資產的全生命周期管理。
奇點云認為,指標工具不僅要完成“總線矩陣戶口本”的基本職責,還應幫助客戶提高效率,讓指標資產的運營管理高效、方便、可持續(xù)。因此,SimbaMetric還提供配套的自動化工具,來完成批量轉換、自動掃描等工作,解決遷移、兼容、規(guī)范性檢測等繁雜問題,提升指標交付效率。
此外,企業(yè)還可以通過SimbaOS Kernel的元數(shù)據(jù)域,實現(xiàn)BI、大屏、報表等應用之間指標數(shù)據(jù)的交互查詢。
全域數(shù)據(jù)安全管理平臺 DataBlack
DataBlack推出了“數(shù)據(jù)云標準版”、“分析云標準版”、“專業(yè)版”三大版本產品,滿足不同類型企業(yè)不同的數(shù)據(jù)安全合規(guī)需要。
StartDT資深算法專家曾博指出,數(shù)據(jù)安全之于企業(yè),已從過去小部分的風控需求,轉向全面的合規(guī)建設需求。如果仍“煙囪式”地逐個數(shù)據(jù)應用實施合規(guī)治理,不僅重復建設耗時費力,還可能出現(xiàn)“漏網(wǎng)之魚”。
得益于SimbaOS Kernel,DataBlack支持對接企業(yè)所有數(shù)據(jù)源,完成統(tǒng)一的安全合規(guī)治理,助客戶告別數(shù)據(jù)安全“短板”。
重塑數(shù)據(jù)應用構建的方式
讓數(shù)據(jù)驅動更簡單
本次大會的圓桌環(huán)節(jié),StartDT的產品專家、行業(yè)專家們進一步分享了基于SimbaOS研發(fā)應用、服務客戶的親身體驗,解讀真正支持業(yè)務、賦能業(yè)務、陪伴業(yè)務進化的數(shù)據(jù)應用如何煉成。
簡化技術復雜性,SimbaOS為OneID等組件/應用開發(fā)提供強勁支撐
OneID是全域用戶運營的基礎,看似老生常談,卻始終未得到有效解決——用戶ID增長,端/觸點/渠道增加,用傳統(tǒng)的研發(fā)方式不僅費時費力、靈活度不足,時效性和準確度也遠遠達不到需求。StartDT合伙人、資深行業(yè)專家追風介紹,現(xiàn)在基于StartDT標準的OneID組件,客戶可以輕松配置不同數(shù)據(jù)源與身份體系的優(yōu)先級,或按需新增渠道,完成實時OneID融合。
OneID組件能支撐海量數(shù)據(jù)的實時復雜計算,處理結果準確度高,與SimbaOS的能力密不可分。StartDT副總裁、GrowingIO聯(lián)合創(chuàng)始人葉玎玎解釋道:“以OneID底層的‘流批圖一體’為例,我們原本需要3~4個月才能適配一個引擎,現(xiàn)在SimbaOS已經(jīng)解決了這個問題,預先完成了7類不同引擎的對接,還天然支持多引擎混合調度。”
積木式研發(fā),讓大規(guī)模打造貼合企業(yè)場景的數(shù)據(jù)應用成為可能
相較有多年成熟方法論的前鏈路,企業(yè)后鏈路實現(xiàn)數(shù)據(jù)驅動的場景往往更為復雜多樣。
以制造業(yè)為例,訂單、庫存、工廠、供應商等環(huán)節(jié)各有各的邏輯。StartDT資深行業(yè)專家、制造業(yè)產研負責人航宇表示,哪怕處于同一個細分行業(yè),企業(yè)的情況也常常千差萬別。
如何大規(guī)模滿足這些個性化的需求,提供貼合客戶場景的數(shù)據(jù)應用?
StartDT合伙人、資深產品專家星魁介紹:“經(jīng)過多年的客戶實踐和產品調研,我們把數(shù)據(jù)應用研發(fā)抽象為‘存算模塊’、‘分析模塊’、‘數(shù)據(jù)模型’和‘服務模塊’,共四大類標準模塊。其中,存算模塊和服務模塊由SimbaOS Kernel提供能力支撐。”
基于標準模塊完成“積木式的產品開發(fā)”,讓StartDT能更及時地響應客戶“個性化”產品需求。今年推出面向制造業(yè)的六大數(shù)據(jù)產品,就采用上述方式研發(fā),并已在多家制造企業(yè)客戶落地實踐。同時,客戶的數(shù)據(jù)團隊也能更輕松地組裝出數(shù)據(jù)應用,快速把自身Know-how轉變?yōu)閿?shù)字化工具。
如行在所說:“數(shù)據(jù)的價值在于應用,而應用的核心在于人。只有關注人的需求,讓人可以更簡單有效地使用數(shù)據(jù),才能用數(shù)據(jù)驅動企業(yè)和社會進步。”
StartDT SimbaOS的研發(fā)和迭代,正為更簡單高效、更具性價比、更可持續(xù)、更規(guī)�;臄�(shù)據(jù)生產和消費而來,讓數(shù)據(jù)為人所用,為人好用。
StartDT SimbaOS期待得到更多客戶的使用,也期待收到更多DT開發(fā)者的反饋。
Data@Future. Data for all.
榜單收錄、高管收錄、融資收錄、活動收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報生成中...