* 以下文章來源于科技正能量，作者鄭凱
企業(yè)的數(shù)據(jù)往往分散在各個異構(gòu)系統(tǒng)中，這些數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)類型、存儲形式各不相同，就像散落在系統(tǒng)中的星星一樣各自“發(fā)光”。
這些“星星”只有在經(jīng)過有效地整合、管理和運(yùn)營之后，才可以凝聚成璀璨的星云。星云看似雜亂無章，但實(shí)際上它們遵循著宇宙中的基本規(guī)律，在無序中創(chuàng)造有序，并釋放出巨大的能量，逐漸進(jìn)化為璀璨的恒星。
隨著企業(yè)數(shù)字化轉(zhuǎn)型進(jìn)入深水區(qū)，數(shù)據(jù)的價值日益凸顯，要將數(shù)據(jù)價值打造得如“恒星”般耀眼，就需要探索一種新的數(shù)據(jù)運(yùn)營模式，規(guī)范數(shù)據(jù)開發(fā)流程，增強(qiáng)數(shù)據(jù)開發(fā)效率，提升企業(yè)數(shù)據(jù)價值。
7月19日，2024中國國際金融展，在國家會議中心召開。在展會中，我們在長亮科技的展臺，看到一朵釋放數(shù)據(jù)價值的“星云”------長亮科技星云數(shù)智一體化平臺。
1
生產(chǎn)工具的革新，如新“星”的誕生
“加快發(fā)展新質(zhì)生產(chǎn)力”，在今年的政府工作報(bào)告中，被列為2024年十大工作任務(wù)之首。
新質(zhì)生產(chǎn)力如同星云中的新星誕生，代表著生產(chǎn)力的飛躍和變革，這種變革不僅體現(xiàn)在技術(shù)的革新上，更依賴于生產(chǎn)關(guān)系和生產(chǎn)工具的創(chuàng)新。
新星在誕生時會釋放出巨大的能量，照亮宇宙空間，為星云帶來活力和生機(jī)。亦如生產(chǎn)工具創(chuàng)新的意義，它將傳統(tǒng)生產(chǎn)力轉(zhuǎn)化為更為高效的新質(zhì)生產(chǎn)力，以實(shí)現(xiàn)生產(chǎn)力“求新”的要求和 “質(zhì)優(yōu)”的成果。
在當(dāng)下復(fù)雜的經(jīng)濟(jì)環(huán)境下，“提質(zhì)增效”已成為企業(yè)數(shù)字化戰(zhàn)略的主旋律。而DataOps作為一種革命性的數(shù)據(jù)開發(fā)模式，正在重塑數(shù)據(jù)研運(yùn)全鏈路生產(chǎn)工具，通過打造規(guī)范化&一體化的數(shù)據(jù)開發(fā)流程、精細(xì)化的數(shù)據(jù)運(yùn)營體系，可實(shí)現(xiàn)數(shù)據(jù)產(chǎn)品交付效率與質(zhì)量的雙重躍升，已成為了金融機(jī)構(gòu)打破協(xié)作壁壘，解放數(shù)據(jù)生產(chǎn)力的新范式。
南京銀行作為首家在上交所上市的城商行，前瞻性地洞察到數(shù)據(jù)作為核心生產(chǎn)要素的重要性與潛力。
早在2018年，南京銀行就提出了加速大數(shù)據(jù)體系構(gòu)建的戰(zhàn)略規(guī)劃，精心布局了“1+2+3+4”的數(shù)據(jù)平臺架構(gòu)。隨著數(shù)據(jù)需求激增與交付能力受限的雙重挑戰(zhàn)日益嚴(yán)峻，南京銀行率先引入DataOps這一先進(jìn)理念，以期提升數(shù)據(jù)研發(fā)效能，從而應(yīng)對大規(guī)模數(shù)據(jù)處理與分析的需求。
2023年9月，南京銀行攜手長亮科技開啟統(tǒng)一開發(fā)集成平臺的建設(shè)工作，旨在革新數(shù)據(jù)開發(fā)流程、提升數(shù)據(jù)供給能力，實(shí)現(xiàn)迅速響應(yīng)市場需求變化，為南京銀行業(yè)務(wù)發(fā)展提供強(qiáng)勁驅(qū)動力。
結(jié)合南京銀行的數(shù)字能力現(xiàn)狀，長亮科技項(xiàng)目團(tuán)隊(duì)遵循“利舊原則”，對其現(xiàn)有數(shù)據(jù)產(chǎn)品進(jìn)行全面整合與升級，集成了離線開發(fā)平臺、數(shù)據(jù)交換系統(tǒng)、統(tǒng)一調(diào)度平臺及大數(shù)據(jù)接口發(fā)布系統(tǒng)，并打通了數(shù)據(jù)資產(chǎn)平臺、數(shù)據(jù)管控平臺、各源系統(tǒng)、科管及統(tǒng)一運(yùn)維發(fā)版平臺。
此外，該平臺還新增了需求管理、流程管理、數(shù)據(jù)管理、版本管理、系統(tǒng)管理等關(guān)鍵功能，通過構(gòu)建企業(yè)級的一站式數(shù)據(jù)開發(fā)平臺工作站，確保能更好、更快、更敏捷地響應(yīng)南京銀行各業(yè)務(wù)板塊的數(shù)據(jù)開發(fā)需求，全面提升數(shù)據(jù)研發(fā)的效率及質(zhì)量。
該平臺打通了數(shù)據(jù)研發(fā)運(yùn)維從需求到上線的多個關(guān)鍵環(huán)節(jié)，通過敏捷需求管理、模型設(shè)計(jì)即治理、全開發(fā)場景支持、自動化單元測試、一鍵提測與發(fā)布、全面需求監(jiān)控的全鏈路智能化管控，確保數(shù)據(jù)開發(fā)全過程的順暢與協(xié)同。
統(tǒng)一數(shù)據(jù)開發(fā)集成平臺的成功上線，不僅滿足了南京銀行各業(yè)務(wù)部門的高效用數(shù)需求，更為其大數(shù)據(jù)平臺、數(shù)據(jù)倉庫及數(shù)據(jù)集市等核心數(shù)據(jù)項(xiàng)目筑牢了堅(jiān)實(shí)的發(fā)展基石，實(shí)現(xiàn)了數(shù)據(jù)開發(fā)質(zhì)量和效率的雙重飛躍，將為南京銀行數(shù)字化轉(zhuǎn)型增添澎湃動力。
正如前文所說，一顆“新星”的誕生，離不開星云的孕育和孵化。而南京銀行案例的背后的“星云”——長亮科技星云數(shù)智一體化平臺，正在冉冉升起。
2
星云的“引力”模式
讓數(shù)據(jù)從無序變有序
星云是一個不斷變化的系統(tǒng)，它看似無序，但實(shí)則有序。是引力的存在，讓星云中的氣體和塵埃相互吸引并聚集，這種聚集的過程逐漸使得原本無序的星云變得有序起來。
在金融企業(yè)的各個分子系統(tǒng)中，沉淀了無數(shù)的數(shù)據(jù)，它們過去相互獨(dú)立，格式不一，就像是散落在星云中的不同“物質(zhì)”，而DataOps就像是一種“引力”模式，通過構(gòu)建高效協(xié)同機(jī)制，建立精細(xì)化數(shù)據(jù)運(yùn)營體系，打造規(guī)范化、一體化的數(shù)據(jù)開發(fā)流程，實(shí)現(xiàn)數(shù)據(jù)產(chǎn)品高質(zhì)量與高效率交付。
星云平臺本質(zhì)上就是一個典型的DataOps平臺，它所要解決的就是數(shù)據(jù)開發(fā)過程中遭遇的一系列挑戰(zhàn)。
在傳統(tǒng)數(shù)據(jù)開發(fā)過程中，有很多的不受“引力”約束的數(shù)據(jù)“頑疾”。比如，由手工編碼為主，無有效標(biāo)準(zhǔn)化規(guī)范約束，開發(fā)方式因人而異，所導(dǎo)致的數(shù)據(jù)開發(fā)不規(guī)范化不足；數(shù)據(jù)開發(fā)過程復(fù)雜、流程較多、開發(fā)周期長、響應(yīng)慢、跟蹤監(jiān)控難等問題導(dǎo)致的數(shù)據(jù)質(zhì)量難以保障；開發(fā)過程中，數(shù)據(jù)開發(fā)存在出錯概率大，依賴復(fù)雜，缺少有效變更控制和監(jiān)控能力的問題，以及后期運(yùn)維、管理過程中，由環(huán)境遷移或數(shù)據(jù)平臺軟件變更等場景，無法應(yīng)對快速部署需求等難題。
針對上述這些痛點(diǎn)，長亮科技為數(shù)據(jù)類項(xiàng)目實(shí)施團(tuán)隊(duì)著手打造了“星云數(shù)智一體化平臺”。作為面向數(shù)據(jù)運(yùn)營的一體化平臺，其設(shè)計(jì)方向主要是滿足數(shù)據(jù)倉庫和數(shù)據(jù)湖的數(shù)據(jù)加工需求，為應(yīng)用系統(tǒng)提供加工好的數(shù)據(jù)。并結(jié)合DataOps數(shù)據(jù)運(yùn)營方法論，實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的加工、建模和對外服務(wù)供給。對數(shù)據(jù)開發(fā)而言，星云平臺可以有效降低管理成本，促進(jìn)規(guī)范統(tǒng)一和落地，提高開發(fā)效率和質(zhì)量。
但星云平臺的價值絕不僅止于“紙面”上這幾點(diǎn)。
3
揭開星云平臺價值的神秘面紗
我們知道，應(yīng)用能夠快速上線是金融客戶的最迫切的需求，而星云平臺作為一個可插拔式的一體化平臺：允許模塊化集成，根據(jù)客戶需求快速定制和調(diào)整，這就很好滿足了快速部署的敏捷性要求。
而數(shù)據(jù)規(guī)范化是數(shù)據(jù)開發(fā)高效的保證，星云平臺則在一體化開發(fā)環(huán)境中，內(nèi)置規(guī)范化、流程化大數(shù)據(jù)平臺建模工藝、數(shù)據(jù)開發(fā)標(biāo)準(zhǔn)化工藝、測試標(biāo)準(zhǔn)化工藝等，從而滿足各類規(guī)范落地、保障開發(fā)過程的標(biāo)準(zhǔn)化、規(guī)范化和開發(fā)質(zhì)量提升。
解決“規(guī)范不易落地”的關(guān)鍵，就在于批量化。在這方面，星云平臺支持批量化模板開發(fā)、配置化流程開發(fā)和IDE腳本開發(fā)三種模式，從而滿足數(shù)據(jù)的貼源層、整合層、匯總層和集市應(yīng)用各類開發(fā)場景，避免以往手工編程造成的難以維護(hù)。同時，星云平臺支持模型設(shè)計(jì)反向工程、開發(fā)代碼重構(gòu)工藝，支持?jǐn)?shù)據(jù)倉庫重構(gòu)和平滑升級，因此可以節(jié)省較大人力物力。
統(tǒng)一管控與監(jiān)控能力是星云平臺的“眼睛”，它能夠打通需求、開發(fā)、測試、代碼庫、運(yùn)行等環(huán)境、打通開發(fā)、測試和上線環(huán)境，實(shí)現(xiàn)開發(fā)流程的自動化和標(biāo)準(zhǔn)化，這也是星云將無序變?yōu)橛行虻年P(guān)鍵因素之一。
當(dāng)然，在人工智能大行其道的今天，星云平臺也同樣會不斷進(jìn)化，在未來將會引入智能化應(yīng)用，包括大模型技術(shù)，提供SQL開發(fā)智能助手和操作知識的問答服務(wù)，來提升用戶體驗(yàn)和效率。
4
星云平臺如何做到化繁為簡？
在浩瀚而多彩的宇宙中，每一片星云都代表著不同類型、不同需求的客戶群體。這些星云在宇宙中自然形成，各自發(fā)光，恰如市場中客戶群體的多樣性和復(fù)雜性。
而相比云服務(wù)商提供的運(yùn)營服務(wù)，長亮科技多年來深耕金融行業(yè)，明顯對金融企業(yè)的需求有更深的理解。星云平臺基于長亮科技的金融數(shù)據(jù)倉庫、數(shù)據(jù)湖實(shí)施經(jīng)驗(yàn)積累，所提供的則是更貼合金融客戶需求的建模體系和工藝流程。
最終落到客戶場景，敏捷性永遠(yuǎn)是衡量產(chǎn)品價值的重要因素。星云平臺也同樣緊扣“敏捷”的關(guān)鍵詞，支持快速數(shù)據(jù)開發(fā)，批量生成腳本，大幅提升數(shù)據(jù)加工效率，同時提供全面的運(yùn)維管理功能。
星云平臺并非與眾不同，而是像“田忌賽馬”一樣，在每一個細(xì)分領(lǐng)域，以己之長攻敵之短，所以星云平臺的價值，不僅在于技術(shù)理念的勝利，也在于一體化的勝利和客戶理解的勝利。
熊彼特說過，創(chuàng)新是要“建立一種新的生產(chǎn)函數(shù)”，也就是形成一種從來沒有過的生產(chǎn)要素和生產(chǎn)條件的“新組合”。數(shù)據(jù)作為新的生產(chǎn)要素，要發(fā)揮更大的生產(chǎn)力，就需要與數(shù)據(jù)運(yùn)營平臺形成新組合。長亮科技星云數(shù)智一體化平臺的發(fā)布，無疑讓我們看到了這種可能！
