* 以下文章来源于科技正能量,作者郑凯
企业的数据往往分散在各个异构系统中,这些数据的数据结构、数据类型、存储形式各不相同,就像散落在系统中的星星一样各自“发光”。
这些“星星”只有在经过有效地整合、管理和运营之后,才可以凝聚成璀璨的星云。星云看似杂乱无章,但实际上它们遵循着宇宙中的基本规律,在无序中创造有序,并释放出巨大的能量,逐渐进化为璀璨的恒星。
![](/u_file/fileUpload/2024-07/23/2024072321176.jpg)
随着企业数字化转型进入深水区,数据的价值日益凸显,要将数据价值打造得如“恒星”般耀眼,就需要探索一种新的数据运营模式,规范数据开发流程,增强数据开发效率,提升企业数据价值。
7月19日,2024中国国际金融展,在国家会议中心召开。在展会中,我们在长亮科技的展台,看到一朵释放数据价值的“星云”------长亮科技星云数智一体化平台。
1
生产工具的革新,如新“星”的诞生
“加快发展新质生产力”,在今年的政府工作报告中,被列为2024年十大工作任务之首。
新质生产力如同星云中的新星诞生,代表着生产力的飞跃和变革,这种变革不仅体现在技术的革新上,更依赖于生产关系和生产工具的创新。
新星在诞生时会释放出巨大的能量,照亮宇宙空间,为星云带来活力和生机。亦如生产工具创新的意义,它将传统生产力转化为更为高效的新质生产力,以实现生产力“求新”的要求和 “质优”的成果。
在当下复杂的经济环境下,“提质增效”已成为企业数字化战略的主旋律。而DataOps作为一种革命性的数据开发模式,正在重塑数据研运全链路生产工具,通过打造规范化&一体化的数据开发流程、精细化的数据运营体系,可实现数据产品交付效率与质量的双重跃升,已成为了金融机构打破协作壁垒,解放数据生产力的新范式。
南京银行作为首家在上交所上市的城商行,前瞻性地洞察到数据作为核心生产要素的重要性与潜力。
早在2018年,南京银行就提出了加速大数据体系构建的战略规划,精心布局了“1+2+3+4”的数据平台架构。随着数据需求激增与交付能力受限的双重挑战日益严峻,南京银行率先引入DataOps这一先进理念,以期提升数据研发效能,从而应对大规模数据处理与分析的需求。
2023年9月,南京银行携手长亮科技开启统一开发集成平台的建设工作,旨在革新数据开发流程、提升数据供给能力,实现迅速响应市场需求变化,为南京银行业务发展提供强劲驱动力。
结合南京银行的数字能力现状,长亮科技项目团队遵循“利旧原则”,对其现有数据产品进行全面整合与升级,集成了离线开发平台、数据交换系统、统一调度平台及大数据接口发布系统,并打通了数据资产平台、数据管控平台、各源系统、科管及统一运维发版平台。
此外,该平台还新增了需求管理、流程管理、数据管理、版本管理、系统管理等关键功能,通过构建企业级的一站式数据开发平台工作站,确保能更好、更快、更敏捷地响应南京银行各业务板块的数据开发需求,全面提升数据研发的效率及质量。
该平台打通了数据研发运维从需求到上线的多个关键环节,通过敏捷需求管理、模型设计即治理、全开发场景支持、自动化单元测试、一键提测与发布、全面需求监控的全链路智能化管控,确保数据开发全过程的顺畅与协同。
统一数据开发集成平台的成功上线,不仅满足了南京银行各业务部门的高效用数需求,更为其大数据平台、数据仓库及数据集市等核心数据项目筑牢了坚实的发展基石,实现了数据开发质量和效率的双重飞跃,将为南京银行数字化转型增添澎湃动力。
正如前文所说,一颗“新星”的诞生,离不开星云的孕育和孵化。而南京银行案例的背后的“星云”——长亮科技星云数智一体化平台,正在冉冉升起。
2
星云的“引力”模式
让数据从无序变有序
星云是一个不断变化的系统,它看似无序,但实则有序。是引力的存在,让星云中的气体和尘埃相互吸引并聚集,这种聚集的过程逐渐使得原本无序的星云变得有序起来。
在金融企业的各个分子系统中,沉淀了无数的数据,它们过去相互独立,格式不一,就像是散落在星云中的不同“物质”,而DataOps就像是一种“引力”模式,通过构建高效协同机制,建立精细化数据运营体系,打造规范化、一体化的数据开发流程,实现数据产品高质量与高效率交付。
星云平台本质上就是一个典型的DataOps平台,它所要解决的就是数据开发过程中遭遇的一系列挑战。
在传统数据开发过程中,有很多的不受“引力”约束的数据“顽疾”。比如,由手工编码为主,无有效标准化规范约束,开发方式因人而异,所导致的数据开发不规范化不足;数据开发过程复杂、流程较多、开发周期长、响应慢、跟踪监控难等问题导致的数据质量难以保障;开发过程中,数据开发存在出错概率大,依赖复杂,缺少有效变更控制和监控能力的问题,以及后期运维、管理过程中,由环境迁移或数据平台软件变更等场景,无法应对快速部署需求等难题。
针对上述这些痛点,长亮科技为数据类项目实施团队着手打造了“星云数智一体化平台”。作为面向数据运营的一体化平台,其设计方向主要是满足数据仓库和数据湖的数据加工需求,为应用系统提供加工好的数据。并结合DataOps数据运营方法论,实现数据资产的加工、建模和对外服务供给。对数据开发而言,星云平台可以有效降低管理成本,促进规范统一和落地,提高开发效率和质量。
但星云平台的价值绝不仅止于“纸面”上这几点。
3
揭开星云平台价值的神秘面纱
我们知道,应用能够快速上线是金融客户的最迫切的需求,而星云平台作为一个可插拔式的一体化平台:允许模块化集成,根据客户需求快速定制和调整,这就很好满足了快速部署的敏捷性要求。
而数据规范化是数据开发高效的保证,星云平台则在一体化开发环境中,内置规范化、流程化大数据平台建模工艺、数据开发标准化工艺、测试标准化工艺等,从而满足各类规范落地、保障开发过程的标准化、规范化和开发质量提升。
解决“规范不易落地”的关键,就在于批量化。在这方面,星云平台支持批量化模板开发、配置化流程开发和IDE脚本开发三种模式,从而满足数据的贴源层、整合层、汇总层和集市应用各类开发场景,避免以往手工编程造成的难以维护。同时,星云平台支持模型设计反向工程、开发代码重构工艺,支持数据仓库重构和平滑升级,因此可以节省较大人力物力。
统一管控与监控能力是星云平台的“眼睛”,它能够打通需求、开发、测试、代码库、运行等环境、打通开发、测试和上线环境,实现开发流程的自动化和标准化,这也是星云将无序变为有序的关键因素之一。
当然,在人工智能大行其道的今天,星云平台也同样会不断进化,在未来将会引入智能化应用,包括大模型技术,提供SQL开发智能助手和操作知识的问答服务,来提升用户体验和效率。
4
星云平台如何做到化繁为简?
在浩瀚而多彩的宇宙中,每一片星云都代表着不同类型、不同需求的客户群体。这些星云在宇宙中自然形成,各自发光,恰如市场中客户群体的多样性和复杂性。
![](https://www.sunline.cn/u_file/fileUpload/2024-07/23/2024072316944.jpg)
而相比云服务商提供的运营服务,长亮科技多年来深耕金融行业,明显对金融企业的需求有更深的理解。星云平台基于长亮科技的金融数据仓库、数据湖实施经验积累,所提供的则是更贴合金融客户需求的建模体系和工艺流程。
最终落到客户场景,敏捷性永远是衡量产品价值的重要因素。星云平台也同样紧扣“敏捷”的关键词,支持快速数据开发,批量生成脚本,大幅提升数据加工效率,同时提供全面的运维管理功能。
星云平台并非与众不同,而是像“田忌赛马”一样,在每一个细分领域,以己之长攻敌之短,所以星云平台的价值,不仅在于技术理念的胜利,也在于一体化的胜利和客户理解的胜利。
熊彼特说过,创新是要“建立一种新的生产函数”,也就是形成一种从来没有过的生产要素和生产条件的“新组合”。数据作为新的生产要素,要发挥更大的生产力,就需要与数据运营平台形成新组合。长亮科技星云数智一体化平台的发布,无疑让我们看到了这种可能!