金融业
中国
Partnered with
大融智通是一家专业的大数据服务商,专注于证券、银行、互联网金融行业,为客户提供大数据平台建设和行业解决方案。
Cloudera助力华金证券构建现代化数据平台,推动高效率智能化运营
华金证券股份有限公司是一家拥有全牌照的综合性证券公司,总部位于上海,业务范围涵盖证券承销与保荐、证券资产管理、证券经纪、证券自营、另类投资等诸多领域。华金证券十分重视数据在当今数字经济中的重要作用。
证券行业对数据存储和治理提出高要求
随着数字经济在中国经济占比接近四成,数字化已经成为了所有金融机构的必修课。从证券行业角度看,实施数字化转型既是推动证券行业高质量发展的内在要求,也是更好服务实体经济和满足客户需求的重要举措。
华金证券一直非常重视数据对于业务运营的价值。然而随着业务不断发展,数据量越来越庞大,其传统数据中心已无法适应新的发展需求。华金证券目前需要对CRM系统进行整体升级,同时运行几个大型项目,原有的传统数仓无法实现有效的权限隔离和算力共享,需要针对不同项目分别搭建算力,极大地浪费时间和资源。而且,随着数据量不断攀升,原有数仓也无法满足海量数据的高效存储要求。
采用现代化大数据平台应对数据挑战
2022年8月,华金证券选择与Cloudera开启合作,构建现代化大数据平台,对数据进行高效的加工、计算和处理,进而赋能业务决策。
华金证券信息技术部数据服务组组长祝茂农先生表示:“由于Cloudera Data Platform(CDP)是完全开源的,这为我们的开发团队带来了很大的灵活性。基于CDP中不同开源组件的开放代码,我们可以根据不同项目需求进行定制和二次开发,进而以最快的速度交付符合业务需求的系统。自2022年8月与Cloudera开启合作后,我们在2022年底成功实现投产。”
数据驱动业务运营智能化
迁移至CDP后,华金证券通过多款开源组件的组合使用,获得了显著收益。例如,公司在数据指标的加工过程中,经常需要对历史的数据指标进行修改删除, Kudu存储引擎可以完美支持这一点。Kudu还支持分布式数据存储,能够横向扩展,在资源不够的情况下可以不断加节点,以存储海量数据。与传统数仓相比,Kudu极大地提升了读写效率,以往需要十几分钟才能加载出来的报表现在可以实现秒级响应。
对于券商行业来讲,业务高管通常需要实时看到各类数据。华金证券通过CDP的组件Kafka和Flink,实现了领导驾驶舱的实时展现,使管理人员能够更直观、更全面地了解企业中所有指标的具体情况。此外,通过Ranger实现了权限隔离、用户隔离和算力共享,使不同用户使用不同的资源。
祝茂农先生表示:“转向CDP之后,我们实现了大数据平台的统一化管理,公司不同的项目都可以基于CDP进行开发和使用,避免重复建设。其大大降低了硬件投入和人力成本,同时提升了开发速度。现在,公司开发人员能够集中精力做数据开发,而无需担心底层架构。”
未来,华金证券还将继续扩展采用CDP的更多功能,以构建流批一体化的实时数据湖,进而推进数据驱动的商业智能创新。