详细内容或原文请订阅后点击阅览
RSHB:向 Lakehouse 架构迈进
俄罗斯农业银行大数据部主任亚历山大·萨布罗夫介绍了按照 Lakehouse 概念创建的数据处理新基础设施及其取得的成果。
来源:OSP网站大数据新闻俄罗斯农业银行正在根据 Lakehouse 概念创建用于处理数据的新基础设施,从而改造其数据仓库。同时,正在对所使用的解决方案进行进口替代。该项目对保证该银行的经营连续性和竞争力发挥着重要作用。俄罗斯农业银行大数据部主任、数据奖提名人亚历山大·萨布罗夫讲述其实施情况。
数据奖 数据奖- 项目之前有什么,处理数据的基础设施是什么?
- 项目之前有什么,处理数据的基础设施是什么?2020年,该行启动了数据管理系统建设计划。在该计划启动时,有一个存储设施正在运行——基于 Oracle 平台构建的中央数据仓库 (CDW)。当时存在着许多问题:新的自动化银行系统的实施、需要不断调整的集中化流程以及专有数据模型。此外,基础设施无法承受不断增长的负载,项目团队仅有 15 人。
作为该计划的一部分,我们开始实施一个新的数据仓库。我们快速部署了数据湖,构建了运营数据层,部署了数据管理工具和管理AI模型的平台。
因此,在 2023 年项目开始时,我们使用 Informatica ETL 工具在 Cloudera 上实现了数据湖。它开发了许多用于营销目的的数据集市、用于联络中心的数据集市、用于评估抵押品的分析服务和客户服务质量管理集市。数据湖的用户数量庞大,超过300人,被人工智能实验室、与央行互动的部门以及其他部门积极使用。
——情况出了什么问题?
——情况出了什么问题?——目标是什么?