Ваш купон на скидку:
«Ак Барс Банк» успешно внедрил корпоративное хранилище данных на базе Lakehouse-платформы Data Ocean Nova, разработанной отечественным вендором Data Sapience. Основные интеграционные работы и замещение устаревшего хранилища были выполнены силами собственной команды банка, обученной по программам Data Sapience с экспертной поддержкой вендора. Ранее банк использовал хранилище данных на базе MS SQL Server для операционного слоя (ODS) и Greenplum для детального слоя (DDS). Однако эксплуатация такой разрозненной системы выявила множество недостатков, включая разнообразие оборудования, нецелевые импортные компоненты, ограничения производительности и высокую стоимость владения.
В рамках импортозамещения и развития банк искал решение нового поколения, соответствующее принципам Lakehouse-платформы и удовлетворяющее эксплуатационным, техническим, функциональным и экономическим требованиям. После успешного пилотного проекта, в котором был отработан полный цикл загрузки, обработки и доставки данных, для промышленного внедрения была выбрана платформа Data Ocean Nova. За 12 месяцев команда банка самостоятельно разработала схему данных и архитектуру, а затем построила новое хранилище на этой платформе. Был организован операционный слой данных (ODS), куда в режиме реального времени передаются транзакционные журналы для преобразования и загрузки. Детальный слой хранилища (DDS) на основе ODS включает более двухсот логических сущностей и покрывает основные области данных банка.
Внедрение платформы улучшило предсказуемость работы сервисов, а также прозрачность, связность и качество данных в детальном слое хранилища (DSS) и витринах данных. Платформа Data Ocean Nova использует объектное хранилище S3 и работает в режиме высокой доступности, развернутая на двух контурах с синхронизацией данных между S3-кластерами. В настоящее время объем полезных сжатых данных составляет 60 ТБ, с потенциалом роста до 110 ТБ. В хранилище интегрированы 63 внутренних источника данных. До конца года банк планирует ввести в эксплуатацию 35 форм обязательной отчетности, область витрин данных для управления маркетинговыми коммуникациями и отчетность по мотивации персонала.
Платформа позволяет консолидацию функций и данных аналитического хранилища в единой системе, что снижает стоимость владения и улучшает доступность сервисов данных. Она развернута на типовом оборудовании общедоступного класса и поддерживает вариативность вычислительных технологий, таких как Spark, Trino и Impala. Это обеспечивает выполнение всех задач современного аналитического ландшафта данных, включая загрузку и трансформацию данных, построение аналитических слоев и пользовательский доступ для произвольных запросов. Иван Зипухо, начальник управления технологий сбора и хранения данных «Ак Барс Банка», отметил, что внедрение платформы данных Data Ocean Nova демонстрирует, как зрелое технологическое решение и профессионализм команды банка могут вывести бизнес-процессы на уровень современного цифрового банка. Евгений Вилков, технический руководитель Data Ocean Nova, подчеркнул, что благодаря обратной связи от экспертов банка удалось улучшить поддержку и документацию платформы.