De la un DWH Oracle legacy la un lakehouse cloud-native

IDS a proiectat un lakehouse cloud-native pe Azure — Synapse pentru stratul de warehouse, Data Factory pentru orchestrare, Databricks pentru logica de transformare aflată anterior îngropată în PL/SQL — înlocuind joburile batch monolitice cu pipeline-uri modulare și testabile.

Client

O bancă comercială de dimensiune medie

Servicii prestate

About the project

Our solution

Clientul: Cine sunt

O bancă comercială care își rula data warehouse-ul central pe Oracle de peste 15 ani, susținând raportarea de risc, financiară și reglementată.

Provocarea: Identificarea problemei

Ferestrele de procesare batch crescuseră de la 4 la 11 ore, logica ETL trăia în pachete PL/SQL nedocumentate, scrise de persoane care între timp plecaseră din bancă, iar fiecare raport de reglementare nou însemna săptămâni întregi de „arheologie” înainte de a scrie o singură linie de cod nouă. „Întrețineam un muzeu, nu o platformă de date,” a declarat directorul de Inginerie a Datelor   .

Parcursul: Căutarea unei soluții

Banca a evaluat o migrare directă de tip „lift and shift” către infrastructura cloud, dar un proof of concept a arătat că aceasta ar fi mutat pur și simplu aceeași logică fragilă pe o infrastructură mai costisitoare — fără nicio îmbunătățire a ferestrei de procesare și fără niciun câștig în mentenabilitate.

Descoperirea: Găsirea IDS

IDS a fost adusă prin recomandarea unui partener tehnologic, în mod specific pentru experiența sa în replatformare, care depășea simpla migrare a infrastructurii și ajungea până la re-arhitecturarea pipeline-urilor propriu-zise.

Soluția: Intervenția

IDS a proiectat un lakehouse cloud-native pe Azure — Synapse pentru stratul de warehouse, Data Factory pentru orchestrare, Databricks pentru logica de transformare aflată anterior îngropată în PL/SQL — înlocuind joburile batch monolitice cu pipeline-uri modulare și testabile.

Implementarea: Bătălia

Migrarea a fost etapizată pe domenii tematice, rulând în paralel pipeline-urile legacy și cele noi, cu reconciliere automată, până când fiecare domeniu se potrivea exact. Cel mai dificil obstacol a fost un set de calcule de risc nedocumentate, fără un owner de business clar; IDS a lucrat împreună cu analiștii de risc pentru a reconstitui și valida logica prin inginerie inversă, înainte de trecerea efectivă la noul sistem.

Rezultatele: Finalul fericit

  • Fereastra de procesare batch: 11 ore → 2,5 ore   
  • Costul infrastructurii: reducere de 30% după migrare   
  • Timpul necesar pentru construirea unui raport de reglementare nou: săptămâni → zile   
  • Zero întreruperi ale raportării în timpul trecerii la noul sistem

„În sfârșit putem adăuga o sursă de date nouă fără să ne ținem respirația.” — Directorul de Inginerie a Datelor   

Tehnologii folosite: Azure Synapse · Azure Data Factory · Databricks · Oracle (sursă legacy)

Facebook
LinkedIn
Trimite pe E-mail

Mai multe studii de caz

O singură platformă, două lumi de date: un data mart de Big Data Analytics pentru Controlling-ul unui grup bancar

Client: Grup bancar de top
IDS a proiectat și construit un nou data mart analitic, dedicat Controlling-ului, construit în întregime pe tehnologii de big data, nu pe stack-ul Oracle al clientului.
Citește mai mult

O migrare fără sincope: o nouă fundație de Data Warehouse pentru echipa de Controlling a unei bănci

Client: Instituție bancară de top
Când a început migrarea către noul DWH, IDS și-a asumat sarcina de a duce acel Datamart — și logica de business din spatele lui — pe noua platformă.
Citește mai mult

De la Hadoop la Databricks: scalarea unei platforme de date bancare dincolo de limitele sale

Client: Client bancar
IDS Consulting a fost adusă pentru a oferi suport tehnic practic și consultanță pentru migrarea către Databricks.
Citește mai mult

De la zile la minute: o transformare de 8 ani a Data Warehouse-ului pentru un operator telecom de top

Client: Operator telecom de top
IDS Consulting a fost adusă nu pentru o singură intervenție, ci ca extensie continuă a echipei de Data Warehouse a clientului. Mandatul: modernizarea modului în care datele circulau prin platformă și menținerea evoluției acesteia în siguranță, pe măsură ce business-ul — și infrastructura de bază — continuau să se schimbe în jurul ei.
Citește mai mult

Platformă de date full-stack, cu testare integrată și transfer de cunoștințe

Client: O companie de servicii IT de dimensiune medie
IDS a livrat platforma de la un capăt la altul (servicii Python și .NET, acoperire automată de testare încă din prima zi), rulând în paralel un traseu structurat de transfer de cunoștințe — asociind ingineri IDS cu echipa internă a clientului pe tot parcursul proiectului, nu doar într-o săptămână de predare la final.
Citește mai mult

O platformă de date pentru comerț full-stack, construită și testată de la un capăt la altul

Client: Un lanț de retail omnichannel
IDS a livrat dezvoltare full-stack (backend Java, front end React), cu un flux dedicat de QA rulând în paralel încă de la început — testare funcțională, de regresie și de performanță integrată în fiecare sprint — sub coordonarea unui singur program manager, responsabil deopotrivă de scop, termene și calitate.
Citește mai mult
Contact