Nowoczesna integracja danych dla wydajniejszego raportowania i niższych kosztów
Przesyłanie danych analitycznych z Oracle on-premises do AWS S3 w celu optymalizacji raportowania i redukcji kosztów operacyjnych.
AWS S3
nowe repozytorium analityczne dla danych Oracle
Parquet
przetworzone dane gotowe do raportowania
Lower Cost
mniejsze koszty przetwarzania w chmurze
Wyzwanie Biznesowe
Klient potrzebował przesyłać dane analityczne z systemów Oracle on-premises do AWS S3, aby poprawić wydajność raportowania i obniżyć koszty operacyjne.
Ograniczeniem był brak wsparcia dla transferu danych w formacie Parquet oraz potrzeba przetwarzania i łączenia danych jeszcze przed ich zapisaniem w chmurze.
Zastosowane Rozwiązanie
Goldenore wdrożyło rozwiązanie oparte na GIFRÖST, Debezium, Apache Kafka i KSQL, które przechwytuje dane z Oracle, wykonuje transformacje w czasie rzeczywistym i zapisuje je do AWS S3 w formacie Parquet.
Przechwycenie danych z Oracle
Uruchomiono strumień danych z systemów on-premises do platformy streamingowej opartej na Apache Kafka.
Transformacje i joiny
Z wykorzystaniem KSQL przygotowano dane do raportowania jeszcze przed ich zapisaniem w warstwie docelowej.
Zapis do AWS S3
Dane przekształcono do formatu lepiej dopasowanego do raportowania i kosztów przetwarzania w chmurze.
“Klient ograniczył koszty przetwarzania danych w chmurze i usprawnił raportowanie dzięki wcześniejszemu przetworzeniu oraz ujednoliceniu danych przyrostowych.”
Klient projektu
Kluczowy efekt projektu
Rezultaty Projektu
Niższe koszty operacyjne
Nowy model przesyłania i przygotowania danych ograniczył obciążenie infrastruktury AWS i koszty przetwarzania.
Wydajniejsze raportowanie
Dane trafiają do warstwy analitycznej już częściowo przetworzone, co przyspieszyło raportowanie i analizy.
Lepsza kontrola jakości danych
Ujednolicenie danych przyrostowych poprawiło weryfikację poprawności informacji w aplikacjach kontrolnych.
Zmagasz się z podobnym wyzwaniem?
Skonsultuj z nami swoją architekturę. Pomożemy zaprojektować bezpieczną ścieżkę migracji, integracji danych lub wdrożenia rozwiązania czasu rzeczywistego dopasowanego do Twojego środowiska.