Oracle-Snowflake Connector
Czym jest Oracle-Snowflake Connector?
Jest to ogólne narzędzie API opracowane przez zespół Data Consulting, umożliwiające połączenie Bazy Danych Oracle z Data Warehouse Snowflake Cloud.
Pozwala ono na wyszukiwanie, modyfikowanie danych, a także tworzenie i zmianę obiektów w Snowflake bez konieczności stosowania dodatkowej warstwy pomiędzy bazą danych Oracle a Snowflake. Daje to możliwość transparentnego włączenia przetwarzania danych z wykorzystaniem najnowocześniejszego rozwiązania Snowflake jako części istniejącego przetwarzania w Data Warehouse lub jego ulepszenia. Oracle-Snowflake Connector pozwala na tworzenie POC porównujących wydajność pomiędzy uruchomieniem logiki na Snowflake a uruchomieniem jej na Oracle bez angażowania dodatkowego narzędzia. Przy minimalnym wysiłku, istniejący kod może zostać przekształcony w wersję umożliwiającą uruchomienie go na Snowflake zamiast na Oracle.
Jak można wykorzystać Oracle-Snowflake Connector?
Po zainstalowaniu Oracle-Snowflake Connector w kilku prostych krokach można go wykorzystać do wykonania kilku operacji na bazach danych Snowflake i Oracle w przejrzysty sposób
- Wybierz i zwróć dane z Snowflake do Oracle
- DML (aktualizacja, usunięcie, wstawienie) danych na bazy danych Snowflake
- Wstaw i pobierz zbiorcze dane z Oracle do bazy danych Snowflake
- Uruchom procedurę JavaScript zapisaną w bazie danych Oracle
- Modyfikuj i twórz obiekty na bazie danych Snowflake operując na nich z Oracle: DDL (stworzenie, upuszczenie, zmiana)
- Umożliwia monitorowanie zapytań (stanu) po stronie Snowflake
Przykłady użycia Oracle-Snowflake Connector:
Przypadek #1
Aktualna sytuacja: System używany głównie do przechowywania i przetwarzania transakcji z użytkowników ma teraz na żądanie dla klienta wykonywać analizę danych z przeszłości. Nie tylko wszystkie transakcje z klientami powinny być przechowywane i przetwarzanie w jak najkrótszym czasie – klient chciałby być w stanie wykonywać pewne analizy na swoim koncie, które polegają na grupowaniu i sortowaniu ogromnych ilości danych historycznych.
Rozwiązanie: Oracle jest skonfigurowany i traktowany jako baza danych OLTP, dostosowana do wysokiego wolumenu transakcji przy minimalnym czasie reakcji. Snowflake służy do zwracania klientowi danych wyjściowych z analizy, która polega na agregacji dużej ilości danych historycznych (tj. sumy wszystkich transakcji z ostatnich n lat pogrupowanych według kategorii). Aplikacja wykorzystuje procedury przechowywane w Oracle i PL/SQL jako pojedynczy punkt kontaktowy dzięki zastosowaniu Oracle-Snowflake Connector do uzyskania wyników z Snowflake.
Przypadek #2
Aktualna sytuacja: Obecny system jest mocno obciążony zadaniami wsadowymi i regularnym raportowaniem. Ze względu na zmianę zakresu działalności firmy pojawiła się potrzeba tworzenia nowych raportów, które umożliwią podejmowanie decyzji biznesowych z uwzględnieniem zmienionej perspektywy. Dotychczasowa sprawozdawczość musi być utrzymywana w celu utrzymania bieżącej działalności firmy.
Nowe wyzwanie biznesowe wymaga stworzenia zestawu raportów wykorzystujących inne zestawy granulacji i grupowania niż istniejąca logika przetwarzania.
Rozwiązanie: Bieżące przetwarzanie pozostaje nienaruszone, a opracowanie nowego raportu ma miejscu przy użyciu danych przesyłanych do Snowflake Cloud Data Warehouse. Oracle-Snowflake Connector służy do łączenia się z Snowflake i zwracania wyników agregacji. Nowe raporty mogą być tworzone w ramach istniejącego rozwiązania DWH, a wyniki są przechowywane i udostępniane przez aplikację używaną przez użytkowników biznesowych. Zmiana jest przejrzysta dla systemów i aplikacji wykorzystywanych do publikowania i dystrybucji raportów wśród użytkowników biznesowych.
Oracle-Snowflake Connector:
- Udostępnianie SQL i PL/SQL API w celu połączenia Snowflake bezpośrednio z bazy danych Oracle
- Możliwość wykonania dowolnego poprawnego zapytania SQL Snowflake bezpośrednio z bazy danych Oracle
- Możliwość dalszego przetwarzania wyników zapytań Snowflake za pomocą Oracle SQL i PL/SQL
- Możliwość wykonywania poleceń DML względem tabel w Snowflake bezpośrednio z bazy danych Oracle (zarówno z SQL, jak i PL/SQL)
- Uruchamianie jednorzędowych i zbiorczych wstawek do tabel Snowflake bezpośrednio z bazy danych Oracle
- Możliwość uruchomienia procedury przechowywania danych w JavaScript Snowflake z bazy danych Oracle
- Możliwość uruchomienia DDL w Snowflake z bazy danych Oracle
- Możliwość uruchomienia TCL w Snowflake z bazy danych Oracle
- Obsługa synchronicznego i asynchronicznego wykonywania poleceń Snowflake z bazy danych Oracle
- Monitorowanie asynchronicznych statusów zapytań Snowflake i pobieranie wyników z bazy danych Oracle
CONTACT US
+48 22 398 47 81
