Konfiguriranje tijeka podataka za inkrementalnu obradu

Primijenite inkrementalnu obradu u tijeku podataka kako biste učitali samo nove ili ažurirane zapise iz baze podataka.

Primjena inkrementalne obrade u tijeku podataka omogućuje vam učitavanje samo novih podataka, umjesto izvršavanja potpunog učitavanja svaki put, što je neučinkovito i skupo. Drugim riječima, svaki put kada učitate podatke s pomoću tijeka podataka, možete obraditi samo nove podatke koji su dodani od zadnjeg pokretanja.
Prije nego što počnete stvorite vezu s jednom od podržanih baza podataka, na primjer Oracle, Oracle Autonomous Data Warehouse, Apache Hive, Hortonworks Hive ili Map R Hive. Zatim konfigurirajte novi indikator podataka za tu bazu podataka. Pogledajte Definiranje novog indikatora podataka za izvor podataka.
  1. Stvorite ili otvorite tijek podataka u kojem želite primijeniti inkrementalnu obradu.
  2. U uređivaču Tijek podataka odaberite korak Spremi podatke kako biste prikazali prozor Uređivač koraka.
  3. U polju Skup podataka navedite naziv ulaznog skupa podataka definiranoga u koraku Dodaj podatke.
  4. U opciji Spremi podatke u odaberite Veza s bazom podataka.
  5. Pritisnite Odaberi vezu i odaberite vezu s jednom ili više podržanih ciljnih baza podataka.
  6. U polju Tablica navedite naziv odredišne tablice kojoj pišete.
  7. U opciji Pri pokretanju odaberite Dodaj nove podatke u postojeće podatke.
  8. Pritisnite Spremi.