Integracija podatkov z brezplačnim odprtokodnim orodjem Talend

Dandanes podatki in informacije v življenju podjetij in posameznikov igrajo zelo pomembno vlogo, pogosto celo ključno za preživetje. Količina podatkov, s katerimi dnevno operiramo je vse večja. Pri tem pa je ključno vedeti, da sam podatek še ni nujno informacija, ki jo lahko koristno uporabimo.

Do uporabnih informacij na osnovi podatkov lahko pridemo s pomočjo različnih orodij, kot so izpisi, preglednice, baze podatkov in še kaj. Pri tem si pri vsakodnevnem delu po pomagamo s priročnimi orodji kot so MS Office, OpenOffice in podobno. V tem postopku iz izvornih podatkov izluščimo informacije, ki jih v določenem trenutku za določen namen potrebujemo. Na ta način nehote ustvarjamo številne podatkovne 'otoke', ki so med seboj nepovezani, niso posodobljeni z najnovejšimi izvornimi podatki in katerih rezultat (informacija) sčasoma postaja vse manj točna.

Podoben primer je obstoj različnih informacijskih podsistemov znotraj podjetja, kjer zaradi neusklajenosti pogosto prihaja do podvajanja dela, nesporazumov, napak in konfliktov, kar vse močno zmanjšuje učinkovitost podjetja.

Izdelovalci baz podatkov že dolgo ponujajo orodja za prenos podatkov iz različnih virov v poenoteno okolje njihove podatkovne baze, nekateri celo v obratni smeri, vendar so ta orodja pogosto zelo draga in zato nedostopna manjšim in srednjim podjetjem, posameznikom pa še toliko bolj.

Na delavnici si bomo ogledali in praktično preizkusili orodje Talend, ki je zasnovano na odprto-kodni zasnovi in ga lahko vsakdo brezplačno naloži iz interneta. Delo in delovanje si bomo ogledali na nekaj najbolj vsakdanjih primerih.

Talend, ki je plod večletnih intenzivnih investicij v raziskave in razvoj s trdno finančno podporo vodilnih investicijskih podjetij, je ena redkih brezplačnih odprtokodnih rešitev za integracijo podatkov. Odprta koda je izjemno dobrodošla na tržišču sicer drage lastniške programske opreme predvsem zato, ker slednja že vse predolgo drži informatike v tehničnem in finančnem primežu. Odprta koda spreminja stukturo industrije s programsko opremo in prinaša konkurenčno prednost za končne uporabnike.

Delo na delavnici bo potekalo na računalnikih, kjer bo vsak udeleženec lastnoročno preizkusil delovanje programa.

Delavnica je namenjena:

• programerjem, ki delate z bazami podatkov,
• vodilnim delavcem, ki imate težave z nenadzorovano razpršenostjo podatkov in bi se radi seznanili s tehnologijo ETL.

Program

Osnove

Ogledali si bomo osnove procesa ETL (Extract-Transform-Load), pa tudi nadgradnje DQ (Data Quality) in MDM (Master Data Management).
Sledi namestitev orodja TOS (Talend Open Studio) na delovnih postajah, ter prvi zagon z odprtjem novega projekta.
Ogledali si bomo osnovne elemente: poslovne procese, posle, kontekste, meta-podatke, dokumentacijo in ne nazadnje obsežno paleto komponent, ki nam pomagajo k hitremu doseganju rezultatov.

Primer 1:  polnjenje tabele iz datotek

Ogledali si bomo vpis tabele v podatkovni bazi iz različnih virov v obliki datotek:

• CSV (Comma Separated Values),
• XML (eXtensible Markup Language),
• pozicijsko formatirani izpisi.

Spotoma si bomo ogledali še zagon in testne izpise.
 

Primer 2: prepis (ažuriranje) podatkov med  različnimi bazami

Ogledali si bomo kako prepišemo podatke iz ene podatkovne baze v drugi in kako zagotovimo medsebojno osveževanje podatkov.
Pri tem si bomo ogledali še izvoz poslov in periodično poganjanje poslov iz operacijskega sistema.

Primer 3: iteracije in pod-posli

Ogledali si bomo iteracijo skozi večje število vhodnih datotek, pri čemer pomo posle strukturirali v več pod-poslov.
Pri tem si bomo obdelali tudi parametre in vrnjene vrednosti.

Vprašanja in odgovori

Predavatelj

Priporočljivo gradivo

Kotizacija

Plačilo z DDV znaša 222 € in vključuje strokovno predavanje, reševanje praktičnih primerov z obrazložitvami, delo na računalnikih, seminarsko gradivo, potrdilo o udeležbi na delavnici, kosilo in napitke med odmori. Kotizacijo prosimo nakažite po prejetem predračunu na transakcijski račun št. 33000-0001159917 pri Hypo Alpe-Adria-bank d.d., najkasneje 3 dni pred izvedbo delavnice. Po delavnici vam bomo po pošti poslali račun. Zadnji rok za odjavo udeležbe je 2 dni pred izvedbo delavnice, v nasprotnem primeru vam zaračunamo stroške v višini 20% kotizacije.