Sve veći protok informacija iz senzora, nastanak podataka iz fotografija, tekstova, zvuka i videozapisa te novi načini na koje možemo obrađivati podatke igraju veliku ulogu u procesu digitalne transformacije u svim industrijama.
Tvrtke mogu razumjeti i predvidjeti koja skupina kupaca će kupiti koji proizvod i kada će ga kupiti. Veliki podaci također omogućuju tvrtkama da učinkovitije upravljaju svojim poslovanjem. Veliki podaci mijenjaju svijet i na druge načine, ne samo u poslovanju:
Poboljšanje zdravstvene skrbi. Analiziranjem velikog volumena medicinske dokumentacije i medicinskih snimki, moguće je utvrditi obrasce koji mogu rano opaziti bolest i razvijati nove lijekove.
Predviđanje i reagiranje na prirodne katastrofe i katastrofe izazvane ljudskim djelovanjem. Podaci iz senzora analiziraju se u svrhu predviđanja potresa i tsunamija. Kako bi se unaprijedilo pružanje pomoći preživjelima, organizacije istražuju obrasce ljudskog ponašanja. Tehnologija velikih podataka također se koristi kako bi se pokušalo razumjeti složenu dinamiku migracije prikupljanjem i analiziranjem statističkih podataka o migraciji.
Veliki podaci o Zemlji. Napreci u daljinskim istraživanjima (engl. remote sensing), korištenju društvenih mreža, visokoučinkovitom simulacijskom modeliranju i praćenju na licu mjesta pružaju do sada nepoznate velike podatke o našem planetu. Veliki volumen i raznovrsnost podataka nude mogućnost boljeg razumijevanja Zemlje dobivanjem različitih spoznaja iz tih podataka.
Kvalitetna analiza i obrada podataka, a naročito velikih podataka, donijet će veliku korist tradicionalnim sektorima kao što su prijevoz, zdravstvo ili proizvodnja. Podaci imaju potencijal da:
moderniziraju uslužne industrije u Europi tako što će im pomoći da stvaraju inovativne informacijske proizvode i usluge na temelju želja i potreba svojih kupaca,
povećaju produktivnost tako što će omogućiti svakom sektoru primjenu unaprijeđenog poslovnog obavještavanja,
nam pruže iscrpnije znanje i razumijevanje načina na koji se možemo suočiti s različitih društvenim izazovima,
unaprijede istraživanje i ubrzaju inovaciju,
smanje troškove tako što će pomoći tvrtkama da nude prilagođenije usluge ili proizvode,
povećaju učinkovitost u javnom sektoru.
Neki primjeri uporabe velikih podataka su:
prilagođeni marketing,
analiza reakcija (recenzija o proizvodu),
povećanje broja potrošača koje dovodi do povećanja broja proizvoda (ponašanje potrošača),
biomedicinske aplikacije (prilagođena medicina i liječenje),
gradovi koji se temelje na velikim podacima (pametni gradovi).
Pametno zdravstvo: unaprjeđenje zdravstvene skrbi i javnog zdravstva
Dešifriranje ljudskog genoma trajalo je 10 godina. Danas računalna snaga analize velikih podataka omogućava nam da dešifriramo čitave nizove DNK u nekoliko minuta. Pretpostavlja se da će nam to omogućiti da izliječimo, razumijemo i predvidimo obrasce bolesti. Kada bi se svi pojedinačni podaci iz pametnih satova i nosivih uređaja okupili, mogli bi se primijeniti na milijune ljudi i njihove bolesti. Na taj način klinička ispitivanja postala bi još snažnija te bi pružala još više uvida.
Na primjer, Appleova nova aplikacija za zdravlje, koja se naziva ResearchKit, može pretvoriti vaš telefon u uređaj za biomedicinsko istraživanje. Znanstvenici sada mogu prikupljati podatke i unos s telefona korisnika da bi proveli zdravstvene studije. Vaš uređaj (npr. pametni sat) može pratiti koliko koraka napravite u danu i kako spavate, može pitati bolesnike koji imaju rak kako se osjećaju nakon kemoterapije ili pratiti kako napreduje stanje osobe s Parkinsonovom bolesti. To može drastično povećati opseg studija i ispitivanja, kao i vjerodostojnost podataka.
U drugom primjeru, tehnike velikih podataka koriste se za praćenje nedonoščadi. Nedonoščad mora doseći potpunu zrelost izvan majčine utrobe dok imunološki sustav ne postane potpuno funkcionalan, što povećava rizik od infekcije. Izrazito je važna brza dijagnoza bez invazivnog praćenja. Digi-NewB radi na neinvazivnom sustavu praćenja koji će pomoći liječnicima i medicinskim sestrama da donose bolje odluke u kraćem vremenu kako bi se spriječile infekcije. Sustav se razvija na temelju velike baze podataka koja sadrži više od 700 zapisa podataka o vitalnim znakovima novorođenčadi te podataka koji se dobivaju iz videozapisa i zvuka.
Između tehnološkog napretka i etike
Veliki podaci otvaraju vrata dosad neviđenim spoznajama i mogućnostima, ali što skriva druga strana medalje? Postoje važni razlozi za zabrinutost i pitanja na koja moramo odgovoriti kako bismo osigurali zaštitu naših temeljnih prava i demokratskog sustava.
Zaštita podataka. Opseg podataka koje stvaramo sadrži golemu količinu informacija o našim osobnim životima. Trebali bismo imati pravo da ih sačuvamo za sebe. Kada podaci koji su trebali biti zaštićeni od očiju javnosti dospiju u pogrešne ruke, loše se stvari mogu dogoditi. Kršenjem sigurnosti podataka u školi osobni identiteti učenika mogli bi dospjeti u ruke zločinaca koji bi mogli počiniti krađu identiteta. Kršenjem sigurnosti u bolnici ili liječničkoj ordinaciji informacije o bolesnicima mogle bi dospjeti u ruke onih koji bi ih mogli zloupotrijebiti.
Sigurnost podataka. Čak i kada odlučimo podijeliti naše podatke, primjerice, u svrhu praćenja zdravlja, možemo li se pouzdati da se čuvaju na sigurnom? Podaci su izuzetno važan resurs, a prikupljanje i dijeljenje podataka može biti unosan posao u današnjem digitalnom gospodarstvu. Budući da se danas uvelike oslanjamo na računala, postoji niz mogućih ugroza koje prijete pohranjenim podacima. Podaci se mogu izgubiti zbog kvara sustava, može ih oštetiti računalni virus ili ih haker može obrisati ili izmijeniti.
Diskriminacija na osnovi podataka. Ako se sve zna, hoće li postati prihvatljiva diskriminacija ljudi na osnovi podataka koje imamo o njihovim životima? Na primjer, ponuda nepovoljnijeg zdravstvenog osiguranja pretilim osobama? Ili ponuda kredita s većim kamatama onim osobama čiji su roditelji imali financijske poteškoće? Bankarstvo i osiguranje uvelike se oslanjaju na podatke i ljudi mogu očekivati da će ih detaljno analizirati i procjenjivati. Kako možemo osigurati da se to ne čini na način koji još više otežava život onima koji već imaju manje resursa i pristupa informacijama?
Na razini Europske unije, etika u području velikih podataka zaštićena je regulacijom i dokumentacijom, koja nastoji pronaći konkretna rješenja kako bi se osigurala najveća moguća vrijednost velikih podataka a da se pritom ne moraju žrtvovati temeljna ljudska prava. Europski nadzornik za zaštitu podataka (engl. European Data Protection Supervisor, EDPS) štiti pravo na zaštitu privatnosti i pravo na zaštitu osobnih podataka uz poštivanje ljudskog dostojanstva.
Što su točno osobni podaci?
Opća uredba o zaštiti podataka (engl. General Data Protection Regulation, GDPR) navodi sljedeće:
„osobni podaci” znači svi podaci koji se odnose na pojedinca čiji je identitet utvrđen ili se može utvrditi („ispitanik”); pojedinac čiji se identitet može utvrditi jest osoba koja se može identificirati izravno ili neizravno, osobito uz pomoć identifikatora kao što su ime, identifikacijski broj, podaci o lokaciji, mrežni identifikator ili uz pomoć jednog ili više čimbenika svojstvenih za fizički, fiziološki, genetski, mentalni, ekonomski, kulturni ili socijalni identitet tog pojedinca.“
Više o osobnim podacima i pravilima o zaštiti podataka možete pročitati na .
Važan dio uporabe velikih podataka je svijest i bolje poznavanje ovih izazova. Etika i prava pojedinaca moraju biti na prvom mjestu organizacijama koje žele iskorištavati podatke. U suprotnom, naše društvo će se naći u teškom položaju te će nanijeti štetu poduzećima na razini ugleda, pravnoj i financijskoj razini.
Postoje i mnogi drugi razlozi za zabrinutost po pitanju etike i uporabe podataka, kao što su pravo na zabranu diskriminacije na osnovi osobnih karakteristika, osobnog profiliranja i prediktivne bihevioralne analize koja se koristi za utjecanje na demokratske procese, pravednost i poštovanje prema čovjekovoj neovisnosti i sl. Prema tome, danas je više nego ikada prije važno da svi budemo svjesni koji podaci se koriste te zašto i kako se oni koriste u našem društvu kako bismo mogli razumjeti i prepoznati zlouporabu podataka.
Vještine u vezi s velikim podacima i budućnost poslova
Kao što smo vidjeli, proučavanje podataka uključuje brojne procese, od kojih svaki zahtijeva jedinstvene vještine. Za rad s velikim podacima potrebne su kako tehničke tako i ostale vještine, kao što su mogućnost upravljanja tehnologijama koje ih omogućuju, poznavanje tehnika za analizu podataka te kreativnost i vještine pričanja priče za stvaranje moćnih vizualizacija podataka.
Veliki podaci zahtijevaju prave vještine i način razmišljanja. Morate procijeniti koje je najbolje rješenje za vrstu podataka koju imate, koje su vaše potrebe (odnosno, što želite postići analiziranjem tih podataka) i odabrati prave alate u cilju stvaranja vrijednosti. Nije dovoljno samo imati podatke, već i ljude koji mogu na osnovi tih podataka steći uvide.
Stručnjaci za velike podatke također moraju poznavati pravne i ekonomske aspekte podataka, tako da mogu pretvoriti uvide u vrijednost i često komunicirati s rukovoditeljima i voditeljima razvoja proizvoda o tome što su naučili i kako se to njihovo znanje može iskoristiti u novim poslovnim smjerovima, kao što su nove usluge i proizvodi, učinkovitiji operativni modeli ili nova tržišta.
To je ključ za rad u ovom području: znatiželja, traženje novih stvari koje se mogu otkriti, stvaranje i testiranje teorija i pronalaženje obrazaca koji vam omogućuju predviđanje rezultata.
U konačnici, svi poslovi budućnosti zahtijevat će kombinaciju vještina specifičnih za pojedini sektor i kompetencije iz područja podatkovne znanosti jer podaci postaju važan pokretač za sve sektore djelatnosti:
Poduzetnici će koristiti podatke za provedbu bihevioralne analize, optimizacije raznolikosti i cijene, optimizacije uloženog rada, optimizacije distribucije i logistike te predviđanja potražnje. Međutim, za ispravno provođenje strategije utemeljene na podacima potrebna je i stabilna industrija te znanje o poslovanju.
Liječnici koji analiziraju velike skupove podataka o informacijama bolesnika mogu pomoći u utvrđivanju bolesnika za koje postoji velika vjerojatnost da će oboljeti od određene bolesti. Zdravstveni djelatnici također imaju ključnu ulogu u podučavanju umjetne inteligencije koja očitava snimke mozga sa svojim stručnim povratnim informacijama o nalazima.
Djelatnici u bankarstvu mogu primijeniti tehnike analize reakcija i prediktivne analize da bi predvidjeli tko su potencijalni klijenti i dodatno ponudili ciljane proizvode klijentima.
I tako dalje.
Bez obzira na to koliko su uznapredovale, znanost i analiza podataka ne mogu otkloniti potrebu za ljudskim uvidima. Naprotiv, postoji nužna potreba za kvalificiranim osobama koje mogu razumjeti podatke, ali i koje mogu doprinijeti ovom sektoru pružanjem svojega stajališta i uvida.
Podatkovni inženjeri su jedni od najtraženijih stručnjaka za podatke
Podatkovni inženjeri su ključni članovi tima za analizu podataka u svakom poduzeću, odgovorni su za upravljanje, optimizaciju, nadzor i praćenje dohvata, pohrane i raspodjele podataka u cijeloj organizaciji.
Podatkovni inženjeri odgovorni su za pronalaženje trendova u skupovima podataka i razvijanje algoritama kako bi neobrađeni podaci bili još korisniji poduzeću. Ovo radno mjesto u području informacijskih tehnologija zahtijeva značajne tehničke vještine, uključujući izvrsno poznavanje dizajna SQL baza podataka i više programskih jezika. Ali podatkovnim inženjerima isto tako su potrebne komunikacijske vještine za suradnju s više odjela i razumijevanje onoga što vodstvo poduzeća želi dobiti iz velikih skupova podataka u vlasništvu tvrtke.
Vještine potrebne za posao uključuju: Apache Spark, Scala, Hadoop, Python, Hive, Amazonove usluge na webu, Apache Kafka, veliki podaci, Extract/Transform/Load (ETL), SQL i strojno učenje.
Sektori koji zapošljavaju takve profile: informacijska tehnologija i usluge, internet, automobilska industrija, industrija računalnih softvera, savjetovanje u vezi s upravljanjem, strojarstvo i industrijsko inženjerstvo, financijske usluge, bolnice i zdravstvena skrb i telekomunikacije.
Neke druge poslovne mogućnosti u području velikih podataka su: podatkovni znanstvenik, razvojni inženjer velikih podataka i podatkovni savjetnik.
