Fluxul din ce în ce mai mare de informații de la senzori, fotografii, texte, date voce și video care se creează și noile modalități în care putem prelucra datele joacă un rol principal în procesul transformării digitale la nivelul tuturor industriilor.
Întreprinderile au capacitatea de a înțelege și de a anticipa ce segment de clienți va cumpăra un anumit produs și în ce moment. „Big Data” permite și întreprinderilor să își gestioneze operațiunile mai eficient. „Big Data” modifică lumea în alte moduri, nu doar în afaceri:
Îmbunătățirea asistenței medicale. Prin analizarea unui volum mare de fișe și imagini medicale, se pot identifica tipare care contribuie la depistarea timpurie a bolilor și la dezvoltarea de medicamente noi.
Prognozarea și răspunsul la dezastre naturale și create de oameni. Datele primite de la senzori sunt analizate pentru a prognoza cutremure și valuri tsunami. Pentru a îmbunătăți ajutorul acordat supraviețuitorilor, organizațiile caută să identifice tipare de comportament uman. De asemenea, tehnologia „Big Data” se mai folosește pentru a încerca să înțelegem dinamica complexă a migrației, prin compilarea și analizarea statisticilor privind migrația.
„Big Data” despre Pământ. Progresele în ceea ce privește senzorii de la distanță, platformele de comunicare socială, modelarea simulărilor de randament ridicat și monitorizarea in-situ oferă „Big Data” fără precedent despre planeta noastră. Volumul enorm și varietatea datelor oferă o oportunitate pentru a înțelege mai bine Pământul prin extragerea de cunoaștere pe baza acestor date.
Sectoare tradiționale cum sunt transporturile, sănătatea sau producția vor beneficia foarte mult de pe urma analizei și a prelucrării corespunzătoare a datelor, în special a „Big Data”. Datele au potențialul de a:
recrea industriile de servicii ale Europei contribuind la generarea unor produse și servicii de informații inovatoare bazate pe preferințele și necesitățile clienților acestora
stimula productivitatea, punând la dispoziție tuturor sectoarelor informații operative comerciale îmbunătățite
ne furniza mai multă cunoaștere detaliată și înțelegere despre modul în care trebuie să abordăm provocările multiple din societate
face să progreseze cercetarea și de a stimula inovarea
reduce costurile prin sprijinirea întreprinderilor să ofere servicii sau produse mai personalizate
crește eficiența în sectorul public
Câteva exemple de utilizare a „Big Data” sunt:
comercializare personalizată
analiza sentimentelor (evaluarea produselor)
creșterea consumatorilor care orientează creșterea produselor (comportamentul consumatorilor)
aplicațiile biomedicale (medicină și tratament personalizate)
orașe acționate de „Big Data” (orașe inteligente)
Între progresul tehnologic și etică
„Big data” face posibilă existența unor cunoștințe și oportunități fără precedent, însă care este reversul monedei? Există preocupări și întrebări importante care trebuie abordate pentru a ne asigura că sunt protejate drepturile noastre fundamentale și sistemul democratic.
Confidențialitatea datelor. Volumele de date pe care le generăm conțin o cantitate enormă de informații despre viața noastră personală, pe care ar trebui să avem dreptul să le păstrăm confidențiale. Atunci când datele care ar trebui păstrate confidențiale ajung pe mâinile cui nu trebuie, se pot întâmpla lucruri rele. O breșă de securitate a datelor la o școală ar putea să pună identitățile personale ale elevilor în mâinile infractorilor care comit furt de identitate. O breșă de securitate a datelor la un spital sau la cabinetul unui doctor poate pune informațiile pacienților în mâinile celor care ar putea să le folosească inadecvat.
Securitatea datelor. Chiar și atunci când ne hotărâm să ne partajăm datele pentru a ne monitoriza starea de sănătate, de exemplu, putem avea încredere că aceste date sunt păstrate în siguranță? Datele reprezintă un activ incredibil de important, iar colectarea și partajarea datelor poate fi o afacere de anvergură în economia digitală din prezent. Deoarece ne bizuim mult mai mult pe computere, există mai multe amenințări potențiale la datele care sunt stocate. Se pot pierde datele din cauza unei pene de sistem, acestea pot fi corupte de un virus informatic, șterse sau modificate de un hacker.
Discriminarea fondată pe date. Dacă se cunoaște totul, va deveni acceptabil să fie discriminați oamenii în baza datelor pe care le avem despre viața acestora? Cum ar fi să li se ofere persoanelor supraponderale asigurări medicale mai puțin avantajoase? Sau să li se ofere credite cu o dobândă mai mare celor ai căror părinți au avut dificultăți financiare? Atât activitatea bancară, cât și cea de asigurări sunt activități care se conduc foarte mult după date, iar oamenii se pot aștepta să fie analizați și evaluați cu mai multă atenție. Cum ne putem asigura că acest lucru nu se va face într-un mod care să contribuie la a face viața și mai grea pentru cei care au deja mai puține resurse și mai puțin acces la informații?
La nivelul UE, etica în ceea ce privește „Big Data” este susținută de reglementări și documentare, care urmărește să identifice soluții concrete, astfel încât să se profite la maximum de valoarea „Big Data”, fără a se sacrifica drepturile fundamentale ale omului. Autoritatea Europeană pentru Protecția Datelor (AEPD) susține dreptul la viață privată și dreptul la protecția datelor cu caracter personal cu respectarea demnității umane.
Luarea în considerare și cunoașterea mai multor informații despre aceste provocări reprezintă o parte importantă a utilizării „Big Data”. Etica și drepturile individuale trebuie să fie imperative pentru organizațiile care doresc să profite de date. Dacă aceste aspecte nu sunt avute în vedere, societatea noastră poate ajunge într-o poziție vulnerabilă și se pot distruge întreprinderile la nivel de reputație, juridic și financiar.
Există multe alte preocupări în ceea ce privește etica și utilizarea datelor, precum dreptul la nediscriminare bazat pe atributele personale, crearea de profiluri personale și analiza comportamentală predictivă folosite cu scopul de a influența procesele democratice, echitatea și respectul pentru autonomia umană și așa mai departe. Prin urmare, mai mult ca oricând până acum, este important să conștientizăm cu toții ce date, de ce și cum sunt folosite în societatea noastră pentru a putea înțelege și recunoaște situațiile în care datele se utilizează abuziv.
Competențele în domeniul „Big Data” și viitorul locurilor de muncă
Așa cum am văzut, lucrul cu datele implică multe procese, fiecare dintre acestea necesitând seturi unice de date. Lucrul cu „Big Data” necesită atât competențe tehnice, cât și competențe non-tehnice, cum este competența de a opera tehnologiile care fac posibilă existența „Big Data”, o înțelegere a tehnicilor de analiză a datelor, și creativitate și competențe de concepere a poveștilor pentru a crea vizualizări de impact ale datelor.
Lucrul cu „Big Data” necesită setul de competențe și mentalitatea adecvate. Trebuie evaluată care este cea mai bună soluție pentru tipul de date pe care-l aveți, care sunt necesitățile dumneavoastră (și anume ce doriți să realizați prin analiza acelor date), și trebuie alese instrumentele adecvate pentru a crea valoare. Nu este suficient doar să existe datele, ci trebuie să existe și oamenii care pot extrage cunoștințe din aceste date.
Profesioniștii în domeniul „Big Data” trebuie să înțeleagă, totodată, aspectele juridice și economice ale datelor, astfel încât să poată transforma informațiile în valoare și să comunice frecvent cu cadrele de conducere și cu directorii de produs în legătură cu ceea ce au aflat și cum ar putea fi folosite aceste informații pentru direcții noi de activitate, cum ar fi servicii și produse noi, modele operaționale mai eficiente sau piețe noi.
Aceasta este cheia pentru lucrul în domeniu: să fii curios, să cauți să descoperi lucruri noi, să creezi și să testezi teorii și să găsești tipare care îți permit să prognozezi rezultatele.
Până la urmă, toate locurile de muncă din viitor vor necesita o combinație de competențe specifice sectorului și de competențe în domeniul științei datelor, deoarece datele devin un factor important pentru toate sectoarele de activitate:
Întreprinzătorii vor folosi date pentru a face analiză comportamentală, optimizarea varietății și a prețului, optimizarea cheltuielilor de personal, optimizarea distribuției și a logisticii și prognozarea cererii, însă pentru a proceda astfel, este necesară o cunoaștere solidă a industriei și a sectorului de activitate pentru a implementa corect o strategie bazată pe date.
Doctorii care analizează seturi mari de date privind informațiile pacienților pot contribui la identificarea pacienților care sunt predispuși să sufere din cauza unei anumite boli. Profesioniștii din domeniul sănătății joacă, de asemenea, un rol esențial contribuind la formarea inteligenței artificiale în domeniul scanării cerebrale, cu ajutorul feedbackului pe care-l oferă ca experți cu privire la rezultate.
Profesioniștii din domeniul bancar pot aplica analiza sentimentelor și tehnicile de analiză predictivă pentru a prognoza care sunt clienții potențiali și pentru a oferi suplimentar produse țintite clienților.
Și așa mai departe.
Inginerii în domeniul datelor sunt unii dintre cei mai căutați profesioniști în domeniul datelor
Inginerii în domeniul datelor sunt membri vitali ai echipei de analize a datelor din cadrul oricărei întreprinderi și sunt responsabili pentru administrarea, optimizarea, controlul și monitorizarea recuperării, stocării și distribuției datelor la nivelul întregii organizații.
Inginerii în domeniul datelor sunt responsabili pentru identificarea tendințelor privind seturile de date și dezvoltarea de algoritmi pentru a face ca datele primare să fie mai utile întreprinderii. Acest rol de TI necesită un set semnificativ de competențe tehnice, inclusiv o cunoaștere aprofundată a proiectării de baze de date în SQL și multiple limbaje de programare. Însă inginerii în domeniul datelor au nevoie și de competențe de comunicare pentru a colabora la nivelul departamentelor și pentru a înțelege ce doresc să obțină liderii de la marile seturi de date ale întreprinderilor.
Competențele necesare pentru acest post includ: Apache Spark, Scala, Hadoop, Python, Hive, Amazon Web Services, Apache Kafka, Big Data, Extract/Transform/Load (ETL), SQL și Machine Learning. Sectoarele care angajează aceste profiluri: tehnologia informațiilor și servicii, internet, industria autovehiculelor, software pentru computere, consultanță de management, inginerie mecanică și industrială, servicii financiare, spitale și asistență medicală, și telecomunicații.
Unele dintre oportunitățile de angajare în domeniul „Big Data” sunt: cercetător în domeniul datelor, dezvoltator de „Big Data” și consultant în domeniul datelor.