Data Science i Big Data

En aquesta àrea d’expertesa s’inclou:

 Serveis:

• Arquitectures Big Data per a l’explotació d’informació (lambda, kappa, ...) i frameworks de processat massiu de dades: Spark, Flink, Beam, ...
• Data Lakes a mida a diferents proveïdors de Cloud (Google, Amazon i Azure)
• Processos de governança de dades semi-automàtics, catàlegs de dades, pre-processament i preparació de les dades
• Repositoris NOSQL especialitzats: MongoDB, Neo4j, Cassandra, HDFS+Hbase+Spark (i la resta de l’ecosistema Hadoop), ...
• Models d’aprenentatge automàtic (regles d’associació, mètodes lineals supervisats, xarxes neuronals, màquines de vector suport, arbres de decisió/boscos aleatoritzats, clustering, ...)
  • Classificació i regressió
  • Algoritmes de predicció
• Models d’aprenentatge automàtic específics: processat de llenguatge Natural (NLP), processat de series temporals, processat d’imatges / Visió per computador (CV).
• Programari i entorns pel desenvolupament de models:  Mllib, TensorFlow, Pytorch, Keras, scikit-learn, notebooks (Zeppelin, Jupyter), …
• Càlcul d’indicadors (KPIs), quadres de comandament i visualització de dades. Ús d’eines de Business Intelligence per a la representació gràfica d’anàlisi descriptiva
• Construcció d’analítica en temps real (complex-event processing, streaming analytics)