Presentazione introduttiva ai Big Data e alla scienza dei dati fatta all'Ordine degli Ingegneri della provincia di Bergamo il 7 giugno 2014.

1. INTRODUZIONE AI BIG DATA
E ALLA SCIENZA DEI DATI
Ordine degli Ingegneri della Provincia di Bergamo, 7 giugno 2014
!
Ing. Vincenzo Manzoni, PhD
me@vincenzomanzoni.com

2. UN’INTERESSANTE
METAFORA…

3. Big Data

4. Big Data

5. Big Data

6. Big Data
n. Computing data of a very large size, typically to the extent that its manipulation and
management present significant logistical challenges; (also) the branch of computing
involving such data.
Oxford English Dictionary, 2013

7. L’ORIGINE DEL TERMINE
Usato per la prima volta nel 2008 nel
Computing Community Consortium.
Stati Uniti
Italia

8. LE 3 V
Volume
Velocità
Varietà

9. VOLUME
Volume
Velocità
Varietà
Informazione prodotta in un giorno
2.5 milioni di TB
(il 20% di tutta la conoscenza umana
nel 1999!)
532.000.000 DVD
Se impilati, 640 km!
In un anno, raggiungerebbero il 60%
della distanza Terra - Luna
Fonte: Harvard Business Review, “Big Data: the management revolution”, ottobre 2012.

10. VELOCITÀ
In un minuto
204.000.000 e-mail inviate
Volume
2.200.000 azioni su facebook
Velocità
600.000 acquisti con carte di credito
Varietà 100.000 tweet
48 ore di video su YouTube

11. VARIETÀ
Volume
Velocità
Varietà
Fonte: Mobile Millennium, UC Berkeley.

12. LE 3 V
Volume
Velocità
Varietà
MB GB TB PB
quasi tempo reale
periodico
a lotti
tempo reale
tabella
database
foto / video
social sensori

13. LE NUOVE V
Veracità
Visualizzazione

14. LE NUOVE V
Veracità
Visualizzazione

15. LE NUOVE V
Veracità
Visualizzazione

16. VISUALIZZAZIONE

17. IN COSA CONSISTONO?
SECONDO 35 INGEGNERI DI BERGAMO

18. IN COSA CONSISTONO?
SECONDO GLI EXECUTIVE INTERVISTATI DA IBM
Migliore informazione
Nuove analisi dati
Informazioni real-time
Influsso sui dati dalle nuove tecnologie
Forme non tradizionali di media
Grandi quantità di dati
L’ultima moda
Social media
10%
8%
7%
18%
16%
15%
13%
13%
0% 5% 9% 14% 18%
Fonte: IBM, “Analytics: The real-world use of big data”, 2012.

19. LE FONTI
SECONDO 35 INGEGNERI DI BERGAMO

20. LE FONTI
SECONDO GLI EXECUTIVE INTERVISTATI DA IBM
Transazioni
Log
Eventi
E-mail
Social network
Sensori
RFID e POS
Testo libero
Geografici
Audio
Fotografie / video
24%
43%
42%
41%
41%
40%
38%
59%
57%
73%
88%
0% 23% 45% 68% 90%
Fonte: IBM, “Analytics: The real-world use of big data”, 2012.

21. Le opportunità

22. L’HYPE CYCLE DEI BIG DATA
GARTNER, 2011
Fonte: Gartner.

23. L’HYPE CYCLE DEI BIG DATA
GARTNER, 2012
Fonte: Gartner.

24. L’HYPE CYCLE DEI BIG DATA
GARTNER, 2013
Fonte: Gartner.

25. LE OPPORTUNITÀ
1.I big data applicati alla sanità
possono far risparmiare agli Stati
Uniti 300 B$ in efficienza.
2.L’Europa può risparmiare 149 B$
in costi di amministrazione e
governo.
3.Solo negli Stati Uniti serviranno
nel breve periodo 1.5+ M di data
scientist e data manager.

26. NUOVE (?) PROFESSIONI
• I bit sono inutili senza qualcuno che li sappia interpretare!

27. I “DATA PRODUCT”
Cose che si conoscono
Cose che non si conoscono
Domande che ci si
fanno
Domande che non ci
si fanno
Business
intelligence
Data
Discovery
Analista dati
Data Scientist

28. LE OPPORTUNITÀ
Per le aziende

29. NUOVE TECNOLOGIE
Sorgente: Forbes.com

30. SCIENZA

31. E-COMMERCE
Sistema di raccomandazione

32. ADVERTISING

33. SANITÀ
Healthcare
SENSEable City Lab, MIT. Health Infoscape, 2011.

34. SANITÀ
Healthcare
SENSEable City Lab, MIT. Women’s health connections, 2011.

35. FINANZA
Sentiment Analysis

36. POLITICA

37. […] Renzi ha spiegato di non avere in programma un aumento del prelievo fiscale e di
volere anzi combattere l’evasione “anche attraverso innovazione digitale e incrocio
dei dati”
Il Corriere della Sera Online, 21 marzo 2014

38. SPORT

39. URBAN PLANNING

40. TenarisDalmine, 2011 →

41. MANUFACTURING: TENARIS
FASE 1: ACQUISIZIONE
Macchina 1
Macchina 2
…
Macchina n
Elaborazione Database
dati sintesi
Segnali
Dati sintetici
Segnali
Segnali
Valor medio
Durata
Valor massimo

42. MANUFACTURING: TENARIS
FASE 1: ACQUISIZIONE
Macchina 1
Macchina 2
…
Macchina n
Elaborazione Database
dati sintesi
Web Services .net Microsoft SQL Server

43. MANUFACTURING: TENARIS
Database
FASE 2: USO DEL DATO
Visualizzazione di
dati aggregati
Sistemi automatici di
controllo basati sulla
anomalie dei dati aggregati

44. MANUFACTURING: TENARIS
FASE 2: USO DEL DATO
Aumento improvviso e non
giustificato di un parametro
di qualità del prodotto
Il processo è andato
fuori controllo
… e con il parametro di
qualità ritorno in controllo.
Viene fatto un intervento e il
processo ritorna in controllo…

45. LE OPPORTUNITÀ
Per i professionisti e i privati

46. DATA JOURNALISM
Data
Selezione
Visualizzazione
Storia
Valore crescente per il pubblico

47. DATA JOURNALISM
Fonte: The Guardian.

48. DATA JOURNALISM

49. DATA JOURNALISM
The Data Journalism Handbook può essere consultato a http://datajournalismhandbook.org.

50. GLI OPEN DATA

51. LE MINACCE

52. IL ROI DEI BIG DATA
€ 4,00
€ 3,00
€ 2,00
€ 1,00
€ 0,00
€ 3,50
€ 0,55
Ritorno per 1 € investito Ritorno atteso in 3-5 anni
Fonte: Wikibon, “Enterprise struggling to derive maximum value form Big Data”, 2013.

53. Big Data

54. Big useless Data

55. I CASI DI INSUCCESSO
1.Assenza di figure con la professionalità necessaria
2.Uso di tecnologie grezze e immature.
3.Mancanza di un business case specifico!

56. I CASI DI SUCCESSO
1.Progetti non sponsorizzati da IT, ma da dipartimenti di line-of-
business come marketing o logistica.
2.Focus su un caso d’uso piccolo, ma strategico.
3.Iterare e crescere sulla base dei risultati precedenti.

57. L’ALGORITMO PER IL SUCCESSO
Contesto di business ben definito
Giuste domande
Risposte
Sorgenti dati di valore

58. LA FORMAZIONE

59. LA FORMAZIONE... IN ITALIA
Adnkronos, Ict: al via a Milano il nuovo centro per l’innovazione, 17 giugno 2013.

60. PER APPROFONDIRE

61. INTRODUZIONE AI BIG DATA
E ALLA SCIENZA DEI DATI
Ordine degli Ingegneri della Provincia di Bergamo, 7 giugno 2014
!
Ing. Vincenzo Manzoni, PhD
me@vincenzomanzoni.com
Slide disponibili qui: http://www.vincenzomanzoni.com/corsi/