big data and cloud computing
DESCRIPTION
TRANSCRIPT
Big Data e Cloud Computingper la gestione di sistemicomplessi
• Roberto Siagri - Udine 30.11.2011
Luglio 2008: WIRED MAGAZINE
IL 4^ Paradigma di Jim Gray
• 1- Migliaia di anni fa: – Scienza Empirica
• 2- Qualche centinaio d’anni fa: – Scienza Teorica
• 3- Ultime decine d’anni: – Scienza Computazionale
i primi Tre
Il 4^ Paradigma
I Dati– Catturati dagli strumenti o
generati da simulatori
– Vengono immagazzinati sotto forma diInformazioni nei database dei data center
– Diventano Conoscenza quando elaborati con strumenti di data management e di statistica
Oggi: data exploration (eScience)
L’unificazione di Teoria, Esperimenti e Simulazioni
Tecnologia ‘12
5
Valoreeconomico
Quantità disponibile
I dati sono “oggi” una materia prima
Materia
Dati
La leggerezza del PIL
Tecnologia ‘12
La sostenibilità passa per un’economia
ad alta densità di informazione
Tecnologia ‘12
Kilo
Mega
Giga
Tera
Peta
Exa
Zetta
Yotta
Un libro
Una lettera
Una Biblioteca Nazionale
Un Film
La Biblioteca del Congresso degli Stati Uniti
(testo+immagini)
Un mondo Digitale
Adattato da: Jim Gray & Gordon Bell
Yotta-Zetta- Exa -Peta-Tera-Giga-Mega–Kilo1.000.000.000.000.000.000.000.000
Tecnologia ‘12
8
Una cascata di dati1.000 Exabyte= 1 Zettabyte
Un Zettabyte è l'equivalente di 36.000.000 anni di video HD
o250 miliardi di DVD
0
5000
10000
15000
20000
25000
30000
35000
40000
7900
130
35000
1240
EXABYTE
Il concetto di Big-Data è storico
• 1980• Disco IBM 3850 • 500 Giga• $2,300,000 (1980)• $5,500,000 (2012)
oggi è il Peta-byte : cioè un milione di miliardi di byte
9
• 2010• Western Digital• 500Giga• $50.00
Un dimezzamento di costo ogni 18 mesi
Tecnologia ‘12
CENT’ANNI di VITA in ZERI e UNI
10
Cose Viste : 10 PetaByte Cose Sentite : 100 TeraByte Cose Scritte e Lette : 10 GigaByte
Oggi ~10000 € all’anno
Fra 9 anni ~100 € all’anno
Fra 14 anni ~10 € all’anno
Fra 19 anni ~1 € all’anno
MA QUANTO COSTA ?
QUANTA MEMORIA DIGITALE SERVE ?
Tecnologia ‘12
I’85% dei dati presenti al mondo nel 2015 saranno stati creati negli ultimi 5 anni
11
Tutto si sviluppa in maniera esponenziale
0
1000
2000
3000
4000
5000
6000
7000
8000
9000
2010 2011 2012 2013 2014 2015
EXABYTE
OGNI GIORNO VENGONO PRODOTTI CIRCA 3 PETABYTEUN INTERA LIBRERIA DEL CONGRESSO AMERICANO OGNI 3 MESI
Tecnologia ‘12
MA QUANTO VALE TUTTO QUESTO?
12
SANITA’ USA: $300 miliardiil potenziale valore annuale per l'assistenza sanitaria USAPiù del doppio della spesa sanitaria annuale della Spagna
Secondo McKensey&Company
CONSUMATORI: $ 600 miliardi il potenziale surplus annuale dei consumatori su scala globale dall’utilizzo dei dati di posizione personale
UNIONE EUROPEA: € 250 miliardiil potenziale valore annuale per la pubblica amministrazione in Europa Più del PIL della Grecia
US RETAIL: 6 0% l’ aumento potenziale dei margini operativi nella vendita al dettaglio con l’uso del Big-Data
US JOBS: 140,000 190,000 più posti di lavoro per persone con talento analitico
Nell’Era del Petabyte: di più è differente!
Cosa si fa con i «BIG DATA»Feeding the Masses:Data In, Crop Predictions Out
Chasing the Quark:Sometimes You Need to Throw Information Away
Winning the Lawsuit:Data Miners Dig for Dirt
Tracking the News:A Smarter Way to Predict Riots and Wars
Spotting the Hot Zones: Now We Can Monitor Epidemics Hour by Hour
Sorting the World:Google Invents New Way to Manage Data
Watching the Skies:Space Is Big — But Not Too Big to Map
Scanning Our Skeletons:Bone Images Show Wear and Tear
Tracking Air Fares:Elaborate Algorithms Predict Ticket Prices
Predicting the Vote:Pollsters Identify Tiny Voting Blocs
Pricing Terrorism:Insurers Gauge Risks, Costs
Visualizing Big Data:Bar Charts for Words
Informazione vs. Conoscenza
15
La forza delle connesioni e il nostro Habitat
16
Gli Umani sono diventati Informivori
• D. Nell’era della Conoscenza, come usiamo il nostro tempo?
• R. Dalla ricerca di cibo alla ricerca di informazioni
Humans as Informavore (Miller, 1983)
RicercaColtivazioneCostruzione
Convertendo il «BIG DATA»
La conversione del 'mare di bit' raccolti dall'industria in informazioniutili e conoscenza porterà il più grande cambiamento nell’industriadopo quello prodotto dalla macchina a vapore!
18
La Complessitàha una crescita
Esnenop
laiz
19
!e
D: Come si affronta la
Complessità delBIG data?
R: Con un nuovoparadigma
Di più non è solo di più è anche differente Nerovivo – _-_Complexity[1
Il CLOUD Computing
Cosa è il Cloud Computing?
Il Cloud
*Picture taken under Creative Common license
Più di 60 definizioni
Dicono anche:
“Il più grande cambio di paradigma degli ultimi 20 anni”
“Un esplosione Cambriana”
“una grande riduzione dei costi”
“operativi velocemente ed ovunque”
“Si paga quello che si usa”
First,�What�the�heck�isCloud�Computing
Il Cloud Computingè�una�conseguenza�della�condizioni�economichee�tecnologiche�che�hanno�concorso�a�provocare�
un�cambiamento�dirompente��nell’�I.C.T.�e che�spinge�verso�un'economia�basata�sul�servizio.
All’inizio c’era Internet (web 1.0)
INTERNET
..e poi il CLOUD COMPUTING si materializzò(web 2.0, web 3.0)
EDISON 2.0:
The first CLOUD was about ELECTRICITYThe second CLOUD is about COMPUTING
• Esattamente come gli utenti si riforniscono dal gestore della rete elettrica pagando il consumo di elettricità, il cloud computing prevede l’utilizzo dei servizi IT (sia hardware che software) a consumo
Cloud: una analogia
Elasticità e Scalabilità• Le risorse vengono richieste quando servono, cioè la
piattaforma tecnologica diviene flessibile, o elastica
Tipologie di Cloud
il CLOUD
non è un Prodottoè
una Transizione
il CLOUD
una nuova SostenibileSorgente di Innovazione
il Cloud: un nuovo tool specialmente per i nuovi o i piccoli
• Non serve essere grandi
• Abilita la cattura di nuove opportunità
• Pronti quando le cose arrivano velocemente
• Massimizza il ReturnOnIdea
«In media, 8$ su 10$ spesi in IT sono ‘denaro morto’ ovvero non contribuiscono direttamente ne alla crescita del business
ne al suo cambiamento»
Venzone 11
Ri-Pensare•Prodotti•Valore Aggiunto•Modelli di Business•Processi Aziendali
35
Un altro mestiere che sta sparendo
L’ufficio IT e Sicurezza delle grandi aziende faràla stessa fine che ha fatto l’ufficio delle
dattilografe e per le stesse ragioni!
Big Data e Cloud ComputingLa nuova frontiera dell’innovazione della competizione e della produttività