big data and cloud computing

36
Big Data e Cloud Computing per la gestione di sistemi complessi Roberto Siagri - Udine 30.11.2011

Upload: roberto-siagri

Post on 15-Jan-2015

639 views

Category:

Technology


2 download

DESCRIPTION

 

TRANSCRIPT

Page 1: Big data and cloud computing

Big Data e Cloud Computingper la gestione di sistemicomplessi

• Roberto Siagri - Udine 30.11.2011

Page 2: Big data and cloud computing

Luglio 2008: WIRED MAGAZINE

Page 3: Big data and cloud computing

IL 4^ Paradigma di Jim Gray

• 1- Migliaia di anni fa: – Scienza Empirica

• 2- Qualche centinaio d’anni fa: – Scienza Teorica

• 3- Ultime decine d’anni: – Scienza Computazionale

i primi Tre

Page 4: Big data and cloud computing

Il 4^ Paradigma

I Dati– Catturati dagli strumenti o

generati da simulatori

– Vengono immagazzinati sotto forma diInformazioni nei database dei data center

– Diventano Conoscenza quando elaborati con strumenti di data management e di statistica

Oggi: data exploration (eScience)

L’unificazione di Teoria, Esperimenti e Simulazioni

Page 5: Big data and cloud computing

Tecnologia ‘12

5

Valoreeconomico

Quantità disponibile

I dati sono “oggi” una materia prima

Materia

Dati

La leggerezza del PIL

Page 6: Big data and cloud computing

Tecnologia ‘12

La sostenibilità passa per un’economia

ad alta densità di informazione

Page 7: Big data and cloud computing

Tecnologia ‘12

Kilo

Mega

Giga

Tera

Peta

Exa

Zetta

Yotta

Un libro

Una lettera

Una Biblioteca Nazionale

Un Film

La Biblioteca del Congresso degli Stati Uniti

(testo+immagini)

Un mondo Digitale

Adattato da: Jim Gray & Gordon Bell

Yotta-Zetta- Exa -Peta-Tera-Giga-Mega–Kilo1.000.000.000.000.000.000.000.000

Page 8: Big data and cloud computing

Tecnologia ‘12

8

Una cascata di dati1.000 Exabyte= 1 Zettabyte

Un Zettabyte è l'equivalente di 36.000.000 anni di video HD

o250 miliardi di DVD

0

5000

10000

15000

20000

25000

30000

35000

40000

7900

130

35000

1240

EXABYTE

Page 9: Big data and cloud computing

Il concetto di Big-Data è storico

• 1980• Disco IBM 3850 • 500 Giga• $2,300,000 (1980)• $5,500,000 (2012)

oggi è il Peta-byte : cioè un milione di miliardi di byte

9

• 2010• Western Digital• 500Giga• $50.00

Un dimezzamento di costo ogni 18 mesi

Page 10: Big data and cloud computing

Tecnologia ‘12

CENT’ANNI di VITA in ZERI e UNI

10

Cose Viste : 10 PetaByte Cose Sentite : 100 TeraByte Cose Scritte e Lette : 10 GigaByte

Oggi ~10000 € all’anno

Fra 9 anni ~100 € all’anno

Fra 14 anni ~10 € all’anno

Fra 19 anni ~1 € all’anno

MA QUANTO COSTA ?

QUANTA MEMORIA DIGITALE SERVE ?

Page 11: Big data and cloud computing

Tecnologia ‘12

I’85% dei dati presenti al mondo nel 2015 saranno stati creati negli ultimi 5 anni

11

Tutto si sviluppa in maniera esponenziale

0

1000

2000

3000

4000

5000

6000

7000

8000

9000

2010 2011 2012 2013 2014 2015

EXABYTE

OGNI GIORNO VENGONO PRODOTTI CIRCA 3 PETABYTEUN INTERA LIBRERIA DEL CONGRESSO AMERICANO OGNI 3 MESI

Page 12: Big data and cloud computing

Tecnologia ‘12

MA QUANTO VALE TUTTO QUESTO?

12

SANITA’ USA: $300 miliardiil potenziale valore annuale per l'assistenza sanitaria USAPiù del doppio della spesa sanitaria annuale della Spagna

Secondo McKensey&Company

CONSUMATORI: $ 600 miliardi il potenziale surplus annuale dei consumatori su scala globale dall’utilizzo dei dati di posizione personale

UNIONE EUROPEA: € 250 miliardiil potenziale valore annuale per la pubblica amministrazione in Europa Più del PIL della Grecia

US RETAIL: 6 0% l’ aumento potenziale dei margini operativi nella vendita al dettaglio con l’uso del Big-Data

US JOBS: 140,000 190,000 più posti di lavoro per persone con talento analitico

Page 13: Big data and cloud computing

Nell’Era del Petabyte: di più è differente!

Page 14: Big data and cloud computing

Cosa si fa con i «BIG DATA»Feeding the Masses:Data In, Crop Predictions Out

Chasing the Quark:Sometimes You Need to Throw Information Away

Winning the Lawsuit:Data Miners Dig for Dirt

Tracking the News:A Smarter Way to Predict Riots and Wars

Spotting the Hot Zones: Now We Can Monitor Epidemics Hour by Hour

Sorting the World:Google Invents New Way to Manage Data

Watching the Skies:Space Is Big — But Not Too Big to Map

Scanning Our Skeletons:Bone Images Show Wear and Tear

Tracking Air Fares:Elaborate Algorithms Predict Ticket Prices

Predicting the Vote:Pollsters Identify Tiny Voting Blocs

Pricing Terrorism:Insurers Gauge Risks, Costs

Visualizing Big Data:Bar Charts for Words

Page 15: Big data and cloud computing

Informazione vs. Conoscenza

15

Page 16: Big data and cloud computing

La forza delle connesioni e il nostro Habitat

16

Page 17: Big data and cloud computing

Gli Umani sono diventati Informivori

• D. Nell’era della Conoscenza, come usiamo il nostro tempo?

• R. Dalla ricerca di cibo alla ricerca di informazioni

Humans as Informavore (Miller, 1983)

RicercaColtivazioneCostruzione

Page 18: Big data and cloud computing

Convertendo il «BIG DATA»

La conversione del 'mare di bit' raccolti dall'industria in informazioniutili e conoscenza porterà il più grande cambiamento nell’industriadopo quello prodotto dalla macchina a vapore!

18

Page 19: Big data and cloud computing

La Complessitàha una crescita

Esnenop

laiz

19

!e

Page 20: Big data and cloud computing

D: Come si affronta la

Complessità delBIG data?

R: Con un nuovoparadigma

Di più non è solo di più è anche differente Nerovivo – _-_Complexity[1

Page 21: Big data and cloud computing

Il CLOUD Computing

Page 22: Big data and cloud computing

Cosa è il Cloud Computing?

Il Cloud

*Picture taken under Creative Common license

Più di 60 definizioni

Page 23: Big data and cloud computing

Dicono anche:

“Il più grande cambio di paradigma degli ultimi 20 anni”

“Un esplosione Cambriana”

“una grande riduzione dei costi”

“operativi velocemente ed ovunque”

“Si paga quello che si usa”

Page 24: Big data and cloud computing

First,�What�the�heck�isCloud�Computing

Il Cloud Computingè�una�conseguenza�della�condizioni�economichee�tecnologiche�che�hanno�concorso�a�provocare�

un�cambiamento�dirompente��nell’�I.C.T.�e che�spinge�verso�un'economia�basata�sul�servizio.

Page 25: Big data and cloud computing

All’inizio c’era Internet (web 1.0)

INTERNET

Page 26: Big data and cloud computing

..e poi il CLOUD COMPUTING si materializzò(web 2.0, web 3.0)

EDISON 2.0:

The first CLOUD was about ELECTRICITYThe second CLOUD is about COMPUTING

Page 27: Big data and cloud computing

• Esattamente come gli utenti si riforniscono dal gestore della rete elettrica pagando il consumo di elettricità, il cloud computing prevede l’utilizzo dei servizi IT (sia hardware che software) a consumo

Cloud: una analogia

Page 28: Big data and cloud computing

Elasticità e Scalabilità• Le risorse vengono richieste quando servono, cioè la

piattaforma tecnologica diviene flessibile, o elastica

Page 29: Big data and cloud computing

Tipologie di Cloud

Page 30: Big data and cloud computing

il CLOUD

non è un Prodottoè

una Transizione

Page 31: Big data and cloud computing

il CLOUD

una nuova SostenibileSorgente di Innovazione

Page 32: Big data and cloud computing

il Cloud: un nuovo tool specialmente per i nuovi o i piccoli

• Non serve essere grandi

• Abilita la cattura di nuove opportunità

• Pronti quando le cose arrivano velocemente

• Massimizza il ReturnOnIdea

Page 33: Big data and cloud computing

«In media, 8$ su 10$ spesi in IT sono ‘denaro morto’ ovvero non contribuiscono direttamente ne alla crescita del business

ne al suo cambiamento»

Page 34: Big data and cloud computing

Venzone 11

Ri-Pensare•Prodotti•Valore Aggiunto•Modelli di Business•Processi Aziendali

Page 35: Big data and cloud computing

35

Un altro mestiere che sta sparendo

L’ufficio IT e Sicurezza delle grandi aziende faràla stessa fine che ha fatto l’ufficio delle

dattilografe e per le stesse ragioni!

Page 36: Big data and cloud computing

Big Data e Cloud ComputingLa nuova frontiera dell’innovazione della competizione e della produttività