molnet och bigdata för azlannet

48
Molnet och BigData nya utmaningar, nya möjligheter Åke Edlund KTH CSC HPCViz DataIntensive Compu7ng Group KTH CSC PDCHPC Cloud 1

Upload: aake-edlund

Post on 19-May-2015

161 views

Category:

Documents


15 download

DESCRIPTION

Cloud and BigData (presentation in Swedish)

TRANSCRIPT

Page 1: Molnet och BigData för AzlanNet

Molnet  och  BigData  -­‐  nya  utmaningar,  nya  möjligheter  

Åke  Edlund  KTH  CSC  HPCViz  Data-­‐Intensive  Compu7ng  Group  KTH  CSC  PDC-­‐HPC  Cloud  

1  

Page 2: Molnet och BigData för AzlanNet

Min  bakgrund  

PhD,  Technion  –  Israel  Ins2tute  of  Technology.    Tekn.  Lic.  –  Uppsala  University.  Civ  Ing.  Teknisk  Fysik  –  Uppsala  University  Forskat  på  Berkeley  och  Rice  Univ.  (USA)  

KTH  CSC  HPCViz  Data-­‐Intensive  Compu7ng  (forskning)  KTH  CSC  PDC-­‐HPC  Cloud  Group  (molnresurser,  projekt)  

Leder:    

Övrigt:   Medlem  EU  Cloud  Expert  Group  Rådgivare  Severalnines.com  (DBaaS)  Rådgivare  SICS  Startup  Accelerator  (medgrundare)  

Tidigare:  Chief  Architect  ICT  Global  Customer  Services  at  Sony  Ericsson  Mobile  CommunicaVons  SoluVon  Manager  at  Alzato  (real-­‐Vme  DB,  Ericsson  Business  InnovaVon  venture)  Product  Manager  for  Cult3D  (soXware  for  interacVve  3D  on  the  Internet)  at  Cycore    Consultant  with  Parallel,  Stockholm  (computer  security)  Co-­‐founder  of  Numeri  Ltd  (scalable  video  compression)  Board  Member  of  EuroCloud  Sweden  Coach  Aalto  Venture  Garage,  now  Startup  Sauna  

Moln   Startups  

BigData  

2  

Page 3: Molnet och BigData för AzlanNet

Molnet  och  BigData  -­‐  nya  utmaningar,  nya  möjligheter  

Åke  Edlund  KTH  CSC  HPCViz  Data-­‐Intensive  Compu7ng  Group  KTH  CSC  PDC-­‐HPC  Cloud  

3  

Page 4: Molnet och BigData för AzlanNet

E\  ekosystem  av  leverantörer,  utvecklare  och  användare  av  mjukvara  –  alla  steg  som  tjänster,  levererat  över  

Internet.  

Vad  är  ”Molnet”?  

Samverkan    är  nyckelordet  här  –  en  kedja  av  samverkande  

företag  4  

Page 5: Molnet och BigData för AzlanNet

E\  ekosystem  av  leverantörer,  utvecklare  och  användare  av  mjukvara  –  alla  steg  som  tjänster,  levererat  över  

Internet.  

Vad  är  ”Molnet”?  

…  men  innan  vi  går  in  på  de\a:  hur  vikVgt  är  Molnet  för  företag?  

5  

Page 6: Molnet och BigData för AzlanNet

h\p://www.vinnova.se/sv/Aktuellt-­‐-­‐publicerat/Webb-­‐tv-­‐arkiv/Videoklipp-­‐fran-­‐konferensen/Webb-­‐tv-­‐fran-­‐VINNOVAs-­‐arskonferens-­‐den-­‐25-­‐oktober-­‐2012/Ulf-­‐Ewaldsson-­‐pa-­‐VINNOVAs-­‐Arskonferens/  

Molnet  vikVgt?  Ja!  

Ulf  Ewaldsson,  Ericsson  CTO  

"Cloud  is  coming  as  the  most  significant  impact,  I  would  say,  to  communicaVon  since  we  

introduced  mobile  telephony  in  the  first  place.”  

“The  cloud  is  going  to  transform  the  way  we  manage  our  lives  and  data.”  

“It  has  such  an  important  impact  that  you  have  to  have  cloud  as  one  part  of  your  strategy  if  you  are  in  

the  ICT  world"  6  

Page 7: Molnet och BigData för AzlanNet

www.forbes.com/sites/reuvencohen/2013/04/16/the-­‐cloud-­‐hits-­‐the-­‐mainstream-­‐more-­‐than-­‐half-­‐of-­‐u-­‐s-­‐businesses-­‐now-­‐use-­‐cloud-­‐compuVng/  

www.virtustream.com/neovise  

The  Cloud  Hits  the  Mainstream:  More  than  Half  of  U.S.  Businesses  Now  Use  Cloud  Compu7ng  

ArVkel:    

Rapport:  

2013/04/16  

Molnet  vikVgt?  Ja!  

7  

Page 8: Molnet och BigData för AzlanNet

För  a\  förstå  vad  Molnet  betyder,  låt  oss  börja  med  e\  exempel  

8  

Page 9: Molnet och BigData för AzlanNet

Två  studenter,  en  enkel  idé  Grundades  i  juni  2007    Första  produkten  släpptes  i  sept.  2008    

Allt  genom  Molnet…..  

200M  registrerade  användare  (sep  2013)  100M  registrerade  användare  (nov  2012)  

Betalande  kunder  i  200  länder    

9  

1  miljard  filer  sparas  på  Dropbox  varje  dygn  Används  av  2  milj  företag  Används  inom  95%  av  Fortune  500  

Page 10: Molnet och BigData för AzlanNet

Infrastruktur  som  en  tjänst  (IaaS)    -­‐  Skalbarhet  genom  andras  datacenter  

Exempel  på  Molncenter  MicrosoXs  data  center  i  San  Antonio,  Texas  Cirka  44,000  kvadratmeter  

Når  alla  som  har  Internet  10  

Page 11: Molnet och BigData för AzlanNet

Utan  elasVcitet  -­‐  Förlorar  kunder  -­‐  Låser  onödigt  mycket  kapital  

Med  elasVcitet  

Infrastruktur  som  en  tjänst  (IaaS)    -­‐  Skalbarhet  genom  andras  datacenter  

11  

Page 12: Molnet och BigData för AzlanNet

Vad  betyder  Molnet  för  företagaren?        Enklare  –  behöver  inte  hantera  egen  IT  +  …        Snabbare  –  uppstart  inom  minuter  +  Billigare  –  betalar  bara  för  det  du  använder  

Möjligt  (för  fler)  Lägre  risk  (för  alla)  

Når  alla  som  har  Internet  

12  

….  

Page 13: Molnet och BigData för AzlanNet

Vad  betyder  Molnet  för  företagaren?  

”Vi  hade  vunnit  6  månader  vid  uppstarten  om  vi  hade  haX  dagens  molntjänster  när  vi  startade  Skype…  ”                                                                        

                 Niklas  Zennström,  februari  2012  på  SU  

13  

Page 14: Molnet och BigData för AzlanNet

Molnets  ekosystem  (förenklad  bild)  

2

1

3

3

3

1

2

3

Infrastruktur  (som  en  tjänst,  IaaS)    –  här  körs  större  delen  av  jobbet,  här  lagras  data  

Utvecklingsplawormar  (som  en  tjänst,  PaaS)    –  här  finns  utvecklingsmiljöer  för  t  ex  mobila  appar  

Tjänsterna  som  kund  konsumerar  via  nätverket  (som  en  tjänst,  SaaS)    

Infrastruktur  

Plawormar  

Slutanvändaren  

Slutanvändaren  

Utvecklaren  

Leverantören  1

2

3

Plaworm  

Nästa  sida  

14  

Page 15: Molnet och BigData för AzlanNet

Utvecklingsplaworm  som  en  tjänst,  PaaS  

Slutanvändaren  

Utvecklaren  

Leverantören  1

2

3

Plaworm  

Utvecklare   kan   i   stället   för   a\   utveckla   direkt   på  molnleverantörens  infrastruktur  (  ”    ”    )  välja  a\  använda  färdiga  utvecklingsmiljöer.    

 Exempel:  Google  App  Engine,  MicrosoX  Azure,  Apple  iOS,  Android  OS  Mer:  SpoVfy,  Dropbox  (nästa),  …  

15  

Page 16: Molnet och BigData för AzlanNet

Plawormar  för  Öppen  innovaVon,  exempel  Dropbox  

•  Dropbox  öppnar  upp  mot  sin  tjänst    -­‐  och  ökar  därmed  värdet  på  sin  egen  tjänst)  

•  Plaworm  (som  en  tjänst,  PaaS)  för  andra  tjänsteutvecklare  -­‐  som  därigenom  slipper  synkningsproblemaVken  

•  Konkurrerar  i  de\a  exempel  med  Apple  (iCloud)  •  Idag:  100,000  akVva  appar  som  byggts  på  Dropbox  plaxorm  

16  

Page 17: Molnet och BigData för AzlanNet

E\  större  exempel  -­‐  Nexlix  

“Globally  Distributed  Cloud          ApplicaVons  at  Nexlix”    October,  2012,    Adrian  CockcroX  

17  

Idag:  37  miljoner  streaming-­‐abonnenter    

Page 18: Molnet och BigData för AzlanNet

h\p://www.vinnova.se/sv/Aktuellt-­‐-­‐publicerat/Webb-­‐tv-­‐arkiv/Videoklipp-­‐fran-­‐konferensen/Webb-­‐tv-­‐fran-­‐VINNOVAs-­‐arskonferens-­‐den-­‐25-­‐oktober-­‐2012/Ulf-­‐Ewaldsson-­‐pa-­‐VINNOVAs-­‐Arskonferens/  

Molnet  och  den  mobila  klienten  

Ulf  Ewaldsson,  Ericsson  CTO  

>  6  Miljarder  mobila  abonnemang  >  2,3  Miljarder  Internetanvändare  >  35  Miljarder  Appar  nedladdade                                                                (=  0  innan  juli  2008)  

18  

Page 19: Molnet och BigData för AzlanNet

Molnet  och  den  mobila  klienten  -­‐  50  miljoner  användare  (på  35  dagar)  

Hur  skulle  de  ha  gjort  om  de  inte  använt  Molnet?  

19  

Page 20: Molnet och BigData för AzlanNet

Mellansummering  (Moln)  

•  Molnet  är  e\  ekosystem  av  leverantörer,  utvecklare  och  konsumenter  av  mjukvara  –  alla  steg  som  tjänster  –  levererat  över  Internet  

•  Flexibilitet  och  skalbarhet  skapar  nya  möjligheter  

•  Genom  Molnet  ökar  möjligheterna  Vll  a\  nå  den  globala  marknaden  

•  …  och  konkurrensen  blir  än  mer  global  

20  

Page 21: Molnet och BigData för AzlanNet

BigData    

–  massiva  datamängder  med  stora  underliggande  värden  

21  

Page 22: Molnet och BigData för AzlanNet

22  

Molnet  OCH  BigData  

37  miljoner  streaming-­‐abonnenter    

Levererar  tjänster  genom  

Molnet  

Analyserar  kunddata  och  förbä\rar  tekniken  

genom  Molnet  

Page 23: Molnet och BigData för AzlanNet

Trender:  Molnet  ….  och  BigData  

23  

Page 24: Molnet och BigData för AzlanNet

Varför  allt  tal  om  ‘BigData’,  nu?  

1.  Företag  har  sedan  decennier  analyserat  stora  datamängder  –  men  det  har  varit  kostsamt  och  få  förunnat  

2.  Datalagring  allt  billigare    3.  Nya  lösningar  -­‐  både  på  IT-­‐sidan  som  på  

metodsidan  –  gör  a\  allt  fler  kan  få  ut  allt  mer  kunskap/värde  ur  si\  data  

4.   Fler  och  mer  komplexa  datakällor  a\  analysera  -­‐>  få  ut  mer  kunskap  ur  

24  

Page 25: Molnet och BigData för AzlanNet

Exempel  på  BigData  –  från  Internet  

25  

Page 26: Molnet och BigData för AzlanNet

Vadå  ‘Big’?  

26  

Page 27: Molnet och BigData för AzlanNet

27  Meeker/Wu  May  29  2013  Internet  Trends  D11  Conference    

ZeSabyte  =  1000  Exabytes  Exabyte    =      1000  Petabytes  Petabyte  =    1000  Terabyte  Terabyte  =    1000  Gigabytes  Gigabyte  =    1000  Megabytes  

Page 28: Molnet och BigData för AzlanNet

Big  Data  Ecosystem  in  One  Sentence  Use  Clouds  running  Data  AnalyVcs  processing  Big  Data  

to  solve  problems  in  X-­‐InformaVcs  (  or  e-­‐X)    

X  =  Astronomy,  Biology,  Biomedicine,  Business,  Chemistry,  Crisis,  Energy,  Environment,  Finance,  Health,  Intelligence,  Lifestyle,  MarkeVng,  Medicine,  Pathology,  Policy,  Radar,  Security,  Sensor,  Social,  Sustainability,  

Wealth  and  Wellness  with  more  fields  (physics)  defined  implicitly  

Spans  Industry  and  Science  (research)    Geoffrey  Fox,  Indiana  University  Bloomington,  April  18,  2013  

Exempel  på  BigData  –  från  R&D  

Page 29: Molnet och BigData för AzlanNet

Exempel  på  BigData  –  från  sensorer  

Stockholm.  

29  

Page 30: Molnet och BigData för AzlanNet

"CompuVng  is  being  transformed,  new  companies  are  emerging.  Many  organizaVons  that  have  Big  Data  don’t  

have  the  ability  to  process  Big  Data."  

Från:  Best  Prac2ces  in  Big  Data  Storage  Conducted  by:  Tabor  CommunicaVons  Custom  Publishing  Group  

“Big  Data  is  any  data  that  is  expensive  to  manage  and  hard  to  extract  value  from.”  Michael  Franklin,  AMPLab,  Berkeley  

30  

Konkurrensgap  

Page 31: Molnet och BigData för AzlanNet

"CompuVng  is  being  transformed,  new  companies  are  emerging.  Many  organizaVons  that  have  Big  Data  don’t  

have  the  ability  to  process  Big  Data."  

Från:  Best  Prac2ces  in  Big  Data  Storage  Conducted  by:  Tabor  CommunicaVons  Custom  Publishing  Group  

“Big  Data  is  any  data  that  is  expensive  to  manage  and  hard  to  extract  value  from.”  Michael  Franklin,  AMPLab,  Berkeley  

31  

Konkurrensgap  

Kör,  med  fri  sikt  

Kör,  utan  fri  sikt  

Page 32: Molnet och BigData för AzlanNet

2010   2011   2012  

37%  58%   67%  

Andel  företag  som  anser  aS    (business  analys7cs)    

ger  en  konkurrensfördel  (USA)  

From  Value  to  Vision:  Reimagining  the  Possible  with  Data  Analy7cs    What  makes  companies  that  are  great  at  analyVcs  different  from  everyone  else    By  MIT  Sloan  Management  Review  and  SAS  Ins7tute  (2013)    

11%  

60%  

29%  AnalyVcal  Innovators  

AnalyVcal  PracVVoners  

AnalyVcal  Challenged  

32  

Page 33: Molnet och BigData för AzlanNet

BigData  

“Big  Data  is  any  data  that  is  expensive  to  manage  and  hard  to  extract  value  from.”  Michael  Franklin,  AMPLab,  Berkeley  

“You’re  ge�ng  data  whether  you  like  it  or  not,    so  figure  out  how  to  use  it.”  Ping  Li  (Accel  Partners)  

“Kommer  saknas  140’-­‐190’  datanalyVker  i  USA  år  

2018”  McKinsey  

“Obama  adminstraVonen  lägger  200  MUSD  på  BigData  forskning  och  utveckling”  

“Venture  capital  firm  Accel  Partners  is  following  up  on  its  $100  million  Big  Data  Fund”  

33  

Page 34: Molnet och BigData för AzlanNet

h\p://www.mckinsey.com/mgi/publicaVons/big_data/index.asp.  

34  

Page 35: Molnet och BigData för AzlanNet

Tom  Davenport  Harvard  Business  School  fisheritcenter.haas.berkeley.edu/Big_Data/index.html,    Nov  2012  

BigData:  Växande  behov  av  Data  Forskare  and  AnalyVker  

h\p://www.mckinsey.com/mgi/publicaVons/big_data/index.asp.  

h\p://drewconway.com/zia/2013/3/26/the-­‐data-­‐science-­‐venn-­‐diagram  

35  

Page 36: Molnet och BigData för AzlanNet

Stora  mängder  data  skapas  varje  dag,  både  på  Internet  och  lokalt  Experiment,  Internet,  AffärsinformaVon,  Sensornätverk  …    

Mellansummering  (BigData)  

Informa7onen  i  denna  data  avgör  företagens  fram7d    –  den  som  kan  få  ut  mest  kunskap  vinner  

Metoder  och  teknik  för  aS  få  fram  –  och  analysera  -­‐  denna  informa7on  kräver  en  kombina7on  av  ‘hacker’  och  matema7ker    

Alla  verksamheter  har  stora  och  växande  datamängder    –  Men  de  flesta  saknar  resurser/kompetens  för  a\  utvinna  vikVg  

informaVon  ur  sin  egen  data  

36  

Page 37: Molnet och BigData för AzlanNet

Vad  krävs  av  företagaren?    Vad  måste  han  och  hon  kunna?  

Behov  av  kunskapslyf  över  hela  bredden  –  genom  prakVk  –  se  nästa  del  av  presentaVonen…  

Allt  ovan!  Helst  samVdigt…  

Teknik  Gamla  verktyg  kan  användas,  men  många  nya  som  ger  konkurrensfördelar.    

Teknikutveckling  Molnet  –  och  BigData  -­‐  utvecklas  ständigt,  här  finns  utrymme  a\  skapa  företag.  

ArbetssäS  Kortare  cykler.  Testa  Vdigt  och  väx  eXer  behov  och  kundåterkoppling.  

Affärsmodeller  Skalbara  affärsmodeller  lika  vikVgt  som  Vdigare  men  nu  med  

 större  potenVal  om  man  får  Vll  det  rä\.  

37  

Page 38: Molnet och BigData för AzlanNet

E\  ekosystem  av  leverantörer,  utvecklare  och  användare  av  mjukvara  –  alla  steg  som  tjänster,  levererat  över  

Internet.  

Vad  är  ”Molnet”?  

Samverkan    är  nyckelordet  här  –  en  kedja  av  samverkande  

företag  38  

Page 39: Molnet och BigData för AzlanNet

•  A  large,  70+MEUR  over  2010-­‐2013,  industry-­‐driven  research  program  –  According  to  a  2009  survey  most  significant  factors  of  future  compeVVveness  are:  operaVonal  efficiency,  user  

experience,  web  soXware,  open  systems,  security  engineering  and  sustainable  development.    –  Cloud  SoXware  program  especially  aims  to  pioneer  in  building  new  cloud  business  models,  lean  soXware  enterprise  

and  open  cloud  soXware  infrastructure.  

•  F-­‐Secure  is  the  driver  company  in  Cloud  Sofware  consor7um  –  Partner  companies:  CSC,  Digia,  ECE,  Elektrobit,  Ericsson,  F-­‐Secure,  GearshiX,  IPSS,  IT  Mill,  Ixonos,  NetHawk,  Nokia,  

NSN,  Packet  Video  Finland,  Reaktor,  RM5,TeliaSonera,  Tieto,  Vincit,  VividWorks  –  Research  partners:  Aalto,  HY,  JyAMK,  JyU,  OY,  TTY,  VTT,  ÅA  

•  Seeking  Compe77veness  for    Finnish  Sofware  Industry  –  Improved  compeVVveness  via  superior  user  experience    –  Improved  efficiency  &  profitability  via  significantly  faster  cycle-­‐Vmes  –  Ge�ng  ready  (and  ahead)  for  cloud  soXware  business  –  CreaVng  and  exploiVng  new  cloud  ecosystems  

39  

Page 40: Molnet och BigData för AzlanNet

KunskapslyX  -­‐  Exemplet  Finland  

70+MEUR  under  2010-­‐2013,  industri-­‐drivet  forskningsprogram  

“Seeking  Compe77veness  

for    Finnish  Sofware  Industry”  

Arbetar  helt  agilt  

Samverkan  

Delar  på  resultaten  

www.  CloudsoXware.fi,    www.  Tivit.fi,    Janne.jarvinen@f-­‐secure.com  (program  director)  40  

Page 41: Molnet och BigData för AzlanNet

Building  the  future  open  soXware  infrastructure  and  technologies  for  services  in  

the  cloud    

Bringing  the  operaVonal  efficiency  to  a  new  level  

increasing  producVvity  and  profitability  significantly  

Paving  the  way  for  Finnish  soXware  business  to  succeed  

in  the  cloud  

41  

Page 42: Molnet och BigData för AzlanNet

2012  Results  

New  ecosystems  being  formed  e.g.    CSC  Kajaani  Datacenter,  Ixonos  CityOnline,Tieto  ApplicaVon  Plaxorm,    F-­‐Secure  3rd  party  ecosystem  

Several  new  cloud  service  concepts  and  tools  developed  e.g.  o  Freenest  –  Plaxorm  for  agile  cloud  development  o  F-­‐Secure  –  Content  cloud  plaxorm  and  service  o  Vaadin  –  CollaboraVve  SW  development  o  Owela  –  Conumers  say  on  cloud  services  

Major  Lean/Agile  transformaVon  programs  ongoing    e.g.  F-­‐Secure,  Tieto,  Ericsson,  EB,  EXFO,  Nokia  

42  

Page 43: Molnet och BigData för AzlanNet

2012  Results  

New  ecosystems  being  formed  e.g.    CSC  Kajaani  Datacenter,  Ixonos  CityOnline,    Tieto  ApplicaVon  Plaxorm,    F-­‐Secure  3rd  party  ecosystem  

Several  new  cloud  service  concepts  and  tools  developed  e.g.  o  Freenest  –  Plaxorm  for  agile  cloud  development  o  F-­‐Secure  –  Content  cloud  plaxorm  and  service  o  Vaadin  –  CollaboraVve  SW  development  o  Owela  –  Conumers  say  on  cloud  services  

Major  Lean/Agile  transformaVon  programs  ongoing    e.g.  F-­‐Secure,  Tieto,  Ericsson,  EB,  EXFO,  Nokia  

7.3  MEUR  savings  in  H1/2012  

Up  to  6x  Faster  delivery  

IPSS:  Company  revenue  tripled  

already!  

43  

Page 44: Molnet och BigData för AzlanNet

44  

Page 45: Molnet och BigData för AzlanNet

45  

Page 46: Molnet och BigData för AzlanNet

Slutsummering  •  InnovaVonstakten  accelererar.  Internet  ökar  global  konkurrens/

möjligheter.  –  Internet  –  Internet-­‐Molnet  –  Internet-­‐Molnet-­‐BigData  –  Internet-­‐Molnet-­‐BigData-­‐IoT  –  Internet-­‐Molnet-­‐BigData-­‐IoT-­‐X  

•  Företag  måste  lära  sig  använda  och  vidareutveckla  kring  dessa  ekosystem  

•  Kunskap  fås  genom  erfarenhet  –  Många  bra  exempel  a\  lära  från  t  ex  Cloud  SoXware  Finland  –  Behov  av  kompetensutvecklande  projekt,  gemensamma  

utvecklingsmiljöer  –  samverkan  mellan  företag  

•  Nyckel:  Samverkan  mellan  teknik,  affärsutveckling,  arbetsmetodik  –  OCH  olika  kompetensområden   46  

Page 47: Molnet och BigData för AzlanNet

Slutsummering  •  InnovaVonstakten  accelererar.  Internet  ökar  global  konkurrens/

möjligheter.  –  Internet  –  Internet-­‐Molnet  –  Internet-­‐Molnet-­‐BigData  –  Internet-­‐Molnet-­‐BigData-­‐IoT  –  Internet-­‐Molnet-­‐BigData-­‐IoT-­‐X  

•  Företag  måste  lära  sig  använda  och  vidareutveckla  kring  dessa  ekosystem  

•  Kunskap  fås  genom  erfarenhet  –  Många  bra  exempel  a\  lära  från  t  ex  Cloud  SoXware  Finland  –  Behov  av  kompetensutvecklande  projekt,  gemensamma  

utvecklingsmiljöer  –  samverkan  mellan  företag  

•  Nyckel:  Samverkan  mellan  teknik,  affärsutveckling,  arbetsmetodik  –  OCH  olika  kompetensområden   47  

OCH  möjligheter  Vll  nya  kombinaVoner  av  

samverkan  -­‐  även  mellan  Vdigare  konkurrenter  

Page 48: Molnet och BigData för AzlanNet

Tack!  

[email protected]  [email protected]  [email protected]  

Åke  Edlund  

48