data services - capgemini · 2017. 8. 21. · organization, capgemini has developed its own way of...

1 Copyright © Capgemini 2015. All Rights Reserved

Presentation Title | Date

Data Services – możliwości rozwoju

Blok I

Standadrowy nowy sait – problemy związane z tworzeniem nowego datacenter

Blok II

VCE vBlock i EMC Isilon - wykorzystanie infrastruktury kowergentnej na

przykładzie projektu Big Data

Capgemini Infrastructure Services

Data Services Operations

Krzysztof Skowron


Advisor Deck – Infra Services | November 2014

Employment growth – Capgemini Poland

1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015

37 56 68 118 219 276 338 454

605

1068

1842

2344

3247 3506

3807

4504

5132

5854

6001 6500

Kraków

Wrocław

Opole

Katowice

Warsaw Poznań



Capgemini in Poland

Kraków

Katowice

Warszawa

Wrocław

Consulting

Services

Application

Services

Infrastructure

Management

Business

Services

Cloud

Opole

http://www.google.pl/imgres?imgurl=http://www.hr.capgemini.com/m/hr/img/cbe-logo.gif&imgrefurl=http://www.hr.capgemini.com/collaboration/cbe/&usg=__dJesJWVrZF8M2h2n4yDq3etshSE=&h=126&w=123&sz=7&hl=pl&start=15&sig2=pJd8zM6fPlolT80ya6QynQ&zoom=1&itbs=1&tbnid=ftmtIh5k1ZYZCM:&tbnh=90&tbnw=88&prev=/search?q=Capgemini+logo&hl=pl&sa=X&rlz=1G1GGLQ_PLPL278&biw=1100&bih=596&tbm=isch&prmd=ivns&ei=qxzkTbbpLcPYrQeYxOn0Bg








Eastern Europe Infrastructure Services – Transformational Outsourcing

Incident Support

Ordering Services

Access Management

Workplace Services

Multi-lingual Support

Digital and Inteligent Service

Centres

User Services

ITIL Service Management

Incident Management

Problem Management

Configuration and Change

Management

Release Management

Business Continuity

IT Infrastructure Data

Services

Transformation Services

Remote Infrastructure Management

Infrastructure Monitoring

Application Management

IT Operations Management

Product Specific Services

Service Integration & Service

Management

Virtualization & Productivity

Cloud Processing

Delivery Excellence



Data Services – key info

200+ customers Strategic partners Industry recognition

Strategic Supplier Excellence Award“

awarded by Bayer –2014

AllianceOne Mission Critical partner of the

year – awarded by HP - 2013

Positioned in ‘Challenger’ quadrant in

Gartner’s MQ 2013

Our Data center assets 39 datacenters in 11 countries

28,000 m2 datacenter space

44,000+ servers managed

50PB+ storage, 60PB+ backup managed

11,000+ databases managed

6000+ strong global team 1000+ SME’s on transformation

1000+ Wintel resources

500+ Unix and Linux resources

500+ storage systems professionals

1000+ software services resources

1000+ IMOC resources

Platforms and solutions

Industry recognized

process model

Next Gen. Platforms Hosted ITSM Platform (BMC+HP)

CLOUD SERVICE BROKERING Platform

Data Service Automation Platform

Oracle Engineered Platform

Database Auto Heal Platform

Industrialized services SRM as a Service

SAP HANA as a Service (Private cloud)

Oracle Engineered platform as a Service

Oracle DB Platform as a Service

Windows 2K3 Migration service



Upgrade Your Career



We are looking for...

https://www.pl.capgemini.com/kariera/linux-unix-consultant

https://www.pl.capgemini.com/kariera/linux-administrator

https://www.pl.capgemini.com/kariera/nix-systems-nagios-engineer-0

https://www.pl.capgemini.com/kariera/scom-systems-consultant-0

https://www.pl.capgemini.com/kariera/scom-systems-engineer

https://www.pl.capgemini.com/kariera/windows-system-consultant

https://www.pl.capgemini.com/kariera/windows-system-engineer

https://www.pl.capgemini.com/kariera/vmware-consultant

https://www.pl.capgemini.com/kariera/vmware-engineer

https://www.pl.capgemini.com/kariera/storage-system-engineer

https://www.pl.capgemini.com/storage-system-consultant

https://www.pl.capgemini.com/backup-system-consultant

https://www.pl.capgemini.com/kariera/backup-system-engineer

https://www.pl.capgemini.com/kariera/infrastructure-engineer

https://www.pl.capgemini.com/kariera/oferty-pracy






































































The information contained in this presentation is proprietary.

© 2014 Capgemini. All rights reserved.

www.capgemini.com

About Capgemini Now with 180,000 people in over 40 countries, Capgemini is one of

the world's foremost providers of consulting, technology and

outsourcing services.

The Group reported 2014 global revenues of EUR 10.573 billion.

Together with its clients, Capgemini creates and delivers business,

technology and digital solutions that fit their needs, enabling them to

achieve innovation and competitiveness.

A deeply multicultural organization, Capgemini has developed its

own way of working, the Collaborative Business ExperienceTM, and

draws on Rightshore®, its worldwide delivery model.

Rightshore® is a trademark belonging to Capgemini

http://www.facebook.com/Capgemini

http://www.linkedin.com/company/capgemini

http://www.twitter.com/capgemini

http://www.youtube.com/capgemini

http://www.slideshare.net/capgemini

Standardowy nowy sait – problemy

zwiazane z tworzeniem nowego

datacenter



O mnie

Krzysztof Podobiński Infrastructure/ VMware

Consultant

ponad10 lat doświadczenia w IT

5 lat w Capgemini

Application Support and Development Engineer

Senior Infrastructure/VMware Engineer

Trener IT

Projektowane i wdrażanie nowych środowisk opartych o rozwiązania VMware, Citrix oraz NetApp

Zarządzenie i monitorowanie isniejącej infrastruktury – OnCommand, DFM server

Rozwiązywanie problemów sprzętowych – HP, Dell, IBM, Cisco

Tworzenia i implementacja zmian w wirtualnym środowisku

Koordynacja współpracy z zewnętrznymi dostawcami



Agenda

Założenia początkowe

Rzeczywistość

Problemy

Rozwiązania



Założenia początkowe

Liczba wirtualnych maszyn ~30

Kilka VM wymagajacych wysokiej wydajności

Odporność na awarie – pełna nadmiarowość

Cena – podstawowe modele i licencje

Elastyczność



Założenia początkowe – „standardowy sajt”

ESXi servers – 2 x HP proliant DL 380 G9

Storage z podwójnym kontrolerem– NetApp 2520

Network switch – 2 x Cisco switches (1Gb/s)

Storage switch – 2x low end Dell switches (1Gb/s)

Medium – standard ethernet

Storage protocol – NFS




VMware ESX VMware ESX

Network Switch Network Switch

Ząrządzanie

Sieć produkcyjna





Storage Switch

Storage NetApp Storage NetApp

Storage Switch

HA

CLUSTER

INTERCONNECT

Storage

Vmotion



Rzeczywistość

Migracja z istniejącej infrastruktury

Ponad 100 VM + kolejne w planach

Kilkanaście VM High Perf z Exchnage server

Kilkanaście VM High Perf z SQL server

Kilkanaście VM wiekszych niż 1TB



Problemy

Wydajność ESXI – CPU, RAM, HA

Wydajność storage – IOPS, latency

Przestrzeń dyskowa

Połączenia – 1Gb/s



Rozwiązania

Wydajność ESXI – CPU, RAM, HA

Więcej CPU, Memory

Wydajność storage – IOPS, latency

Dodatkowe ESXI

Przestrzeń dyskowa

Dyski SSD

Więcej dysków

Dyski SATA





Rozwiązania - ESXI

Dodatkowe CPU

CPU z większą

ilością rdzeni

Dodatkowa pamięć

Dodatkowe ESXi

• Brak wolnych slotów

• Konieczność wyłączenia

całego środowiska

• Konieczność wyłączenia

całego środowiska

• Wystarczające zasoby w

przypadku awarii



Rozwiązania - Storage

Więcej dysków SAS

Dyski SSD

Dyski SATA

Hybryda SSD+SATA

• Wysoka wydajność

• Liczba dysków

• Wysoka cena

• Tanie

• Mała wydajność

• Wysoka wydajność

• Akceptowalna cena




Disk

SSD

Disk

SSD

Disk

SSD SSD Spare

Disk SATA

Disk SATA

Disk SATA

Disk SATA

Disk SATA

Disk SATA

SATASpare

Aggregate

Volume 1 Volume2

NF

S

Rozmiar dysków SATA

SSD jako cache dla random IOPS

Inteligentny auto Tiering




Memory buffers

SSD Flash Pool

SATA HDD

Żądanie odczytu

Losowy odczyt




hot warm cold delete neutral

Auto Tiering - odczyt

Załadowanie

odczyt odczyt odczyt

czyszczenie czyszczenie czyszczenie czyszczenie




NVRAM

SSD Flash Pool SATA HDD

Żądanie zapisu Potwierdzenie zapisu




cold HDD neutral

Auto Tiering - zapis

Załadowanie

odczyt

czyszczenie czyszczenie



Rozwiązania - Sieć

Storage Switch

Storage NetApp

Storage Switch

INTERCONNECT

Brak switchy 10Gb/s LAG

Brak Muli LAG na switchach

Second level interface group

LAG 1 LAG 2

Second Level LAG

Aktywne

Pasywne




INTERCONNECT


Storage Switch

Storage NetApp Storage NetApp

Storage Switch

Vkernel 2

Vkernel 1 192.168.147.1

192.168.148.1

192.168.147.5 192.168.148.5

192.168.147.2

192.168.148.2




192.168.147.1 192.168.147.2 192.168.147.3 192.168.147.4

Storage switch

LACP

Storage

192.168.147.5

Storage

192.168.147.5

192.168.147.6

192.168.147.7

Volume 1

192.168.147.5

Volume 2

192.168.147.6

Volume 3

192.168.147.7

Volume 4

192.168.147.5



Efekt końcowy

Liczba zmigrowanych VM >100

Srednie storage latency 5ms

Pełna odporność na awarie

Cena – podstawowe modele i licencje

Możliwość dalszej rozbudowy



Dziękuję,



Rightshore® is a trademark belonging to Capgemini.

www.capgemini.com

About Capgemini

With around 120,000 people in 40 countries, Capgemini is

one of the world's foremost providers of consulting,

technology and outsourcing services. The Group reported

2011 global revenues of EUR 9.7 billion.

Together with its clients, Capgemini creates and delivers

business and technology solutions that fit their needs and

drive the results they want. A deeply multicultural

organization, Capgemini has developed its own way of

working, the Collaborative Business ExperienceTM, and

draws on Rightshore ®, its worldwide delivery model.

Krzysztof Podobiński Infrastructure/VMware Consultant

[email protected]








Big Data

Czym jest Big Data?

Volume – rozmiar danych giga/tera/petabajty

Variety – różnorodność, często bez struktury np. maile, zdjęcia, Tweety

Velocity – szybkość przyrastania danych



Big Data

Jakie możliwości daje efektywne przetwarzanie takich danych?

Postęp w ochronie zdrowia (testy DNA, smartwatch, informacje z Tweet’ów)

Optymalizacja procesów produkcji (dane z linii produkcyjnej i czujników użytkowanych produktów)

Dynamiczne dopasowanie reklamy i cen oferowanych produktów (Target, Red Roof Inn)



Infrastruktura pod Big Data - wybór

Możliwe dwa podejścia:

Commodity hardware, tradycyjne Data Center:

• Niskie koszty

• Apache Hadoop tworzony z myślą o commodity hardware

Maszyny wirtualne, sprzęt klasy enterprise, wsparcie producenta:

• Wyższe koszty początkowe

• Wysoka jakość świadczonych usług

• Duża elastyczność środowiska i możliwość rozbudowy



(Very) Low End



Hardware

Infrastruktura konwergentna

Różne elementy infrastruktury IT (serwery, urządzenia sieciowe, macierze dyskowe, wirtualizacja) zarządzane jako jeden moduł, dobrane pod kątem wydajności i kompatybilności.

Problemy w tradycyjnym Data Center:

Kompatybilność

Wsparcie i troubleshooting

Rozbudowa i wykorzystanie zasobów



Hardware – VCE vBlock

VCE – początkowo spółka joint venture VMware, Cisco, EMC. Obecnie część EMC.

Serwery Cisco

Storage EMC

Urządzenia sieciowe Cisco

Wirtualizacja VMware

Wspólny support

Wersjonowanie jak jeden produkt

Kompatybilność komponentów



vBlock – Support i wersjonowanie

Pomimo różnych producentów komponentów wsparcie jak dla jednego produktu ze strony VCE

Kompatybilność aktualizacji firmware i software wszystkich komponentów testowana pod kątem całego vBlocka

RCM – Release Certification Matrix

Najnowsza wersja wspierana przez producenta (np ESXi) ≠ wsparcie VCE dla vBlock

Status całego vBlocka oraz zgodność z RCM monitorowane przez VCE Vision Intelligent Operations



vBlock - wersjonowanie



Storage dla Big Data

Macierz w vBlocku nie wystarczająca na potrzeby BigData

EMC Isilon:

Budowa modułowa

Duża wydajność

Łatwy w rozbudowie („scale-out”)

EMC

Wieloprotokołowy (HDFS)

Wystąpił w filmie Batman vs Superman



Isilon - Parametry

Max 144 moduły w klastrze

Max 50PB

Max > 3M IOPS

Elastyczna rozbudowa zgodnie z potrzebami dzięki kilku seriom modułów:

S – High Performance

X – High Versatility

NL – duża przestrzeń dyskowa, wersja ekonomiczna

HD – High Density, duża przestrzeń dyskowa, gęsto „upakowana” (3PB/rack)



Silnik Big Data – Hortonworks Hadoop



vBlock 340 - Komponenty

Osobna infrastruktura produkcyjna i zarządzająca

Produkcja:

16x Cisco Blade B200 M3

Intel(R) Xeon(R) CPU 2.20GHz 20 cores

512 gb RAM

Macierz VNX5600 - 62TB

Urządzenia sieciowe Cisco:

Nexus 5k

Nexus 1000v (Virtual Appliance)

Management:

3x Serwery Rack Cisco

Macierz EMC VNXe

Cisco Nexus 3k



Architektura - vBlock



Klaster EMC Isilon – Komponenty

7x moduły X410:

Storage Processor: Intel Xeon Processor Dual, 8-core

Pamięć: 128GB

Dyski SSD: 1,6TB (L3 cache)

Dyski HDD: 102TB

Front-End:

2x Nexus 5K, 10Gb

Back-End:

2x Infiniband Switch, 40Gb

Całkowita przestrzeń dyskowa klastra: 644TB (protekcja 1 node + 2 dyski)



Architektura – vBlock z Isilon



Vmware

vSphere:

ESXi

Vitual Distributed Switch

HA

DRS

SDRS

vRealize Automation



Vmware vRealize Automation



Rezultat – widok vCenter



Rezultat

Przejrzysta infrastruktura

Łatwa w rozbudowie

Dopasowana do potrzeb Big Data

Efektywne wykorzystanie dużych zasobów

Czołowi producenci sprzętu

Prosty model wsparcia

Wirtualizacja i automatyzacja

Infrastruktura gotowa do szybkiego dostarczania wymagających środowisk Business Data Lake zgodnie z oczekiwaniami klienta oraz łatwa w utrzymaniu i rozbudowie wraz z rosnącym zapotrzebowaniem na zasoby.



Co dalej?

Bliźniacza infrastruktura w drugim datacenter (replikacja, DRP)

Wirtualizacja warstwy sieciowej – Vmware NSX, VCE VxBlock

Dalsza automatyzacja



www.capgemini.com

About Capgemini

With more than 120,000 people in 40 countries, Capgemini

is one of the world's foremost providers of consulting,

technology and outsourcing services. The Group reported

2011 global revenues of EUR 9.7 billion.

Together with its clients, Capgemini creates and delivers

business and technology solutions that fit their needs and

drive the results they want. A deeply multicultural

organization, Capgemini has developed its own way of

working, the Collaborative Business ExperienceTM, and

draws on Rightshore ®, its worldwide delivery model.

Rightshore® is a trademark belonging to Capgemini








Sesja HR: informacje o procesie rekrutacji oraz możliwościach rozwoju

Case Study: Automatyzacja procesów finansowo-księgowych

Office Tour

30 czerwca 2016

Miejsce: Atrium, ul. Graniczna 54

Start: 18:00

Zakończenie: 21:00

Zapisy: www.pl.capgemini.com/capgemini-by-night

30.06.2016

data services - capgemini · 2017. 8. 21. · organization, capgemini has developed its own way of...

Documents