super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

5
이동통신사 과금통계 시스템 성공사례 소개 이동통신사 과금통계 시스템에 오라클 “엑사”도입 Oracle Worldwide Top Class Bigdata System 1

Upload: mobigen

Post on 07-Aug-2015

1.459 views

Category:

Software


0 download

TRANSCRIPT

Page 1: super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

이동통신사 과금통계 시스템 성공사례 소개

이동통신사 과금통계 시스템에 오라클 “엑사”도입Oracle Worldwide Top Class Bigdata System

1

Page 2: super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

이동통신사 과금통계 시스템 성공사례 소개

용량 증설 및 성능향상 프로젝트

2

Web 서버

OLAP 서버

Appl. 서버Exadata

(DW)DB 서버

(DM)

실시간수집

Data Mart생성 다차원 분석

집계 분석

Web 서버

OLAP 서버

Appl. 서버

IRIS(전처리)

DB 서버(DM)

실시간수집

Data Mart생성

다차원 분석

집계 분석

구조 변경 전

구조 변경 후

전처리

Exadata(DW)

구조 변경

Data Mart생성

기존 Oracle Exadata 의 용량증설을 효과적으로 대처하기 위해 초대용량 데이터를 전처리 하는 모델로 IRIS 를 도입,

향후 ExaData 의 기능을 흡수 확장 하는 구조로 개발하는 것을 목적으로 합니다.

Page 3: super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

이동통신사 과금통계 시스템 성공사례 소개

AS-IS : 용량증설, 성능향상 필요

3

Search CDMA OutCDR

Search WCDMA OutCDR

Search LTE OutCDR

Application 서버

Search CDMA InCDR

Search WCDMA InCDR

Search LTE InCDR

Loading CDMA OutCDR

Loading WCDMA OutCDR

Loading LTE OutCDR

Loading CDMA InCDR

Loading WCDMA InCDR

Loading LTE InCDR

ETC

MartODS

InCDR Job수집 Job Schedule : 384/cycle변환 Job Schedule : 188/cycle

ETL Procedure : 16 job/cycle

ETL Procedure : 18 job/cycle

과금 장비

데이터 유입량 증가20Tbyte 30Tbyte

(day)

원시 데이터 처리량 증가650억 1000억

(day)

ETL Procedure : 63 job/cycle

7일 보관

3개월 보관

보관주기

Mart 통계 생성을 위한Exadata 과부하

가입자단위 실시간검색 불가

5조 8조 record

추가 2식증설필요 고비용Exadata

Full 3EA

Page 4: super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

이동통신사 과금통계 시스템 성공사례 소개

TO-BE : 계산량이 많은 Raw Data 처리를 IRIS 로 이전

4

Application 서버

Search CDMA InCDR

Search WCDMA InCDR

Search LTE InCDR

Loading CDMA InCDR

Loading WCDMA InCDR

Loading LTE InCDR

ETC

Search CDMA OutCDR

Search WCDMA OutCDR

Search LTE OutCDR

Loading CDMA OutCDR

Loading WCDMA OutCDR

Loading LTE OutCDR

Loading CDMA InCDR

Loading WCDMA InCDR

Loading LTE InCDR

ETC

MartODS

IRIS35 Cluster

ExadataFull 3EA

7일 보관

3개월 보관

보관주기

과금 장비

ETL Procedure : 63 job/cycleETL Procedure : 18 job/cycle

ETL Procedure : 16 job/cycle

ETL Procedure : 16 job/cycle

ETL Procedure : 63 job/cycle

가입자단위 실시간 검색

Page 5: super bigdata_success_story_(iris)_이동통신사 과금통계 시스템 적용사례

이동통신사 과금통계 시스템 성공사례 소개

개선 결과 : 합리적 비용으로 최대용량 최고성능 달성

5

용량증설

성능향상

Transactions / Day

구분 규격

IRIS구성

Master Node : 2식Data Node : 33식

구성용량

CPU : 408 CoresMem : 4.3 TerabyteDisk : 1.2 Petabyte• 데이터 2중화• 70% 데이터 압축• 2 Petabyte usable

전체 record 저장용량

전체 스토리지저장 용량

가입자단위조회 성능개선

연관조회성능개선

전체 시스템부하

비용절감

솔루션도입비용

개발 비용