ibm infosphere warehousing - dbguide.net · 2008-10-01 · ibm infosphere information server...

26
© 2008 IBM Corporation 1 IBM Infosphere Warehousing Jieun Lee September 2008

Upload: others

Post on 24-May-2020

3 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

© 2008 IBM Corporation1

IBM Infosphere Warehousing

Jieun Lee September 2008

Page 2: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

2

Information Management Software

Agenda

1. 전사 정보 관리 전략 - Information On Demand

2. IOD for Business Intelligence : Dynamic Warehousing

3. 차세대 EDW를 위한 인프라 – IBM Infosphere Warehouse

차세대 EDW 비전Infosphere

Information On Demand ( IOD) 개념 및 필요성

Dynamic warehousing 을 위한 IBM 기술요소IBM Infosphere Balanced Warehouse

Page 3: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

3 © 2008 IBM Corporation

Information on Demand란?

<2008. 3. IDC 백서>

“비즈니스 기회 및 경쟁상황에 성공적으로 대응하기 위하여 적절한 정보

(Right Information)를 적절한 사용자나 프로세스(Right People or

Process)에게 적시에(Right Time)제공하여 모든 종류의 정보 소스를 통

합,분석하고 최적화 하여 비즈니스에 필요한 가치를 창출하고 위험을 최소화하

는 솔루션 제공을 목적으로 함”

Information on Demand 적용을 통한

경쟁력 있는 비즈니스 환경 구축

Page 4: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

4 © 2008 IBM Corporation

70% of people’s time can be spent

searching for relevant information

60%+ of CEOs: Need to do a better job

leveraging information

Sources: IBM Attributes & Capabilities Study, 2005; Client Interviews 2004; IBM CFO Study, 2006

5X More Value creation by organizations effective at using Information as an

Asset

Information Availability

Information Must Become a Strategic

Asset

Top Technical Challenges

데이터 일관성 이슈

신뢰할 수 있는 정보의 부재

정보 통합 비용

정보 인프라의 유연성부족으로 인한 대응력 저하

Top Business Challenges

직원 생산성 증대

비즈니스 프로세스 최적화

고객 요구사항 만족

위험 관리 및 각종 규제에대한 대응

정보의 이슈 - Information Challenges

Key Impact Area

Page 5: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

5 © 2008 IBM Corporation

Why NOW?Key Challenge is Unlocking the Value of Information NOW!

실시간 / 데이터 양적 증가 / 다양한 포맷 / 사용자 확대

Page 6: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

6

Information Management Software

Information On Demand정보의 비즈니스 가치 증대를 통한 경쟁력강화

6

정보 관리 및 비즈니스프로세스에서의 활용

Better BusinessOutcomes

멀티 채널마케팅

Business Optimization

Flexible Architecture for Leveraging Existing InvestmentsOtherInformationSources

정확하고 신뢰할 수 있는정보의 제공 및 유지 관리

비즈니스 성과에 대한 계획,이해및 최적화

End-to-EndCapabilities

비즈니스 성과에 대한계획,이해 및 최적화

정확하고 신뢰할 수 있는정보 제공 및 유지 관리

비즈니스프로세스내에서의

정보활용

정보 수명주기전반에 걸친정보관리

효과적인마케팅

맞춤 서비스 고객 세분화를 통한최적의 의사결정

수익성 증대

Page 7: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

7

Information Management Software

Agenda

1. 전사 정보 관리 전략 - Information On Demand

2. IOD for Business Intelligence : Dynamic Warehousing

3. 차세대 EDW를 위한 인프라 – IBM InfoSphere Warehouse

Dynamic Warehousing & InfoSphere

Information On Demand ( IOD) 개념 및 필요성

Dynamic warehousing 을 위한 IBM 기술요소IBM InfoSphere Balanced Warehouse

Page 8: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

8

Information Management Software

Dynamic Warehousing

Traditional Data Warehousing

OLAP & Data Mining to Understand Why and

Recommend Future Action

Query & Reporting to Understand

What Happened

Information On Demand to Optimize Real-Time Processes and

each transactions

Dynamic Warehousing - 차세대 비즈니스 인텔리전스

Page 9: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

9

Information Management Software

전사에 걸쳐 다양한 데이터소스로 부터 정보를 통합, 클린징, 변환 하는 기술

정보의 서비스화

Process Management

Search &Text Analytics

IndustryPerspective

EnterpriseData Modeling

InformationIntegration

Master DataManagement

산업에 특화된 데이터 모델을통하여 효과적으로 특정비즈니스 도메인에 분석력을적용할 수 있도록 함. 각 산업을 위한 분석 템플릿활용

고객, 거래선, 제품 등에 대한단일 뷰 ( 마스터) 제공

비즈니스 코어 엔티티에 대한단일 소스로 정확하고 일관성있는 정보가 DW에 제공될 수있도록 함.

모든 관련정보에 적용되는공통 메타 데이터 제공

검색 및 비정형 텍스트 분석기술

비정형 데이터로 부터 의미있는 정보를 추출하여 활용

Dynamic Warehousing 은 사용자관점에서 필요한 정보를 필요한 시점에 동적으로 활용할 수 있도록 하는 기존 DW의확장 개념입니다. 정형 및 비정형 데이터로 부터 필요한 정보를 통합/변환/분석하여 전통적인 분석 업무 뿐 아니라 이를 운영비즈니스 프로세스에서 실시간으로 사용할 수 있도록 합니다.

수행되는 각종 비즈니스 활동내에 비즈니스 통찰력을제공하여 의사결정 및프로세스 최적화에 분석의결과가 활용될 수 있도록 함.

Dynamic Warehousing – 기술 요소

Page 10: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

10

Information Management Software

Dynamic Warehousing – 활용

콜센터 등 고객서비스 센터에서 교차판매 기회 , 이탈 가능성 및 이와관련된 이슈를 고객을 응대하면서 바로파악고객 서비스의 변화

고객접점에서 교차 판매 기회 파악 및고객과의 협상 순간에 활용할 수 있는관련 고객 정보를 이해영업 효과 극대화를 위한 변화

IBM Data Warehousing은 콜센터, 영업사원등 각 트랜잭션을 최적화할 수 있는 적절한 정보를 제공할 수 있도록 합니다. DW의 가치는 과거 데이터에 대한 분석 뿐 아니라, 사용자의 일상 업무 프로세스의 일부분으로 실시간 분석을 활용하는 것으로

극대화 됩니다.

OLAP & Data Mining

Information On DemandDynamic Warehousing

Query & Reporting

이탈 고객 분석, 우수고객 스코어링분기별, 지역별 매출액 분석월별 영업 실적 리포트 등쿼리 와 리포팅OLAP 데이터 마이닝

Page 11: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

11

Information Management Software

An Industry Unique Information Platform for client value

• 신뢰할 수 있는 고 품질 정보에 대한제공 과정의 단순화

• 주요 정보 관련 프로젝트의 리스크 최소화

• 각 구성요소의 통합을 통한 상승 효과

• 단일 업무에서 부터 전사프로젝트까지의확장성

The IBM InfoSphere Vision

Page 12: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

12

Information Management Software

ODS

DEMOGRAPHIC

TRANSACTION

MART

STRUCTURED

XML

UNSTRUCTURED

Data ModelsData ModelsBankingBanking InsuranceInsurancePublicPublicTelcoTelcoRetail Retail HealthcareHealthcare

IOD FrameworkIOD Framework

CC--ClassClass DD--ClassClass EE--ClassClass Linux/Linux/WindowsWindows

AIX/SUN/HPAIX/SUN/HP

HardwareHardware

REGIONAL

소스소스 데이터데이터

IBM InfoSphere™Dynamic warehousing & InfoSphere

How It All Fits Together

IBM InfoSphere IBM InfoSphere Information Information

ServerServer

IBM InfoSphere IBM InfoSphere WarehouseWarehouse

IBM InfoSphere IBM InfoSphere MDM ServerMDM Server

IBM Cognos IBM Cognos BIBI

Page 13: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

13

Information Management Software

ODS

DEMOGRAPHIC

TRANSACTION

MART

STRUCTURED

XML

UNSTRUCTURED

Data ModelsData Models

IBM InfoSphere IBM InfoSphere Information ServerInformation Server

DeliverDeliver

CleanseCleanse

TransformTransform

UnderstandUnderstand

BankingBanking InsuranceInsurancePublicPublicTelcoTelcoRetail Retail HealthcareHealthcare

Unified Meta Data Unified Meta Data ManagementManagement

IOD FrameworkIOD Framework

CC--ClassClass DD--ClassClass EE--ClassClass Linux/Linux/WindowsWindows

AIX/SUN/HPAIX/SUN/HP

HardwareHardware

REGIONAL

소스소스 데이터데이터

IBM InfoSphere™ Information Server1) Gather, Transform, Cleanse, And Deliver Trusted Information

Page 14: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

14

Information Management Software

ODS

DEMOGRAPHIC

TRANSACTION

MART

STRUCTURED

XML

UNSTRUCTURED

Data ModelsData Models

IBM InfoSphere IBM InfoSphere Information ServerInformation Server

IBM InfoSphere IBM InfoSphere WarehouseWarehouse

DeliverDeliver

CleanseCleanse

TransformTransform

UnderstandUnderstand

OptimizeOptimize

GrowGrow

DesignDesign

DiscoverDiscover

BankingBanking InsuranceInsurancePublicPublicTelcoTelcoRetail Retail HealthcareHealthcare

Unified Meta Data Unified Meta Data ManagementManagement Reliable Real Time DeliveryReliable Real Time Delivery

IOD FrameworkIOD Framework

CC--ClassClass DD--ClassClass EE--ClassClass Linux/Linux/WindowsWindows

AIX/SUN/HPAIX/SUN/HP

HardwareHardware

REGIONAL

Disparate DataDisparate Data

IBM InfoSphere™ Warehouse2) Discover Insight, Uncover Trends, Align Trusted Information

Page 15: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

15

Information Management Software

ODS

DEMOGRAPHIC

TRANSACTION

MART

STRUCTURED

XML

UNSTRUCTURED

Data ModelsData Models

IBM InfoSphere IBM InfoSphere Information ServerInformation Server

IBM InfoSphere IBM InfoSphere WarehouseWarehouse

IBM InfoSphere MDM IBM InfoSphere MDM ServerServer

DeliverDeliver

CleanseCleanse

TransformTransform

UnderstandUnderstand

OptimizeOptimize

GrowGrow

DesignDesign

DiscoverDiscover

TransactTransact

ManageManage

DefineDefine

BankingBanking InsuranceInsurancePublicPublicTelcoTelcoRetail Retail HealthcareHealthcare

Unified Meta Data Unified Meta Data ManagementManagement Reliable Real Time DeliveryReliable Real Time Delivery Part, Product, Account Part, Product, Account

IOD FrameworkIOD Framework

CC--ClassClass DD--ClassClass EE--ClassClass Linux/Linux/WindowsWindows

AIX/SUN/HPAIX/SUN/HP

HardwareHardware

REGIONAL

Disparate DataDisparate Data

IBM InfoSphere™ MDM Server3) Operationalize & Synchronize Master Data Cross Channel

Page 16: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

16

Information Management Software

ODS

DEMOGRAPHIC

TRANSACTION

MART

STRUCTURED

XML

UNSTRUCTURED

Data ModelsData Models

IBM InfoSphere IBM InfoSphere Information ServerInformation Server

IBM InfoSphere IBM InfoSphere WarehouseWarehouse

IBM InfoSphere MDM IBM InfoSphere MDM ServerServer

IBM Cognos 8 BIIBM Cognos 8 BI

DeliverDeliver

CleanseCleanse

TransformTransform

UnderstandUnderstand

OptimizeOptimize

GrowGrow

DesignDesign

DiscoverDiscover

TransactTransact

ManageManage

DefineDefine

PlanPlan

ScorecardScorecard

AnalyzeAnalyze

ReportReport

BankingBanking InsuranceInsurancePublicPublicTelcoTelcoRetail Retail HealthcareHealthcare

Unified Meta Data Unified Meta Data ManagementManagement Reliable Real Time DeliveryReliable Real Time Delivery Part, Product, Account Part, Product, Account Unified Performance System Unified Performance System

PlatformPlatform

IOD FrameworkIOD Framework

CC--ClassClass DD--ClassClass EE--ClassClass Linux/Linux/WindowsWindows

AIX/SUN/HPAIX/SUN/HP

HardwareHardware

REGIONAL

Disparate DataDisparate Data

IBM Cognos Business Intelligence4) Analyze Trusted Information To Determine Where You Are

Page 17: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

17

Information Management Software

Agenda

1. 전사 정보 관리 전략 - Information On Demand

2. IOD for Business Intelligence : Dynamic Warehousing

3. 차세대 EDW를 위한 인프라 – IBM InfoSphere Warehouse

Dynamic Warehousing & InfoSphere

Information On Demand ( IOD) 개념 및 필요성

Dynamic warehousing 을 위한 IBM 기술요소IBM InfoSphere Balanced Warehouse

Page 18: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

18

Information Management Software

IBM InfoSphere™ Warehouse 9.5.1

MPP Data Server – DB2 ESE

Analytics AccelerationNo Copy Analytics

Advanced Design & Management

Extreme Performance

C-Class D-Class E-Class Linux/Windows

AIX/SUN/HPPlatform

Universal Access

Advanced Capability

Portals & Web Apps Reporting Solutions MS Office

On-line AnalyticalProcessing (OLAP)

Data Mining

Design Studio

Data Compression

Workload Management

Data RetentionRemote Data Access

Web Services SQL/MDX MDX

Text Analytics

Embedded DataMovement

18

Page 19: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

19

Information Management Software

IBM InfoSphere™ Warehouse– Analytics

• 데이터 추출 요건 최소화

• 데이터는 DW내에 존재

• 분석을 위한 정보에 대한 제한 없는 액세스

• 새로운 데이터에 대한 분석 주기 최소화

InfoSphere Warehouse

Text

Unstructured TextAnnotation

Data MiningCubing

Universal AccessOffice 3rd Party

19

Page 20: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

20

Information Management Software

DeployDeploy

ManageManage

GovernGovern

DevelopDevelop

DesignDesign

Eclipse WebShared

BIArchitect

DatabaseDeveloper

IBM

Other

Design• Data Modeling • OLAP• ELT Modeling• Data Mining

Develop• Coding• Debugging• Teaming• Testing• Integrating

Govern• Compliance• Standard enforcement•Auditing• logging

Database Administrator

Manage• Packaging/versioning• Application Merging • Change Management•

Business Analyst

Application Developer

ApplicationAdministrator

IBM InfoSphere™ Warehouse– Design & Admin

20

A Complete End to End SolutionA Complete End to End SolutionFor Warehouse Application Life Cycle ManagementFor Warehouse Application Life Cycle Management

Page 21: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

21

Information Management Software

안정성/가용성/실시간 성능/리소스 효율 극대화를 목표로 합니다.

IBM Dynamic Warehousing 은 대용량 데이터를 병렬로 수행하고

복잡한 워크로드에 대한 시스템 영향을 최소화 하기 위하여 워크로드를 관리합니다.

고성능 압축 기능을 통하여 스토리지 절감 및 성능이 향상됩니다.

Table

Streaming Updates andBatch ETL

Short TacticalQueries

Complex Strategic Queries

Complex Queries Comparison( Lowe r i s be t t e r )

0

500

1000

1500

2000

2500

3000

V9 Baseline

V9 Compression

IBM InfoSphere™ Warehouse– Performance

Page 22: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

22

Information Management Software

Embeddable Analytics (Inline & As a Service)

다차원 분석/데이터 마이닝/시각화

Beyond Traditional Structured Data

비정형 정보를 활용한 비즈니스 통찰력 제공

OLTP Foundation

실시간 액세스, 안정성, 가용성, 확장성,

보안 등에 대하여 최적화된 엔진

Dedicated Warehousing

병렬 아키텍쳐 - Shared Nothing

데이터 파티셔닝

워크로드 관리

Dat

a Vo

lum

es

UnstructuredStructured

Deep Compression

스토리지 비용 감소

디스크 활용성 증대

쿼리 응답시간 향상

수시 적재 와 사용자 조회 업무를 동시에 지원하여야 하는 Mixed Workload 요건과 OLTP 내에 분석 기능을 Embed 하는 요건의 증가로인하여 DW 전용 DBMS가 아닌 OLTP와 DW 업무 성격을 동시에 지원할 수 있는 DBMS가 경쟁력을 가진다.- Gartner Data Warehouse Forecast, 2006

Best of Both Worlds

Dynamic Warehouse

IBM InfoSphere™ Warehouse– Better for Both

Page 23: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

23

Information Management Software

Cubing Services

InfoSphere Warehouse

High Priority Data

Mid Priority Data

Low Priority Data

Optim

Data R

etention Manager

IBM InfoSphere™ Warehouse– Data Retention 데이터 사용 요건에 따른 별도 스토리지 관리를 통하여 이력 데이터 관리 비용 절감및데이터 웨어하우스 플랫폼 성장 속도 감소

Page 24: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

24

Information Management Software

BCU( Balanced Configuration Unit)을 기본 단위로 하는 IBM InfoSphere Balanced Warehouse는 Dynamic warehousing 을 위하여 하드웨어, 스토리지, 소프트웨어에 대한 통합 구성에 대한 사전 테스트 및 구성을 완료한 검증된 인프라입니다.

Simplicity사전구성을 통한 복잡도 감소

Balanced Warehouse

Flexibility for GrowthBCU 단위의 확장

Optimized Performance최고의 성능을 위하여 테스트를 통한최적의 사전 구성 완료

IBM선진사례의 경험을 바탕으로 risk 최소화

MEM

Data BCU 1 Data BCU 2 Data BCU n

MEMCPUCPU CPUCPU

……

…… CPUCPU CPUCPU……

……

MEMCPUCPU CPUCPU

……

……

…..

IBM InfoSphere™ Balanced WarehouseBetter than an appliance

Page 25: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

25

Information Management Software

Storage OptimizationStorage OptimizationIncrease warehouse capacity

Performance ManagementPerformance ManagementIdentifies usage patterns and trendsIdentifies usage patterns and trends

Data Retention Data Retention based on usage patterns and data governance

Workload ManagementWorkload ManagementOptimizes workloads and priorities

Manage Analyze

Reliable Real-Time Delivery

IBM InfoSphere Warehouse

• 통합된 데이터 웨어하우스 플랫폼

• 대용량 데이터 처리를 위한 DB2 병렬파티셔닝, 데이터 마이닝 , 데이터 유지관리및 큐빙 기술

• 분석 환경 뿐 아니라 운영 트랜잭션 환경에도최적화된 성능 보장

• 확장성 및 유연성 제공 - big or small

Page 26: IBM Infosphere Warehousing - DBGuide.net · 2008-10-01 · IBM InfoSphere Information Server DeliverDeliver Cleanse Transform Understand Banking Healthcare Retail Telco Public Insurance

26

Information Management Software

감사합니다.