Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를...

29
Your Data. Your Innovation. (VCF 기반 데이터 중심 플랫폼 구현방안) 효성인포메이션시스템 박승규 수석 컨설턴트

Transcript of Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를...

Page 1: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

Your Data. Your Innovation.

(VCF 기반 데이터 중심 플랫폼 구현방안)효성인포메이션시스템 박승규 수석 컨설턴트

Page 2: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

22

▪ 데이터의 시대, 디지털을 위한 데이터센터

▪ 차세대 데이터센터가 요구하는 민첩성

▪ VCF를 이용한 데이터센터 현대화

Page 3: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

33

데이터가 중심이 되는 시대

데이터저장/공유데이터생성 데이터소비데이터분석

Video

Image/Text

Voice/Chat

Sensors

Compute

Storage

Network

Object

ETL

Data Lake

Analytics

AI/ML

Container

K8S

DevOps

Microservice

CloudIoT Big Data Mobile

Page 4: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

44

데이터센터의 변화

Web

WAS

DB

레거시

IaaS

Container

신규 업무Web Scale

자원 중심

ETL

Data Lake

NoSQL

Hadoop/Spark

Analytics

AI/ML

데이터 중심

비즈니스 모델운영 효율고객 경험

Page 5: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

55

데이터센터의 변화

Page 6: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

66

Industry

Society디지털을 위한 데이터센터

IoT HubAnalytics

AI/ML

DevOps

Microservice

클라우드 데이터센터

Mobile

IoT

Device

Edge

Processing

Multi Cloud

Page 7: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

7

Page 8: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

88

투자자본 수익률(Return On Investment)

데이터 수익률(Return On Data)

Page 9: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

99

최소 비용으로최대 데이터를

확보하고관리하여야 합니다

가능한 많은데이터를 데이터

혁신자에게 빠르게제공하여야 합니다

Page 10: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1010

현대화된 데이터센터는…

인프라스트럭처민첩성

데이터민첩성

비즈니스민첩성

저장

저장 관리 보호

정제 분류 카탈로그

정제

활용

발견 통합 조직화

성과 창출 $

Page 11: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1111

데이터센터 현대화를 위한…사전 설계된, 즉시 제공되는 디지털 플랫폼

소프트웨어 정의 인프라

인프라·데이터 운영 관리 최적화

하드웨어라이프사이클관리

지능적로그관리및분석 통합오케스트레이션 사전적성능최적화·용량계획

인프라설치구성자동화 데이터거버넌스

인프라 운영 관리최적화 및민첩한 데이터관리

SW로 설계된즉시 제공되는디지털 플랫폼

소프트웨어 정의컴퓨팅

소프트웨어 정의스토리지

소프트웨어 정의네트워크

사전 설계된자동 구성되는비용 효율적민첩한 인프라

Cloud Management Platform

IaaSDevOps

Microservice

ETL

Data Lake

HadoopAnalytics AI/ML

NoSQLIndexing

Page 12: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1212

HITACHI 소프트웨어 정의 데이터센터사전 설계된, 즉시 제공되는 디지털 플랫폼

소프트웨어 정의 인프라

인프라·데이터 운영 관리 최적화

하드웨어라이프사이클관리Hitachi UCP Advisor

지능적로그관리및분석VMware vRealize Loginsight

통합오케스트레이션VMware vRealize Orchestrator

사전적성능최적화·용량계획VMware vRealize Operations

인프라설치구성자동화VMware SDDC Manager

데이터거버넌스Hitachi Content Intelligence

VMware vSphere

Block – VMware vSANObject – Hitachi HCPFile – Hitachi HCP Edge

VMware NSX

VMware vRealize Automation

IaaSVKE/VIC

Cloudera

Pentaho PDI/PBA

Hitachi HCP

Hitachi HCP Edge

MongoDBHitachi HCI

Page 13: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1313

소프트웨어 정의 인프라사전 설계된, 즉시 제공되는 디지털 플랫폼

소프트웨어 정의 인프라

인프라·데이터 운영 관리 최적화

하드웨어라이프사이클관리

지능적로그관리및분석 통합오케스트레이션사전적성능최적화·용량

계획

인프라설치구성자동화 데이터거버넌스

인프라 운영 관리최적화 및민첩한 데이터관리

SW로 사전설계된즉시 제공되는디지털 플랫폼

소프트웨어정의컴퓨팅

소프트웨어정의스토리지

소프트웨어정의네트워크

사전 설계된자동 구성되는비용 효율적민첩한 인프라

Cloud Management Platform

IaaSDevOps

Microservice

ETL

Data Lake

CI/CDAnalytics AI/ML

IoTIndexing

Page 14: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1414

인프라 및 데이터 민첩성을 위한 인프라

스토리지

SAN SAN

서버

네트워크

L2/VLAN

L3

L4

FW/NAT

VPN

L2/VLAN

L3

L4

FW/NAT

VPN

IP 스위치 IP 스위치 IP 스위치

오늘날

데이터센터

현대화된

데이터센터

고속연산을위한

AI/ML 및VDI를 위한

GPU지원

IaaSVM을위한

SATASSD

빠른애널리틱스및 DB를

위한

NVMe지원

저비용대용량데이터

레이크용

NL-SAS

컨테이너환경을위한

SATASSD

인프라 및 데이터 관리

SW 네트워크 및 보안

Page 15: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1515

자원 구성 및 확장에 대한 민첩성1 Task Name

2 EnableVsan

3 EnableVsanPolicies

4 VsanClaimDisks

5 UpdateBringupStatus

6 NotifyBringupComplete

7 UpdateRackName

8 AuthorizeSddcAdminGroup

9 DeleteObsoleteCertificate

10 ConfigureSwitchVlans

11 ConfigureMgmtSwitchPort48

12 ConfigureSwitchNtp

13 AddHostToCluster

14 AddHostToDvswitch

15 CreateVmFolders

16 CreateNetworkFolders

17 CreateVmotionVmknics

18 CreateVsanVmknics

19 TagVlanIdsOnPortgroups

20 MigrateVmsToPortgroups

21 MigrateHostVmknics

22 DetachVmnicFromVswitch

23 AttachVmnicToDvs

24 RemoveVswitch

25 PopulateCssCredentials

26 RotatePasswords

27 PostInventoryToVrm

28 ChangeSddcMgrCert

29 CreateSddcMgrLcmCert

30 CreateLAG

31 AssignUplinkToPortGroups

32 TransferPhysicalAdapters

33 ReAssignUplink

34 ReconfigureHAOnCluster

35 RemoveVmSnapshots

36 AddDnsEntriesForVmkNic

37 ReconfigureHostDns

38 ReconfigureHostNtp

39 AssignPublicMgmtIp

40 ConfigureOOBRouting

41 MigrateDvsToFolder

42 ConfigureDataCenterUplink

43 ClearRedAlarmsOnHost

44 ChangeHostOobIp

45 ChangeHostPrivateIp

46 CreateCluster

47 RotateSwitchCertificate

48 PostSddcManagerInfo

49 InstallVmcaRootCert

50 UpdateDefaultRoute

51 ConfigureEvoMgrMgmtIp

52 UpdateEvoMgrHostname

53 ConfigureNtpIS

54 ConfigureDns

55 TimeSync

56 DisableVsanForceProvision

57 EnableVsanPolicies2

58 EnableClusterDrs

59 CreateResourcePool

60 RelocateVms

61 AdjustPoolReservation

62 EnableClusterHa

63 CreateVmAntiAffinityRule

64 UpdateLCMRepo

65 ConfigureLCMRepo

66 CreateNFSDatastore

67 ConfigureNtp

68 ConfigureNFSMount

69 ConfigureBackupForNSX

47 RotateSwitchCertificate

48 PostSddcManagerInfo

49 InstallVmcaRootCert

50 UpdateDefaultRoute

51 ConfigureEvoMgrMgmtIp

52 UpdateEvoMgrHostname

53 ConfigureNtpIS

54 ConfigureDns

55 TimeSync

56 DisableVsanForceProvision

57 EnableVsanPolicies2

58 EnableClusterDrs

59 CreateResourcePool

60 RelocateVms

61 AdjustPoolReservation

62 EnableClusterHa

63 CreateAntiAffinityRule

64 UpdateLCMRepo

65 ConfigureLCMRepoVm

66 CreateNFSDatastore

67 ConfigureNtp

68 ConfigureNFSMoun

69 ConfigureBackupForNSX

70 DeployNsxManager

71 ConfigureSyslogInNsx

72 UploadNsxVmcaCert

73 RegisterVcNsx

74 UploadNsxDlf

75 ApplyNsxLicense

76 DeployNsxController

77 ConfigureSyslogInNsx

78 CreateVxlan

79 CreateNsxSegmentRange

80 CreateNsxTransportZone

81 CreateNsxVirtualWire

82 ConfigureNsxAdminUser

83 AddVmsIntoDfwExclusionList

84 ConfigureSsoOnNSX

85 RestartSddcManager

86 GenerateHostSslCertificate

87 RotateHostSshKeysTask

88 RotateVsphereSshKeysTask

89 RotateLCMSshKeysTask

90 RotateSwitchSshKeys

91 UpdateKnownHostsTaskIS

92 UpdateRootKnownHost

93 DeployLogInsight

94 AddLogInsightLicense

95 BootstrapLogInsightCluster

96 GenerateLogInsightCert

97 ConfigureVCInLogInsight

98 ConfigurePscInLogInsight

99 ConfigureSddInLogInsight

100 InstallContentPacks

101 ConfigureLacpOnSwitches

102 DeployVC

103 ApplyVcLicense

104 DeployPsc1

105 EnableBashShellOnPSC1

106 EnableBashShellOnPSC2

107 CreateUserGroups

108 AssignUserGroups

109 UpdateSSOUI

110 CreateVmPrivatePortGroup

111 MigrateVmsPrivatePG

112 CreateVmPortGroup

113 CreateTemporaryPortGroup

114 CreateVmkNic1ForMGMT

115 MigrateMgmtVmsToFolder

116 CreateDvs

117 ConfigurePowerMgmt

118 ChangeSwitchOobIp

119 SoSBackup

120 BackupHostState

121 BackupHostState

122 BackupHostBootbank

123 UploadHostStateBackup

수십일에 걸쳐

워크로드별설계,

수동 설치 및구성

수일 내

사전 설계된

자동 설치 및구성

Page 16: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1616

모든 워크로드를 수용하는 SDDC 인프라

네트워크·보안

스토리지

56 Core / 20,480 Core

1.5 TB

SSD·NVMe / 15만 IOPS

10/25/100 GigE

CPU·GPU

메모리

디스크

네트워크

Hitachi UCP HC

디스크

캐시·메모리

인터페이스

캐시·메모리

NOS

기능·정책

컨트롤러

기능·정책

하이퍼바이저

SDS NFV·SDN

구성 변경 없이소프트웨어 설치만으로

Page 17: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1717

준비된 하이브리드 클라우드 확장

프라이빗클라우드

IBM Cloud

Region 1

Cloud Foundation

클라우드간 워크로드이동

Region 2

Cloud Foundation

Region 3

Cloud Foundation

통합 관리

모든(VPC, DPC) 하이브리드 클라우드를 위한SDDC 완성형 플랫폼 UCP RS

AmazonEC2

AmazonS3

AmazonRDS

AWSIoT

모든 AWS 서비스 접근

가능

VMC on AWS

Page 18: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1818

퍼블릭 클라우드에도 적용 가능한…

Hitachi Vantara 데이터서비스 on VMC on AWS를이용한디지털전환가속화

데이터 레이크& 오브젝트스토리지

엣지게이트웨이

개인용클라우드저장소

인덱싱 및메타데이터 검색

Page 19: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

1919

즉시 제공되는 디지털 플랫폼사전 설계된, 즉시 제공되는 디지털 플랫폼

소프트웨어 정의 인프라

인프라·데이터 운영 관리 최적화

하드웨어라이프사이클관리

지능적로그관리및분석 통합오케스트레이션사전적성능최적화·용량

계획

인프라설치구성자동화 데이터거버넌스

인프라 운영 관리최적화 및민첩한 데이터관리

SW로 사전설계된즉시 제공되는디지털 플랫폼

소프트웨어정의컴퓨팅

소프트웨어정의스토리지

소프트웨어정의네트워크

사전 설계된자동 구성되는비용 효율적민첩한 인프라

Cloud Management Platform

IaaSDevOps

Microservice

ETL

Data Lake

HadoopAnalytics AI/ML

NoSQLIndexing

Page 20: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2020

사전 설계된, 즉시 제공되는 디지털 플랫폼

• 팀별/부서별/지역별 사전 설계 시간 제거 (퍼블릭 클라우드 적용 가능)

• 승인 과정만으로 즉시 이용하는 디지털 플랫폼

• 휴먼에러 없는 안정적 디지털 플랫폼 서비스 배포

Page 21: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2121

네트워크·보안이 포함된 IaaS 서비스 플랫폼

SW L4를이용한

부하분산

SW L3를이용한외부망

Database 구성설정

VXLAN을이용한 L2 Overlay

캔버스를이용한

IaaS 서비스설계

방화벽 설정 적용

IP 주소, 호스트명, 게이트웨이,

DNS/NTP 설정

Page 22: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2222

데이터 레이크·오브젝트·파일 서비스 플랫폼

Data 복제를위한 분리된Backend

부하분산을위한 SW L4

SW 기반데이터 레이크

서비스

개인용 파일공유 및

동기화 서비스

파일 서비스용게이트웨이

NL-SASTiering을위한 구성

Page 23: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2323

클라우드 기반 빅데이터 플랫폼

비정형데이터레이크플랫폼

ETL

데이터 수집보안 적용

빅데이터분석 플랫폼

정형 데이터마트

Page 24: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2424

Cloudera 빅데이터 플랫폼도 손쉽게

관리 및게이트웨이 노드

워커 노드

마스터 노드

보안 정책적용

Page 25: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2525

자원·비용 효율을 위한 EDW Offload 플랫폼

기존 EDW에Hot 데이터만

보관

DB 데이터마이그레이션 & Single Query

웜, 콜드 데이터를NoSQL에 저장

Page 26: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

2626

Hitachi, 효성인포메이션시스템만이 가능한…

VMware Cloud Foundation Hitachi UCP

인프라 및 데이터 민첩성

효성인포메이션시스템만이제공하는사전설계된, 즉시제공되는디지털플랫폼블루프린트

인프라 및 데이터 운영 관리 최적화조직

컨설턴트, 아키텍트, 기술지원, 2선지원

데이터센터현대화전문가 40명

지원체계Hi-Call Center 365일

연중무휴

서버·네트워크·가상화영업/기술/유지보수

단일지원체계

Hitachi만 제공하는NVMe 하이퍼컨버지드

Page 27: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

27

Hitachi Unified Compute Platform (UCP)“An agile and integrated solution to modernize Datacenter”

Converged Infrastructure (CI)서버, 내장/외장 스토리지, 네트워킹 결합

워크로드물리 & 가상 워크로드 통합, IT 현대화, 하이브리드 & 프라이빗 클라우드, 미션 크리티컬 엔터프라이즈 DB & 애플리케이션, 예측 분석, IoT

스케일 업스케일 아웃

Hyper-converged (HC) Infrastructure 가상화된 서버, 내장 스토리지, (네트워킹) 결합

워크로드가상화된 워크로드 통합, 가상 환경의 미션 크리티컬애플리케이션 & DB. VDI, ROBO, 관리 클러스터 및컨테이너. DR & 매트로 가용성.

Rack Scale (RS) Infrastructure Spine-Leaf 아키텍처 기반 다중 랙-마운트 서버, 내장스토리지 결합

워크로드일반적 HCI 워크로드를 넘어서는 완성형 SDDC 솔루션으로 확장합니다. 향상된 보안, 민첩성, 자동화 및클라우드로 확장이 필요한 애플리케이션

IOT

Page 28: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스

28

데이터센터 현대화를 위한 Hitachi의 완벽한 포트폴리오

소프트웨어 정의 인프라스트럭처

Virtualization ContainerSoftware Defined

Network

Software Defined Storage

레거시 VDI 프라이빗 클라우드ROBO미션 크리티컬 하이브리드 IoT 엣지DevOps

애플리케이션Cloud Native Applications

애널리틱스& 성과

Video Analytics Hitachi Content Intelligence

서비스 오케스트레이션 최신 데이터 보호 데이터센터 애널리틱스인프라스트럭처 자동화(Hitachi UCP Advisor)

관리

스토리지 관리

Hyper-Converged

Rack ScaleConvergedHybrid

물리 인프라스트럭처프라이빗/퍼블릭 클라우드

히타치 인프라 기반프라이빗 클라우드

AFA DynamicallyConfigured

BYODObject

IOT

Hypervisor(VMware vSphere)

Storage(VMware vSAN)

Network(VMware NSX)

Control Panel(VMware VCF)

Bare MetalHitachi Storage Plugin for Container

Docker Engine

PivotalContainer Service

vSphere Integrated Containers Engine

Page 29: Your Data. Your Innovation....데이터레이크·오브젝트·파일서비스플랫폼 Data 제를 위한분된 Backend 부하분산을 위한SW L4 SW 기반 데이터레이크 서비스