oracle it · •vm的可扩展性限制于单个物理机，不能满足核心业务系统需求...

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal/Restricted/Highly Restricted

Oracle信息化发展趋势与 IT 战略

闵文杰

总监，Oracle中国

昆明，7月17日，2014

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

会议议程

Oracle公司战略

云计算发展趋势及Oracle 数据库即服务云DBaaS

大数据趋势及Oracle完整大数据方案

互联网公司信息化与传统企业信息化的冷静思考

1

2

3

4

Oracle Confidential – Internal/Restricted/Highly Restricted 3


甲骨文公司 Oracle Corporation

INNOVATION 创新和投资

• 34,000开发者和工程设计人员

• 18,000个客户支持专业人员，可提供29种语言支持

• 18,000个实施顾问

• 在甲骨文在线社区有1,500万开发者

• 每年200万学生获得支持

• 900 个独立甲骨文用户群组，拥有 500,000 名成员

SCALE 规模

• 第二大软件公司，最大企业软件公司

• $371亿美元（在连续12个月的基础上）*

• 在50个产品或行业中保持领先地位

• 在145个国家有390,000个客户

• 自2004年研发投入240亿美元

• 25,000合作伙伴

• 117,000员工

• 在甲骨文在线社区有1,500万开发者

* GAAP revenue reported in USD as of May 31, 2013


在产品创新和集成的投资

自2004年研发投入总额超过240亿美元

$1.3B $1.5B $1.9B

$2.1B $2.6B $2.6B

$3.1B

$4.5B $4.5B $4.9B

FY04 FY05 FY06 FY07 FY08 FY09 FY10 FY11 FY12 FY13

Figures in GAAP


甲骨文愿景做好4件事情

• 不同层面产品做到同类最佳：无论是软件或硬件

• 垂直集成：为用户提供极致性能并大幅降低总体拥有成本：Exadata、Exalogic、Exalytics、Supercluster、Oracle Big Data，

• 深入行业优势和解决方案：政府、制造、交通、能源、卫生、零售、金融、电信…

• 云计算：选择权交给用户，帮助用户自由的搭建来去自由的云计算环境(私有云、公有云、混合云)


关于Oracle市场领导地位

TECHNOLOGY

Database

Database on Solaris

Database on Linux

Database on SAP

Data Warehousing

Embedded Database

Development Language – Java

Middleware

Application Servers

Identity and Access Management

APPLICATIONS

Business Analytics

CRM

Enterprise Performance Management

Project Portfolio Management

Transportation Management

HARDWARE

Unix Server

INDUSTRIES

Banking

Communications and Media

Construction

Discrete Manufacturing

Life Sciences and Healthcare

Professional Services

Public Sector

Retail

Transportation


数据库市场份额


只有甲骨文提供完整的解决方案

ORACLE IBM Microsoft HP SAP

行业应用软件

通用应用软件

中间件

数据库

操作系统

虚拟化

服务器

存储

运维管理


TO WORK TOGETHER


卓越性能


Exadata极限性能的数据库云服务器


极限性能处理


Gartner Data Center Conference presentation, “Will Fabric Computing Change the Concept of the Traditional Server?”, December 2011

“By 2015, 35% of total server shipped value will

be as integrated systems.” “到2015年，一体化系统的出货量将达到服务器总量的35%”

一体化系统是未来发展的趋势


Market Leader for Engineered Systems

• 集成系统也就是融合基础设施在2013年快速发展，第三季度集成系统的销售额达到14亿美元，同比增长68.5%

• Oracle以45.6%的市场份额占据第一的位置

• IDC分析师称：由于数据中心面临简化部署的需求，所以未来一段时间集成系统的市场将会快速增长；IT客户开始认识到集成系统在提高IT部署敏捷性的优势，预计2014年集成系统仍将是服务器市场的新增长点

2013年全球集成系统市场发展迅猛

Oracle is the pioneer of engineered systems – with introduction of Exadata in 2008 followed by others. IDC states revenue for worldwide integrated infrastructure and platform market grew 50.2% since Q2 2012 to reach $1.3 billion. Exadata and other Exa-systems was observed to be by far the largest supplier

for this market segment with a market share of 56.7% .

IDC报告（2014 年 1 月）


决策库

医

疗

保

险

养

老

保

险

工

伤

保

险

失

业

保

险

生

育

保

险

两定

联网

结算

劳动99

人力资源

网上经办

社保业务

生产区外网

联

网

监

测

基

金

监

管

宏观决策

交换区决策区

一体化平台

财务

系统

网

闸

外网

数据库交换库核心数据库

Exadata在社保IT不同领域都有使用


人社厅信息化信息化云部署

人力资源新农保电子档案异地就医平台需求管理平台自助服务终端 12333 决策分析卡系统基本信息库部门间信息共享指纹系统财务系统

内网管理云

网上服务大厅社会保障卡服务网电子邮件服务平台短信平台手机终端门户网站地理信息系统

外网服务云内网五险云

养老保险

医疗保险

工伤保险

生育保险

失业保险

核心平台三版

五险合一数据库


公共服务平台建设 • 内网数据利用Oracle Golden Gate同步到外网，以公众服务对象为中心，数据资源标准化，服务手段多样性，用户体验一致性，服务平台安全性，实现人群地区功能全覆盖


社保移动化应用示例



一体化的结构化、非结构化数据云平台一个平台支撑多种应用，支持结构化非结构化统一管理

外部用户内部用户

Local Balancer

应用服务器集群数据库服务器集群 Oracle RAC DB PDM


Local Balancer

应用服务器集群数据库服务器集群 Oracle RAC DB BI


Local Balancer

应用服务器集群数据库服务器集群 Oracle RAC DB ERP


Local Balancer

应用服务器集群数据库服务器集群 Oracle RAC DB P6

Exadata数据库云平台

PDM

ERP

P6

BI


国土测绘图形场景图形预览场景 – 11个图层

用户数 500 800

时间（毫秒） 65 72

60

62

64

66

68

70

72

74

500 800

图形预览

时间（毫秒）

用户数


会议议程

Oracle公司战略




1

2

3

4



Oracle在云计算领域的三大核心能力

云计算运营商：全球第二大SAAS

供应商

云计算应用提供商

云计算平台提供商


国内云计算主要玩家

互联网厂商

电信运营商云计算

设备提供商

• 国产互联网： •阿里、青云、搜狐、新浪、腾讯、京东

• 国外互联网： •AWS、 Azure

• 中国电信 • 中国联通 • 中国移动

• 浪潮 • H3C • 华为


企业级云计算平台架构

架构模型

OVM for x86 Pool

Storage Pool SAN / NAS

OVM for SPARC Pool

IT 管理

SaaS / Applications (ERP,CRM,HR,FSI) 业务应用、业务管理、系统管理、系统监控……….

自服务门户

Exadata Exalogic Big Data

DBaaS FMaaS SOA Hadoop

PaaS IaaS

资源层硬件池化

能力层数据池化

业务层功能池化

立体化的云生命周期管理

资源层网络资源

OVCA

物理层物理基础设施

Contained

hot aisle

Contained hot aisle

REAR

FRONT

FRONT

Rack Rack Rack Rack

Rack Rack Rack Rack

REAR

CRAC

CRAC

CRAC

CRAC

CRAC

CRAC

Contained

hot aisle

Contained hot aisle

REAR

FRONT

FRONT

Rack Rack Rack Rack

Rack Rack Rack Rack

REAR

CRAC

CRAC

CRAC

CRAC

CRAC

CRAC

Contained

hot aisle

Contained hot aisle

REAR

FRONT

FRONT

Rack Rack Rack Rack

Rack Rack Rack Rack

REAR

CRAC

CRAC

CRAC

CRAC

CRAC

CRAC

Contained

hot aisle

Contained hot aisle

REAR

FRONT

FRONT

Rack Rack Rack Rack

Rack Rack Rack Rack

REAR

CRAC

CRAC

CRAC

CRAC

CRAC

CRAC

Exalytics


虚拟化就是云计算？

Server

Pool 1

VMware


虚拟化环境不适合部署关键业务系统数据库

• VM的可扩展性限制于单个物理机，不能满足核心业务系统需求

• 安装，设置，维护比较复杂

• X86平台“在采用 4.0 虚拟 CPU 的虚拟机上，某虚拟化软件可实现 90% 的本机性能”（10%的性能损失），X86的虚拟IO方式性能损失严重， IO性能损失可达50%甚至更高

• Oracle DB没有ceritify Vmware，出了问题由Vmware负责，Oracle不解决

Metalink Note 249212.1 - Oracle Support Policy Regarding VMware "Oracle has not certified any Oracle Software on VMware virtualized environments.

imap://[email protected]:993/fetch>UID>/utls_item_hits_pkg.get_item?p_item_id=45360236&p_site_id=1&p_type=baseurl&p_url=https://metalink.oracle.com/







Oracle DBaaS解决方案

Oracle DBaaS解决方案

应用

安全

事后审计

事前防范

事中拦截

Oracle数据库 Exadata

Database Machine

业务连续性保障集群及分区技术云的测试管理

云生命周期管理

云的优化管理

数据库产品管理


Oracle DBaaS：全面的企业级DBaaS解决方案

EM12C+DB11g/DB12C

Enterprise Manager

12c

基于EM12C+Exadata的数据库云

• 基于服务器集群和共享磁盘阵列的部署模式

• DB12c提供多租户的数据库服务，实现用户数

据的安全隔离

• 物理服务器集群规模不断增加时，网络带宽和

磁盘I/O将成为瓶颈

• 提供高性能、高可靠性的数据库云服务

• 部署企业核心应用系统

• 部署企业高负载的数据库系z统

• 实现不同用户间的计算、存储、网络资源隔离

• 简化企业IT架构，简化运维管理

一般性部署架构最佳实践


Fro

nt

Off

ice

DW

Bac

k O

ffic

e Fr

ee

CRM

ERP

弹性资源分配---服务器资源

Server Pool Min Max Imp

ERP 3 5 3

CRM 2 4 2

Back Office 2 3 1

DW 4 4 1

Free 4 0

• 服务器级别的资源分配方式，适用于节点较多

• Service 可建立在server pool上的，server pool中可以随时添加和删除实例

• 当Server Pool中的资源不足时，可以从：

– 优先级低的 server pool 获得资源

– 同等级别的，但是Server更多的Server Pool


弹性资源分配---服务器资源

部门应用程序

1

CRM

Back Office 共享

服务 Oracle

Enterprise

Manager

DW

ERP

感知需求高峰

Oracle Exadata数据库虚拟服务池

数据库服务节点

感知需求

高峰

调整容量

调整容量


弹性资源分配---IO资源 IORM

怎样配置 I/O Resource Manager?

Exadata Storage

销售数据库

财务数据库

客服数据仓库

分配: 60% 分配: 10% 分配: 30%

配置IORM资源计划，设置每个数据库的配比

资源分配等价于磁盘使用率


Oracle Database 12c多租户云数据库多租户架构实现了可插拔的数据库

系统资源获益能力

降低建设成本

每台服务器上可以部署更多应用

减少运营成本

更少的能源、制冷与空间

像管理一个数据库一样管理多个数据库

增加灵活性快速供应通过“可插拔”方式提供便携性通过RAC技术提高扩展性为开发/测试提供快速克隆

容易被采用应用无需改变所有数据库特性依然不变


1.基础系统 --操作与运维系统

主数据管理系统统一身份管理系统门户与内容管理系统

应用集成系统邮件系统

DNS/DHCP 运维展现系统

IT服务管理系统数据处理系统

数据监控与采集系统备份管理系统桌面管理系统

2.关键系统 -非ERP系统

决策支持系统

计划与全面预算系统

CRM

电子采购系统

电子销售系统

综合管理系统

3.核心系统-ERP

SAP ECC SAP

MDM SAP BW SAP PI

SAP

SRM

中间层: 虚拟机+物理机方式搭建云平台

数据层:数据云平台

核心系统--ERP数据云非ERP及基础系统

数据云

神华集团系统部署方式


大型制造企业云数据中心逻辑架构

基础设施

平台层


会议议程

Oracle公司战略




1

2

3

4



来自三万英尺高空的劳斯斯的大数据引擎

http://www.ctocio.com/wp-content/uploads/2013/02/image.png


1 0 1 1 1 0 0 0 0 0 0 1 1 0 1 1 0 1 1 1 0 0 0 1 1 1

0 0 1 1 1 0 0 0 0 0 0 1 1 1 1 0 1 1 1 0 0 0 1 1 1 0 1 1 1 0 0 0 0 0 0 1

1 0 1 1 0 1 1 1 0 0 0 1 1 1 0 1 1 1 0 0 0 0 0 0 1 1 0 1 1 0 1 1 1 0 0 0 1 1

1 0 1 1 1 0

0 0 0 0 0 1

1

0 1 1 0 1 1 1 0 0 0 1 1

1 0 1 1 1 0

0 0 0 0 0 1

1

0 1 1 0 1 1 1 0 0 0 1 1

版权所有 © 2012，Oracle 和/或其分支机构。保留所有权利。 38

大数据应用的业务价值


Oracle大数据解决方案

获取分析组织

Oracle (DW) Oracle (OLTP)

模式灵活

非结构化

数据多样性

结构化模式化

信息密度

Hadoop HDFS

Oracle

NoSQL DB

Spatial Graph

Oracle Advanced Analytics (ODM & ORE)

OBI EE Oracle MR

R 非SQL 灵活、特定开发为中心

SQL 安全、可靠管理为中心

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. | 41

Big Data Appliance +

Hadoop

HDFS Data Node

Exadata +

Oracle Database

Oracle Catalog

External Table

create table customer_address

( ca_customer_id number(10,0)

, ca_street_number char(10)

, ca_state char(2)

, ca_zip char(10)

)

organization external (

TYPE ORACLE_HIVE

DEFAULT DIRECTORY DEFAULT_DIR

ACCESS PARAMETERS

(com.oracle.bigdata.cluster hadoop_cl_1)

LOCATION ('hive://customer_address')

)

HDFS Data Node

HDFS Name Node

Hive metadata

External Table

Hive metadata

发布Hadoop元数据到Oracle


HDFS Data Node

Oracle Catalog

External Table

Select c_customer_id

, c_customer_last_name

, ca_county

From customers

, customer_address

where c_customer_id = ca_customer_id

and ca_state = ‘CA’

HDFS Data Node

HDFS Name Node

Hive metadata

External Table

Hive metadata

Hadoop上执行查询

HDFS Data Node

HDFS Data Node

Determine: • Data locations • Data structure • Parallelism

Send to specific data nodes: • Data request • Context


HDFS Data Node

Oracle Catalog

External Table

Select c_customer_id

, c_customer_last_name

, ca_county

From customers

, customer_address

where c_customer_id = ca_customer_id

and ca_state = ‘CA’

HDFS Data Node

HDFS Name Node

Hive metadata

External Table

Hive metadata

Hadoop上执行查询

HDFS Data Node

HDFS Data Node

“Tables”

Do I/O and Smart Scan: • Filter rows • Project columns

Move only relevant data • Relevant rows • Relevant columns

Apply join with database data


Storage Indexes

Hadoop上优化扫描

• 自动收集和存储在一个存储单元内的最小、最大值

• 扫描前确认数据是否在Min-Max区间内，判断是否进去扫描

44

HDFS Data Node

HDFS Data Node

HDFS Name Node

Hive metadata

HDFS Data Node

HDFS Data Node

“Blocks”

Min Max

Min Max

Min Max


Scan less data, move less data

Massive Speed-up of SQL on Hadoop

45


Data lives in even more places

46

Relational Hadoop

SQL

NoSQL

And more…

Single View of All Data Single View of All Metadata Full Power of Oracle SQL Best Aggregate Performance

+ No Changes to Application Code No Changes to Hadoop and NoSQL


Oracle Big Data Management System

One fast SQL query , on all your data.

Oracle SQL on Hadoop and beyond, with a Smart Scan service as in Exadata and the security and certainty of Oracle

Database


Exadata Big Data Appliance Exalytics

Oracle 面向大数据的集成解决方案体系

获取组织分析

In-D

atab

ase

An

alyt

ics

Data Warehouse

Hadoop (MapReduce)

Oracle R.

Oracle R Connector for Hadoop

Oracle Loader for Hadoop

Analytic

Application

s

Alerts, Dashboards, MD-Analysis,

Reports, Query Web Services BI Abstraction

HDFS

Applications

Oracle NoSQL Database

Oracle Data Integrator

Big Data Appliance

Exadata Exalytics

Oracle Adv. Analytics

(ODM & ORE)

InfiniBand InfiniBand

Oracle Database

决策


Oracle大数据技术方案：传感器事件存储及处理 • 大规模传感器数据捕获和分析

客户挑战

解决方案

客户收益

•提高数据存储的可扩展性 •提供更高并发性的分析数据访问 •独立于分析的大规模的数据加载 •为关键任务系统提供商业化支持

•Oracle NoSQL数据库的高速存储和基于范围提取的时间序列数据

•敏捷架构的Oracle NoSQL数据库用于替换HDF5存储格式，持续分析的客户端程序

•Oracle Bigdata大数据一体机的高效可管理性和最低的TCO

•Hadoop的后续处理和RDBMS连接到企业系统

•提高飞行试验传感器数据的存储规模 •增加分析数据访问的并发性 •通过允许同步进行数据的获取和分析来提高系统分析功能的可用性

Big Data Appliance

NoSQL DB Driver

Event Ingestion and Extraction

NoSQLDB/ Oracle RDBMS

Hadoop/ Oracle RDBMS

Oracle 或任意第三方的 SQL/Data Analytics

Tools


Toyota 丰田汽车提升质量和客户关怀

目标

提升汽车质量

建立每个客户的360度视图

方案

通过下一代车载遥测系统采集车辆数据，用于预测和关联汽车部件的故障

从社交网站、调研和代理商的交互过程中获得用户经验和情感的更深洞察

采用BDA处理车载数据并输入到Endeca做分析

- Toyota Global Vision

“Through our commitment to quality, constant innovation and respect for the planet, we aim to exceed expectations and be rewarded with a smile.”

BDA Endeca

Capture & Process

Discovery

Oracle INTERNAL Use Only

Telemetry

Social Media

Dealer


会议议程

Oracle公司战略




1

2

3

4



CIO的思考

• 关系数据库是否被取代？

• 采用Hadoop + NoSQL是提升查询和检索能力的最佳的选择吗？

• 采用开源的关系型数据库诸如MySQL是否更节省成本？



最大的SaaS软件及服务商采用Oracle 作为SaaS的标准化运行平台

• Salesforce.com 将会以Oracle数据库和Exadata作为标准化的部署平台 - June 25, 2013, CRN

• “这个世界上没有比Oracle更好的数据库产品，在结合了Exadata之后，它们共同为我们提供了最低的成本，最佳的性能，同时提供了最高的安全性。 ” - Marc Benioff, CEO, Salesforce

• Oracle自己的融合应用云服务也完全以Exadata作为标准的运行支撑平台

• Internet的发源地乃至全球都没有去IOE的话题


Google发现了什么

• 互联网公司引领大数据趋势-MapReduce (2004, Google), Hadoop (2005, Yahoo!)

• 处理相关一致性也是非常困难；交易要求从失败中恢复并且隔离并发的操作

• 摘自 Google, VLDB 2013：我们的业务逻辑在没有SQL查询的能力下无法工作，Nosql 无法代替原有的Mysql，作为替代, 我们构造了F1, 一个分布式关系型数据库系统

• MapReduceMysqlF1 技术路线，需要云化扩展性的妥协


互联网公司信息化 • 互联网企业业务主要数据类型 –非结构化

–价值密度不高

–适合Hadoop,Nosql特点

• 互联网企业业务特性 –分散性，系统可靠性、事物一致性要求不高

–可以利用大量人工通过分库、采用开源技术实现。

• 互联网企业最核心系统也采用Oracle数据库技术。 –开源技术和成熟企业级商业软件互为补充

–集团ERP、支付等高可靠性领域，采用Oracle数据库、Oracle EBS等成熟企业级商业软件。



企业核心应用

电商前端交易

搜索、社交

Web日志分析

传统IOE 集中式数据库

MySQL+ Sharding+x86

NoSQL+x86 HDFS+ Mapreduce+x86

数据特点

数据结构结构化为主，模式固定

结构化为主，模式固定

半/非结构化，模式灵活

半/非结构化，任意模式

数据量通常在TB及PB 通过分片扩展至PB PB级支持 PB级支持

数据密度高密度高密度低密度低密度

数据关系关系复杂关系较简单关系简单关系简单

应用/访问特点

并发高高高低

实时性高高高弱

负载类型混合型混合性随机访问分析型

事务与一致性强强弱弱

索引能力强较强一般弱

并行能力较强一般强强

代表应用：

不同的技术适用于不同的市场和访问特点


成本结构分析

重新编译版本核心

定制化开发与测试

部署上线

运维

大规模专家团队

稳定性风险

可靠性风险

运维运维成本OPEX

建设成本 CAPEX

授权

封闭性风险

基于开源的定制化系统 Oracle DB

对于绝大多数企业来说，从长远来看，Oracle DB具有

更好的总体拥有成本

所谓迁移其实是成本的转移，从初始的采购成本到后期的运维、开发、升级成本,长期成本看换成Mysql的成本会大于采用Oracle的成本


传统企业信息化需求 • 业务需求对IT要求： –稳定性、安全性，关系到整个企业的关键业务、核心系统以及服务支持

–需要高度灵活、易于扩展、高可靠、高度安全的IT架构支撑其企业快速转型

–利用大量工程师进行大量分库、依赖开源系统大量开发建设的系统，其灵活性、可靠性等无法满足其业务转型要求

– IT不是他们的核心业务，更无法能承担上万名开发人员的成本

• 借助IT来帮助企业全面拥抱移动和互联网化时代，推动传统业务的持续发展和突破

• Exadata能够提供高性能和高可用性的业务运行环境，同时从整体上帮助客户节省成本，加快应用上线进度，简化应用架构和管理，在全球获得了极大的成功



甲骨文创新助力政府企业信息化


• 工程化设计极限性能、简化管理、降低成本

• 全面的云计算解决方案，数据库云平台DBaaS, Exadata, EM12C,DB12C Multitenent

• Oracle完整的大数据解决方案

• 冷静思考选择企业信息化

oracle it · •vm的可扩展性限制于单个物理机，不能满足核心业务系统需求...

Documents