Data Center Design Standards and Concepts-2014-10 SP

DISEO DE CENTROS DE DATOS
Data Center College
DISEO DE CENTRO DE DATOS - AGENDA
Tendencias Tecnolgicas y de la Industria para Centros de Datos

Tipos de Centro de Datos por Operacin
Estndares
ANSI/TIA
ANSI/BICSI
ISO/IEC
CENELEC
Tecnologas de Red en Salas de Cmputo

Arquitecturas de Cableado
Gestin y Monitoreo de la Infraestructura

Tendencias de Arquitectura en Salas de Cmputo
Conclusiones
Proprietary 2014 Anixter Inc.
TENDENCIAS TECNOLGICAS Y DE LA INDUSTRIA

PARA CENTROS DE DATOS
TRFICO POR DESTINOS

EN CENTROS DE DATOS
Data Centerto-Data Center
7%
Data Centerto-User
17%
Within Data
Center
76%
Data Center-to-Data Center
Data Center-to-User
Within Data Center
Replication,
inter-database links
Web, email, internal

VoD, WebEx, etc.
Storage, production
and development
data, authentication
Source: Cisco
VoD: Video on Demand
ESTNDARES DE CABLEADO
X86 Servers by Ethernet Connection Speed (2012 Pronstico)

Basado en IDC, Dell Oro, Crehan Research e Intel data en el perodo 2H11 1Q12
16
40 GbE
Free
Current Forecastsurely accurate

14
40 GbE
Performance
12
FRINGE
Usuarios que exigen la mayor
parte del ancho de banda
10
PERFORMANCE
Los usuarios demandan
ms rendimiento de I/O
debido a la virtualizacin
FREE
Compradores de servidores
que slo implementan
lo que se ofrece como la
configuracin bsica
100M
1G
10G
40G
2020
2019
2018
2017
2016
2015
2014
2013
2012
2011
2010
2009
2008
2007
2006
2005
2004
2003
2002
2001
0
2000
Millions of server units
40 GbE
Fringe
100G
INFRAESTRUTURA DEL SISTEMA DE CABLEADO

PARA CENTROS DE DATOS
Server-class Adapter & LOM

40 GbE Shipments
Ports in Millions
2017
2016
2015
2014
2013
2012
40 GbE sobre fibra multimodo

Usa 8 fibras:
4 x 10 Gbps Tx y Rx
OM3 = 110 metros
OM4 = 150 metros
CREHAN RESEARCH Inc.
Source: IEEE 802.3 Working Group

LOM=Lan on Motherboard
IMPLEMENTACIONES ETHERNET A100GBPS
Actualmente el estndar de la IEEE especifica 10 x 10Gbps para Tx y Rx

sobre fibra OM3 / OM4 (20 fibras)
Migracin para 100GbE sobre fibra multimodo se ver mejorado sobre

cuatro enlaces (8 fibras) desarrollados en fibra multimodo
4 x 25Gbps para Tx/Rx an en desarrollo por la IEEE 802.3bm
100GBASE-SR4
Hasta 100 metros sobre fibra OM4
El estndar apunta a salir para el Q1 del 2015
Cuatro enlaces para 100GbE significa que NO hay cambios en la

infraestructura de cableado del centro de datos para 40GbE
400GBPS ETHERNET EST EN EL HORIZONTE
La necesidad est siendo

impulsada por la informtica en
todos los mercados:
Ciencia:
CERN Atlas Detector
Generates ~ 1 petabyte/sec
Radio Telescopio SKA (Square
Kilometer Array) 2
petabytes/sec
Secuenciacin del genoma
La ciencias de redes y energa
esperan 100 petabytes/mes de
datos para el 2015
Usos financieros en las redes
Mas:
Usuarios, mviles, video, data,
aplicaciones
Source: IEEE 802.3 Ethernet Working Group
1 petabyte = 1015 bytes
400GBPS ETHERNET EST EN EL HORIZONTE
IEEE estableci un grupo de estudio para 400Gbps Ethernet (Marzo, 2013)

Objectivo: Al menos 100 metros sobre OM4
IEEE estima que un estndar para 400 GbE puede estar listo para el 2017
IEEE 802.3 Pronstico de agregacin de ancho de banda (bandwidth

aggregation)
Capacidad 2015 = 10x requerimientos del 2010 = Terabit
Capacidad 2020 = 100x requerimientos del 2010 = 10 Terabit
Source: IEEE 802.3 Ethernet Working Group
PRINCIPALES PREOCUPACIONES URGENTES PARA

OPERADORES DE CENTROS DE DATOS DE MID-MARKET
Conectividad de centros de datos (82%)

Disponibilidad de carrier, densidad
Dsiponibilidad y Resiliencia del Centro de Datos (80%)

Potencia, espacio, refrigeracin, conectividad
Control sobre las instalaciones (78%)

Acceso a la nube (75%)
De las empresas investigadas:

53% necesitan +2000 sq. ft. de espacio en centros de datos
41% tiene al menos 4 centros de datos
88% estn planeando expandirse dentro de 4 aos
Source: Forrester Research,

US Firms< US$500M Revenue, 2014
10
INFRAESTRUCTURA EN GRADO DE UTILIDAD

PARA CAPACIDADES FUTURAS
Cualidades de los productos para empresa de servicios pblicos
Construidos para capacidad futura no solo hoy

Diseados para especificaciones de rendimiento robusto mas all del estndar
Diseados para alto grado de confiabilidad
Minimiza el downtime (tiempo de inactividad) por fallas o cortes de
mantenimiento
La Infrastructura de los centros de datos deben cumplir un rendimiento con

grado de empresa de servicios con confiabilidad y resistencia al futuro
Debido a la ley de Moore: Nada en Tecnologas de la informacin est a
prueba del futuro!
Las cuatro empresas de
servicios pblicos
Energa
Agua
Gas
Comunicaciones
11
TIPOS DE CENTROS DE DATOS

POR OPERACIN
CENTROS DE DATOS TRADICIONALES

USUARIOS FINALES
Operado por el propietario

Nivel empresarial
Varios tamaos
Varios niveles de Tecnologa
Requerimientos constantes de crecimiento
Los tipos de Centros de Datos estn Evolucionando de Acuerdo a las

Tecnologas y las Necesidades de los Cambios Organizacionales
13
MULTI-TENANT DATA CENTERS (MTDC)
Multi-tenant data centers son instalaciones de

multiples clientes que normalmente son propiedad de
empresas que se especializan en la prestacin de
servicios de infraestructura de internet, incluidos los
servicios del centro de datos a los clientes.
De acuerdo a datacenterknowledge.com,
actualmente hay 986 centros de datos en los Estados
Unidos ofreciendo servicios de Collocation y varios
servicios de hosting.
Cuatro tipos de MTDCs
Wholesale
Colocation/retail
Interconnection
Managed hosting
14
MTDC - WHOLESALE DATA CENTERS
Se ofrecen en PODs o celulas. Los tamaos van desde 10,000 50,000

pies cuadrados (930 4640 m2)
Se vende tanto a empresas como a proveedores de servicios Collocation
Normalmente proporcionan servicios de guardias de seguridad y
mantenimiento de alarmas de incendio, seguridad, generador, climatizacin
y sistemas de UPS.
Proveen tanto servicios a la medida como la opcin de alquiler-venta
(leasing) de las instalaciones del centro de datos
Ejemplos de MTDC tipo wholesale:
Digital realty
DuPont Fabros
Coresite
15
MTDC - COLLOCATION OR
RETAIL DATA CENTERS
El espacio del centro de datos se vende sobre la base

de los distintos racks, gabinetes o jaulas
Normalmente los clientes de proveedores de
Collocation son:
Empresas Fortune 1000

SMBs
Proveedores de aplicaciones de Internet
Proveedores de contenido de Internet y redes sociales
Proveedores de Managed hosting
Operadores de Telecomunicaciones
Sistema completo de instalacin y mantenimiento

incluyen extincin de incendio, seguridad, respaldo de
energa y climatizacin
Tambin se incluyen acceso y monitoreo remoto
16
MTDC - INTERCONNECTION DATA CENTERS
El alto volumen de trfico de Internet est obligando a las redes y a los

usuarios finales a colocar su contenido en, o alrededor de, las instalaciones
de interconexin, que proporcionan acceso a un trnsito de Internet
econmico
Servicios incluidos:
Compra de conectividad de Internet
Conexin de redes de VoIP
Realizacin de e-commerce B2B
Ejemplos
Equinix
Telx
Interxion
17
MTDC - MANAGED HOSTING DATA CENTERS
El hardware del servidor gestionado puede

ser propiedad del proveedor de hosting o
del cliente
Servicios incluidos:
Administracin de los sistemas
Administracin de la base de datos
Gestin de las aplicaciones
Ejemplos
i/o Data Centers

The Planet
Horizon
Peak 10
18
ESTNDARES DE DISEO
ESTNDARES RELEVANTES
ANSI/TIA-942-A (2012) Estndar de Infraestructura de

Telecommunicaciones para Centros de Datos
ANSI/BICSI-002 (2014) Diseo de Centros de Datos e Implementacin
de Buenas Prcticas
ISO/IEC FDIS 24764 (2010) Sistemas de Cableado Genrico para Centros
de Datos
CENELEC EN50600 Centros de Datos Instalaciones e
Infraestructuras
En desarrollo
21
ESTNDAR AMPLIAMENTE RECONOCIDO
22
ANSI/TIA-942-A DATA CENTER

DEFINICIN Y ELEMENTOS DE DISEO
Data Center Un edificio o parte de

un edificio cuya funcin primaria es
albergar un Cuarto de Cmputo y sus
reas de soporte; usualmente contiene
servidores y productos de
almacenamiento para funciones de
misin crtica
Elementos del Data Center
Diseo y planificacin del espacio
Fuente de alimentacin y distribucin
elctrica.
Gestin trmica
Iluminacin
Conectividad
Rutas y Hardware de soporte
Puesta a tierra
Seguridad Fsica
23
ANSI/TIA-942-A (2012) Telecommunications

Infrastructure Standard for Data Centers
El propsito de este estndar es proporcionar los

requisitos y directrices para el diseo y la instalacin del
centro de datos o cuarto de cmputo
Los centros de datos se pueden beneficiar de la
infraestructura que se planea con anticipacin para
soportar el crecimiento y los cambios en los sistemas
informticos que los centros de datos estn diseados
para soportar.
ANSI/TIA-942-A Standard is available from Global Documents (www.global.ihs.com )
24
TIA-942-A DATA CENTER BSICO

TOPOLOGA DE CABLEADO
ACCESS PROVIDERS
ACCESS PROVIDERS
Entrance Room
(Carrier equipment &
demarcation)
Work areas in offices,

operations center,
support rooms
Backbone cabling
Horizontal cabling
TR
(Office & operations
center LAN switches)
Backbone
cabling
Computer
Room
MDA
(Routers, backbone
LAN/SAN switches,
PBX, M13 muxes)
Backbone cabling
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
ZDA
Horizontal cabling
EDA
(Rack/cabinet)
HDA
(LAN/SAN/KVM
switches)
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
EDA
(Rack/cabinet)
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
EDA
(Rack/cabinet)
Horizontal cabling
EDA
(Rack/cabinet)
Source: ANSI/TIA-942-A
MDA: Main Distribution Area

HDA: Horizontal Distribution Area
EDA: Equipment Distribution Area
25
TIA-942-A DATA CENTER REDUCIDO

ACCESS PROVIDERS
Horizontal cabling
MDA
(Carrier equipment,
demarcation, routers, backbone
LAN/SAN/KVM switches, PBX)
Computer
Room
Horizontal cabling

operations center,
support rooms
ZDA
Horizontal cabling
EDA
(rack/cabinet)
EDA
(rack/cabinet)
Consolidation of main cross-connect and horizontal cross-connect into a single MDA

TR serving the support areas and the Entrance Room many also be consolidated in the MDA
26
TIA-942-A DATA CENTER DISTRIBUIDO

ACCESS PROVIDERS
operations center,
support rooms
Primary Entrance
Room
demarcation)
Secondary Entrance
Room
demarcation)
Backbone cabling
Horizontal cabling
TR
(Office & operations
center LAN switches)
ACCESS PROVIDERS
Backbone
cabling
MDA
(Routers, backbone
LAN/SAN switches,
PBX, M13 muxes)
Backbone cabling
Backbone cabling
Backbone cabling
IDA
(LAN/SAN switches)
Computer Room
IDA
(LAN/SAN Switches)
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
ZDA
Horizontal cabling
EDA
(Rack/cabinet)
Backbone cabling
Backbone cabling
HDA
(LAN/SAN/KVM
switches)
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
EDA
(Rack/cabinet)
Horizontal cabling
Backbone cabling
HDA
(LAN/SAN/KVM
switches)
Backbone cabling
HDA
(LAN/SAN/KVM
switches)
Horizontal cabling
ZDA
Horizontal cabling
EDA
(Rack/cabinet)
EDA
(Rack/cabinet)
Horizontal cabling
EDA
(Rack/cabinet)
IDA: Intermediate Distribution Area
27
TIA-942-A EFICIENCIA ENERGTICA

RECOMENDACIONES
Cableado por encima de los gabinetes puede mejorar la eficiencia de

enfriamiento y es una buena prctica siempre y cuando la altura del techo
lo permita.
Si el cableado es instalado bajo piso tcnico:
Utilice diseos de cableado y de red que minimicen el uso de cableado bajo piso tcnico
Seleccione cables con dimetros ms pequeos para reducir al mnimo el volumen de cable
bajo piso
Disee rutas de cableado de tal manera que minimice el impacto del flujo de aire debajo del
piso tcnico.
Disee rutas de cableado a las filas de tal manera que las rutas de cableado entren por el
pasillo caliente en direccin opuesta a la alimentacin de flujo de aire (es decir, el mximo
volumen de cables entra por el pasillo caliente en el extremo opuesto del CRAC con menor
distribucin de cables cuando se aproxima al CRAC)
Dimensione las rutas y los espacios para acomodar los cables de forma tal que ocasionen la
mnima obstruccin posible
28
TIA-942-A EFICIENCIA ENERGTICA

RECOMENDACIONES
El cableado dentro de gabinetes, racks, etc., no debe obstaculizar la

correcta refrigeracin de los equipos dentro de los gabinetes.
Se debe mantener el flujo de aire suficiente indicado en las especificaciones de
los equipos por los fabricante.
Deben establecerse procedimientos de manejo de cambios de cableado

que incluyan la eliminacin de cables abandonados de acuerdo con el NEC
(o la normativa jurdica que aplica en cada pas).
El cableado bajo el piso falso no debe colocarse bajo de las baldosas
perforadas o en cualquier lugar que interrumpa el flujo de aire hacia o
desde los CRAC.
Los PDU deben permitir el monitoreo de los niveles de energa
Use esquemas de iluminacin de bajo consumo
Evite las ventanas exteriores y tragaluces en las salas de cmputo
29
TIA-942-A UBICACION DEL PASILLO FRO Y CALIENTE
ANSI/TIA-942-A distancias
recomendadas:
Front
Cabinets
Frente: recomendado: 4 pies (1.2 metros)

(mnimo 3 pies=1m)
Atrs: recomendado: 3 pies=1m (mnimo
2 pies=60 cm)
This Row of Tiles

Can Be Lifted
.
Align Front or Rear of Cabinets
El cableado de potencia, si va bajo piso
with Edge of Floor Tiles
This Row of Tiles Can Be Lifted
falso, debe estar en el pasillo fro sobre
la losa
This Row of Tiles Can Be Lifted
Front or Rear of Cabinets
El cableado de telecomunicaciones, si Align
with Edge of Floor Tiles
va bajo el piso falso, debe estar ubicado
en bandejas de cables en el pasillo
caliente.
Rear
HOT AISLE
(Rear of Cabinets)
Rear
Cabinets
Front
COLD AISLE
(Front of Cabinets)
Front
Cabinets
Rear
30
TIA-942-A DATA CENTER

INFRAESTRUCTURA TIERS
El anexo incluye detalles para los cuatro Tiers en las siguientes categoras:
Telecomunicaciones
Elctrica
Architectura
Mecnica
A medida que el Tier es mayor, El DC es ms redundante, pero esto implica

que las construcciones son mas costosas.
La calificacin general Tier del centro de datos se determina por el nmero de
Tier de menor categora
ejem., T2E3A4M3 = Centro de datos Tier 2 total
En el ejemplo anterior, la calificacin general sera un nivel 2 porque las
telecomunicaciones tiene una clasificacin de Nivel 2
Se recomienda comprar el documento de la TIA-942-A para su revisin

completa de la estructura de los Tier
Disponible en: http://www.global.ihs.com
31
TIA-942-A DATA CENTER

REDUNDANCIA EN RUTAS DE CABLEADO Y ESPACIOS
Least Redundant
|
|
Most Redundant
32
ESTNDARES DE DISEO
33
ANSI/BICSI-002 (2011) Data Center Design

and Implementation Best Practices
Este estndar proporciona las mejores prcticas y

mtodos de implementacin que complementan la TIA,
CENELEC, ISO y otras publicaciones como estndares y
documentos de centros de datos. Se trata principalmente
de un estndar de diseo, con los requisitos de instalacin
y directrices para los centros de datos
Source: ANSI/BICSI-002-2011
ANSI/BICSI-002 Standard is available from Global Documents (www.global.ihs.com ) or from BICSI (www.bicsi.org)
34
CENELEC (en francs Comit Europen de Normalisation Electrotechnique)
ANSI/BICSI-002 TEMAS CUBIERTOS
Planificacin del espacio
Seleccin del site
Planificacin arquitectnica
Edificios (BAS)
Infraestructura de
telecomunicaciones
Planificacin estructural
Recuperacin de desastres
Sistemas elctricos
Sistemas mecnicos
Comunicaciones y Megafona
(voceo)
Proteccin contra fuego
Diseo de la sala de cmputo
Seguridad fsica
Sistemas de Automatizacin de
Commissioning (puesta en
marcha)
Mantenimiento
35
ANSI/BICSI-002 DATOS DE PLANIFICACIN DEL SITE
Datos Incluidos para estudio de planificacin de la ubicacin
Mapa de riesgo de temblores terrestres

Mapa de riesgo volcnico
Mapa de derrumbes
Mapas de regiones de agua y tipos acuferos
Mapa de actividades de huracanes
Mapa de riesgos de tornados
Mapas de reas con antecedentes de inundaciones.
36
ANSI/BICSI-002 ALCANCES DE LA SEGURIDAD FSICA
Evaluacin de amenazas y riesgos
Requerimientos regulatorios y
legislacin
Videoseguridad
Barreras
Iluminacin
Prevencin del crimen mediante el

diseo ambiental
Controles de acceso
Alarmas
Guardias (vigilantes)
Recuperacin de desastres
37
ANSI/BICSI-002 COMMISSIONING
Commissioning es el proceso de garantizar que los

sistemas sean diseados, instalados, funcionalmente
probados y capaces de ser operados y mantenidos de
acuerdo a la intencin de diseo del propietario y a las
necesidades operacionales.
Hoy en da el commissioning se ha convertido en un

importante proceso de control de calidad que abarca todo
el edificio o centro de datos.
38
ANSI/BICSI-002 SISTEMAS QUE DEBEN INCLUIRSE

EN LOS PROCESOS DEL COMMISSIONING
Elctrico
HVAC
Automatizacin del edificio
Monitoreo del edificio
Supresin y proteccin de fuegos
Seguridad fsica
Infraestructura de TI incluyendo
rutas y espacios
Puesta a tierra
Bombeo de combustible
Monitoreo de inventario
Deteccin de fugas de lquidos
Cumplimiento de los cdigos y
ordenanzas
39
GLOBAL DESIGN STANDARDS
40
ISO/IEC 24764 (2010) Generic cabling

systems for data centres
El estndar internacional especifica cableado genrico

que soporta una amplia gama de servicios de
comunicaciones para su uso con un centro de datos.
Cubre cableado balanceado y cableado de fibra ptica. ...
Se basa y hace referencia a los requisitos del estndar ISO
/ IEC 11801.
... Contiene requisitos adicionales que son? Adecuado a
los centros de datos en donde la distancia mxima es de
2000 m
Source: ISO/IEC 24764 (2010)
ISO/IEC 24764 Standard is available from Global Documents (www.global.ihs.com)

41
ISO/IEC 24764 (2010) Generic cabling

systems for data centres
. Dentro de las instalaciones, la importancia de la

infraestructura de cableado es similar a la de los otros
servicios pblicos (utilities) fundamentales del edificio
tales como calefaccin, iluminacin y electricidad. ... La
mala calidad de servicio debido a la falta de previsin de
diseo, uso de componentes inapropiados, instalacin
incorrecta, mala administracin o el soporte inadecuado
pueden amenazar la efectividad de una organizacin.
42
ISO/IEC 24764 (2010) ESTRUCTURA GENERAL
ENI
MD
ZD
LDP
EO
EQP
Distributor in
accordance with
ISO/IEC 11801
Network
access
cabling
subsystem
Main distribution
cabling subsystem
Zone distribution
cabling subsystem
Equipment
cabling
Generic cabling system
ENI = External network interface

MD = Main distributor
ZD = Zone distributor
LDP = Local distribution point
EO = Equipment outlet
43
ISO/IEC 24764 (2010) JERARQUA
ENI
ENI
Distributor in
accordance with
ISO/IEC 11801
Optional cables
Network access
cabling subsystem
MD
ZD
ZD
LDP
LDP
EO
EO
Main distribution
cabling subsystem
EO
EO
LDP
EO
EO
EO
Zone distribution
cabling subsystem
LDP
EO
EO
EO
NOTE: Network access cabling is also used to connect ENI to ZD

44
ISO/IEC 24764 (2010) JERARQUA CON REDUNDANCIA
ENI
ENI
MD
MD
ZD
ZD
LDP
LDP
It is important to note that in

order to achieve true
redundancy, the redundant
cable paths must have
separate pathway routes.
Distributor in
accordance with
ISO/IEC 11801
EO
EO
EO
EO
EO
EO
EO
EO
EO
EO
EO
EO
NOTE: Additionally, redundancy may be provided by utilizing multiple cables between distributors, with cables following different routes.

45
TECNOLOGAS DE RED EN LA SALA DE CMPUTO
CENTRO DE DATOS
TENDENCIAS ELECTRNICAS
Consolidacin de servidores y de
almacenamiento mediante la
virtualizacin
Requieren menos servidores fsicos
(menos hardware)
Aumento de los requerimientos de
ancho de banda en la red
Aumenta la densidad de potencia
Requieren enfriamiento de precision
dirigido a pequeas reas
Unified Fabrics
Consolidacin de protocolos LAN
y SAN desiguales sobre un solo
protocolo Ethernet
Simplificar la gestin de red de los
centros de datos
47
VIRTUALIZACIN
UNIDADES DE RED CON ANCHO DE BANDA
OS+App
OS+App
OS+App
OS+App
OS+App
OS+App
OS+App
OS+App
OS+App
Hypervisor
OS+App
OS+App
OS+AppHypervisor
OS+App
OS+App
OS+App
Hypervisor
Hypervisor
Hypervisor
Server
200500 Mbps
Server
200500 Mbps
Server
200500 Mbps
Hypervisor
Server
Server
200500 MbpsServer200500 Mbps
25 Gbps
48
TIA-942 DIRECT CONNECT

ARQUITECTURA CENTRALIZADA
Pro
Electrnica con costos menores que las
arquitecturas distribuidas
Fcil de disear, implementar y
mantener
Minimiza el cuello de botella de la red
Buena utilizacin del puerto del switch
Fcil gestin de dispositivos
Contra
Mayor nmero de cables
(predomina el uso de cobre)
Sobreposicin de cables para
redundancia
Diseo con dificultades en las rutas de
cables
Falta de escalabilidad
Red denotes Network Equipment

Blue denotes Server Equipment
Source: Anixter
49
ARQUITECTURA END-OF-ROW Y MIDDLE-OF-ROW
Pros
Menor cantidad de cables que la
arquitectura centralizada de switching
Hay mas uso de fibra que en la
arquitectura centralizada de switching
Buena escalabilidad
Es ms costo efectiva que la arquitectura
top of rack (ToR)
Contras
Mayor inversin de capital en switches
end of row (EoR) y middle of row (MoR)
Aumento de gastos generales de gestin
debido a la mayor cantidad de switches
Riesgos en la estabilidad de la red
debido al potencial aumento del nmero
de puntos de falla en la electrnica

Source: Anixter
50
ARQUITECTURA TOP-OF-RACK
Pro
Uso mas eficiente del cable.

Uso eficiente del rea de piso.
Buena escalabilidad.
Fcil administracin de cables.
Contra
Ms switches para administrar.
Mayor cantidad de puertos de agregacin.
Pobre utilizacin de puertos del switch si los
gabinetes estn parcialmente poblados.
Mas puertos de agregacin Spanning Tree
Protocol en los los dispositivos de agregacin.
Mayores costos potenciales en switches
Necesidad del segundo ToR switch
para redundancia.
Creacin de puntos calientes.

*NOTE: Most cost comparisons between traditional and
ToR network architecture do NOT take into account the
necessity of a second ToR switch to achieve
redundancy
Source: Anixter
51
CONSOLIDACIN DE SERVIDORES I/O USANDO CISCO UCS
All traffic goes

over 10Gig
twinax cabling
Cisco also has

10GBASE-T interfaces
Traditional server
Multiple interfaces
per server
Source: Cisco Systems
Cisco UCS
Consolidated to two
interfaces per server
FC HBA: Fibre Channel Host Bus Adapter: connects a host system (the computer) to other network and storage devices
IPC: Inter-Processor Communication
CNA: Converged Network Adapter
UCS: Unified Computing System
52
CISCO UCS PRO Y CONTRA
Pros
Consolidacin I/O.
Menor congestin de cables.
Contra
Aumento del hardware de red y los costos administrativos.
Pobre utilizacin de puertos/ asignacin.
Arquitectura Cisco Top of Rack no se ajusta al estndar tradicional de cableado
estructurado.
Es proprietario
SFP+ no est estandarizado por la IEEE o la TIA
Carece de flexiblidad
Necesidad de un segundo switch Top of Rack para redundancia
No es una solucin costo efectiva para administracin fuera de banda (out-ofband)
53
CABLEADO ESTRUCTURADO ESTANDARIZADO UTILIZANDO

10GBASE-T SOPORTA VIRTUALIZACIN Y UNIFIED FABRICS
Usa la interface fsica omnipresente RJ45

Cableado en categora 6A es retrocompatible con servidores existentes
habilitados para 10/100/1000BASE-T
Aplicacin independiente
Es mas rentable que SFP+ u otras alternativas pticas

Menor CAPEX total
Menor OPEX debido a menores consumos potenciales de energa que el uso de
switches ToR
Utiliza cableado estructurado estandarizado

Categora 6A para conexin de servidores
Cableado OM3/OM4 para backbone y conexiones SAN
54
CISCO BIDIRECTIONAL (BIDI) QSFP

TECNOLOGA DE FIBRA
Concepto de los transceptores de 40

Gbps existentes
Cisco QSFP-40G-Short Range-BiDi

40 Gbps Transceiver
Cisco QSFP BiDi fibra multimodo duplex

Tx y Rx a 832 nm y 918 nm de longitud de onda
Distancia: OM3 = 100 metros, OM4 = 150 metros
in order to achieve the 150 meter distance on OM4, Cisco requires the link
loss budget to be not greater that 1.0dB.
Es una opcin adicional para migrar a 40G Ethernet

NO es un estndar de la IEEE
Conserva la configuracin fsica de fibra dplex 10G por el momento

La configuracin de la fibra multimodo duplex no es probable que soporte
100G Ethernet en el futuro
Source: Cisco Systems
Quad Small Form-Factor Pluggable (QSFP)
55
ARQUITECTURA DE RED LEAF-SPINE
Un nuevo diseo para centros de datos

Cada leaf esta conectada a cada spine
El cobre es usado como enlace al servidor
Destinados a ser usados en los ToR o EoR

El cobre se usa por que es la opcin mas costo-efectiva
La fibra es usada de switch-to-switch
Ahora la mayora de uplinks requiren mdulos QSFP (BiDi or MPO/MTP)
Spine
Spine
Fiber
Leaf
Leaf
Leaf
Servers
Servers
Servers
Leaf
Leaf
Servers Servers
Leaf
Copper
Servers
Source: TIA High Performance Cabling Task Force

56
MONITOREO Y GESTION DE LA
INFRAESTRUCTURA
NETWORK TAPS ARE A SAN MONITORING

BEST PRACTICE
Traffic Access Points (TAPs)

Han sido ampliamente utilizados en redes IP por mas de 20 aos
Proporcionar acceso directo a todos los niveles de trfico de fibra
Derivan datos sobre rendimientos de SAN/storage, utilizacin y errores de
Tx
Son utilizados por todos los proveedores de sistemas y almacenamiento para
diagnosticar problemas.
Permite al personal de TI:
Asegurar alta disponibilidad de las aplicaciones
Maximizar el desempeo de las aplicaciones
Proactivamente encontrar problemas antes que los usuarios los
experimenten
Permite el uso de pruebas de SAN y analizadores de protocolos
59
MONITOREO DE REDES POR MEDIO DE PUERTOS DE FIBRA
Lo datos de la capa de red primero deben ser extrados en una de las dos
siguientes maneras con el fin de aplicar herramientas de anlisis
Analizadores del puerto del Switch (SPAN=switch port analyzer)
Puertos espejo (activo)
Puerto Tap (pasivo para pticas)
Qu buscamos con el monitoreo?

Amenazas de seguridad
Problemas de desempeo
Optimizacin (I/O cuellos de botella)
60
TAPS PTICOS PARA EXTRACIN DE DATOS
La mejor prctica es hacer planes para la utilizacin de mdulos de fibra TAP en la fase
de diseo de la arquitectura para la infraestructura de cableado en el centro de datos.
Source: Corning and Virtual Instruments
61
COMO LAS TENDENCIAS AFECTAN LA GESTIN DEL DC
Los centros de datos estn evolucionando

Anteriormente monoltico, un tamao nico para todo almacenamiento de TI
Hoy altamente optimizado y edificios transparentemente inteligentes
El mayor desafo es gestionar la infraestructura de TI y su ambiente

Problemas causados si no se gestiona apropiadamente
Implementacin tarda de aplicaciones
Gasto no planificado
Servicio interrumpido
Escasez o falta de recursos de energa, espacio y enfriamiento.
62
DATA CENTER INFRASTRUCTURE

MANAGEMENT (DCIM)
DCIM es una nueva forma de gestin de centros de datos que extiende los
sistemas tradicionales y de gestin de red para incluir componentes fsicos
y de nivel activo.
DCIM aprovecha la integracin de TI y la gestin de instalaciones para
centralizar el monitoreo, la gestin y la planificacin de la capacidad
inteligente de los sistemas crticos de un centro de datos.
Segn IDC, se espera que DCIM pueda crecer a nivel mundial en un tasa
de crecimiento anual compuesta (CAGR) del 22,8% en un mercado
potencial de 690,3 millones dlares para el ao 2016.
Soluciones DCIM son el paso crtico en ayuda a la transformacin de los
edificios transparentemente inteligentes y optimizados
DCIM an no est estandarizado, ni es una plataforma abierta; actualmente
requiere la eleccin de una solucin de un solo proveedor
63
FACTORES QUE IMPULSAN LA ADOPCION DEL DCIM
Aumento de potencia y densidad de calor.

Consolidacin del centro de datos.
Virtualizacin y Cloud computing.
Mayor dependencia organizacional en sistemas crticos de TI.
Seguimiento (rastreo) de activos.
Eficiencia energtica o iniciativas verdes de TI.
Principio orientador: Si algo no se mide o monitorea no se puede controlar.
64
MONITOREO MEJORES PRCTICAS
Monitorear y controlar el desempeo.

Herramientas de monitoreo para capturar el desempeo, la temperatura, la
humedad y energa en el centro de datos.
Medir temperaturas de los servidores en tiempo real.
Crear grficos histricos para tendencias.
Facturacin departamental basado en uso de energa en vez de espacio de
RU
3/11/2015
65
EFICIENCIA MEJORES PRACTICAS
Power Utilization Efficiency (PUE) = relacin de la potencia total que entra

en la instalacin dividido por la energa utilizada por los equipos de TI.
Una indicacin de la eficiencia ms precisa relaciona la potencia utilizada

con la cantidad de trabajo realizado
PUE: Power Usage Effectiveness
Building Load
Demand from grid
Total
Facility
Power
Power
Switchgear
UPS
Battery backup
Etc.
IT
Equipment
Power
IT Load
Servers
Storage
Telco equipment
Etc.
Cooling
Chillers
CRACs
Etc.
Source: The Green Grid
PUE= Total Facility Power

IT Equipment Power
66
Clculo del (PUE) requiere o bien un mtodo de medicin directa o una

aproximacin estimada guiados por clculos deductivos
Necesario para un enfoque de medicin directa:
Medicin de la potencia de entrada a las instalaciones de cmputo
Medicin separada de los subsistemas del edificio:
Iluminacin
HVAC
Circuitos de dispositivos no informticos
Medicin del consumo de energa de dispositivos informticos
Monitoreo del consumo de potencia del circuito derivado al PDU remoto y /
o monitoreo del consumo de energa del PDU a nivel del gabinete
Para un enfoque calculado, se hacen estimaciones deductivas:

El consumo de energa del subsistema del edificio basado en el rea
Consumo de energa del dispositivo informtico
El uso de PDU monitoreable es muy til y aumenta la precisin
67
Elimina la ezcla de aire caliente y fro
Emplea pasillos calientes y pasillos fros

Elimina las brechas en las filas
Use filas mas largas
Use gabinetes con paneles ciegos
Recortes para paso de cables sellados
HOT
AISLE
COLD
AISLE
HOT
AISLE
COLD
AISLE
68
Use las mejores tcnicas para el control de temperatura y distribucin del

flujo de aire
Oriente los CRAC perpendicularmente a los pasillos calientes
Iguale la suma del flujo de aire de los equipos de TI con el flujo de aire de
los CRAC
Uniformiice la presin esttica del aire, utilizando 0,8 - 1,0 m de altura en
piso tcnico , baldosas de ventilacin ajustables y no coloque baldosas
perforadas cerca del CRAC
69
EFICIENCIA
MEJORES PRCTICAS: USO DE ECONOMIZADORES
Chiller
Water side: use of outside

air to cool chilled water
Cooling Tower
CRAC(s)
Routing through Chiller
Bypassing Chiller
Air side: use of outside air

directly into data center
70
EFICIENCIA
GESTIN DE LA ELECTRNICA
Servidores virtuales, consolidacin y almacenamiento:

Virtualizacin de servidores
Por ejemplo: VMware y HyperV (Microsoft), etc.
Consolidacin de equipos utilice servidores blade en lugar de servidores
rackeables (comparten ventiladores y fuentes de alimentacin)
Utilice al aplicacin de administracin del CPU:

Optimice el consumo de energa basado en la utilizacin de la CPU
Reduzca los estados de energa del procesador cuando no es necesario el
mximo desempeo
Reduzca el consumo de energa sin comprometer la capacidad de
procesamiento
Almacenamiento:
Tiered utilice los drivers de alta velocidad nicamente cuando las
aplicaciones requieran de respuesta inmediata.
Consolidacin discos de gran tamao, velocidad lenta, uso ms eficiente
con volumen
71
SALA DE CMPUTO
TENDENCIAS DE ARQUITECTURA
DISEO LOSA VS. PISO TCNICO

CONSIDERACIONES CLAVE
Costo
Motivado por tamao.
Arquitectura de la sala.
Diseo y requerimientos de
energa/enfriamiento.
Flexibilidad.
Carga de piso.
Densidad.
Crecimiento.
No hay decisin correcta o equivocada.
Tanto la arquitectura de losa como la de
piso tcnico son viables, pero requieren
decidirse por una de ellas desde el
principio del proceso de diseo
Photo courtesy: APC
73
ARQUITECTURA DE CENTRO DE DATOS MODULAR
Uso de construcciones prefabricadas

A veces, pero no siempre en contenedores
Puede agregar puntos LEED al edificio
Implementacin rpida:
Reduce el tiempo de construccin (1012
meses)
El diseo permite la construccin simultnea
de subsistemas internos
Puede ser utilizado para modernizar

pequeos centros de datos en edificios
existentes.
Los contenedores puede ser usados como
espacios suplementarios, auxiliares, o para
recuperacin de desastres.
Es posible movilizar las instalaciones
Diagram courtesy: Emerson / Liebert

74
PROYECTO DE CMPUTO ABIERTO
Iniciado en Facebook ~2012

www.opencompute.org: es una fundacin que provee una estructura en la
cual los individuos y las organizaciones pueden compartir su propiedad
intelectual
Objetivo: construir la infraestructura informtica ms eficiente al menor
costo posible
Desafiando los convencionalismos con un diseo desde cero.
Compartir tecnologas conforme evolucionan.
Hardware abierto: servidores, almacenaje, rack, networking

Especificaciones y dibujos mecnicos liberados al pblico
Trabajar con la comunidad para mejorarlos
Diseo del centro de datos

Maximiza el desempeo mecnico as como la eficiencia trmica y energtica
Resultado: el data center es 38% ms eficientes y 24% ms econmico

que los data centers ms modernos.
Source: Opencompute.org
75
SOFTWARE DEFINED NETWORKING (SDN)
Evolucion a partir del trabajo realizado en la Universidad de Berkeley y la Universidad de

Stanford en 2008
Pregunta original: Cmo pueden los investigadores en los campus universitarios probar nuevas
ideas en una red real, a escala?
Es un estndar abierto desacopla la funcin de toma de decisiones de la red del sistema
subyacente que enva el trfico a su destino
La separacin fsica del plano de control de red del plano de envos y donde un plano de
control controla varios dispositivos
La toma de decisiones se realiza mediante un servidor independiente
Principalmente enfocado a la investigacin
www.opennetworking.org
SDN:
is a networking architecture that provides a capability to control or "define" network traffic flows, security policies, or
network topology by dinamically programming network devices.
The programming capability is centralized and hosted on one or a few standard servers knows as SDN controller which is
the brain of SDN network.
SDN is esentially network virtualization
SDN requires a robust physical infraestructure (cabling) and bandwith
76
RESTRUCTURACIN DE LA RED SDN
Feature
Feature
Network OS
Feature
Feature
Operating
System
Feature
Specialized Packet
Forwarding
Hardware
Feature
Feature
Operating
System
Specialized Packet
Forwarding
Hardware
Feature
Operating
System
Feature
Specialized Packet
Forwarding
Hardware
Feature
Operating
System
Feature
Feature
Specialized Packet
Forwarding
Hardware
Operating
System
Source: OpenFlow.org
Specialized Packet
Forwarding
Hardware
77
SOFTWARE DEFINED NETWORKING (SDN)

3. Well-defined open API
Feature
Feature
2. At least one Network OS

probably many.
Open- and closed-source
Network OS
1. Open interface to packet forwarding
Packet
Forwarding
Packet
Forwarding
Source: OpenFlow.org
Packet
Forwarding
Packet
Forwarding
Packet
Forwarding
78
CONCLUCIONES
El entorno del centro de datos sigue evolucionando

Los requerimientos de ancho de banda se incrementarn.
Sern necesarios sistemas de alta-densidad de energa y enfriamiento
Las instalaciones requerirn operaciones costo efectivas y eficientes.
La tecnologa sigue evolucionando en apoyo de nuevas aplicaciones para

centros de datos
Virtualizacin y cloud computing

Mayores tasas de transmisin de datos de las redes
Desempeo de la infraestructura de cableado
Sistemas eficientes de distribucin de energa y enfriamiento.
79
CONCLUSIONES
Anixter Data Center HealthCheckSM

El HealthCheck mira el entorno de un centro de datos y determina si se est
cumpliendo con los objetivos de rendimiento y eficiencia de la organizacin
Diseado para hacer frente a los obstculos y desafos comunes
El aumento del consumo de energa
La construccin de sistemas integrados
El aumento de ancho de banda
Centros de datos convergentes
Entornos virtualizados
Consltenos acerca de nuestro personalizado Data Center HealthCheck!
80
GRACIAS.
81

Data Center Design Standards and Concepts-2014-10 SP

Caricato da

Informazioni sul documento

Copyright

Formati disponibili

Condividi questo documento

Condividi o incorpora il documento

Opzioni di condivisione

Hai trovato utile questo documento?

Questo contenuto è inappropriato?

Copyright:

Formati disponibili

Data Center Design Standards and Concepts-2014-10 SP

Caricato da

Copyright:

Formati disponibili

DISEO DE CENTROS DE DATOS

Data Center College

DISEO DE CENTRO DE DATOS - AGENDA

Tendencias Tecnolgicas y de la Industria para Centros de Datos

Tecnologas de Red en Salas de Cmputo

Gestin y Monitoreo de la Infraestructura

Proprietary 2014 Anixter Inc.

TENDENCIAS TECNOLGICAS Y DE LA INDUSTRIA

TRFICO POR DESTINOS

Data Centerto-Data Center

Data Center-to-Data Center

Within Data Center

Web, email, internal

Proprietary 2014 Anixter Inc.

VoD: Video on Demand

X86 Servers by Ethernet Connection Speed (2012 Pronstico)

Current Forecastsurely accurate

Millions of server units

Proprietary 2014 Anixter Inc.

INFRAESTRUTURA DEL SISTEMA DE CABLEADO

Server-class Adapter & LOM

40 GbE sobre fibra multimodo

CREHAN RESEARCH Inc.

Source: IEEE 802.3 Working Group

Proprietary 2014 Anixter Inc.

IMPLEMENTACIONES ETHERNET A100GBPS

Actualmente el estndar de la IEEE especifica 10 x 10Gbps para Tx y Rx

Migracin para 100GbE sobre fibra multimodo se ver mejorado sobre

Cuatro enlaces para 100GbE significa que NO hay cambios en la

Proprietary 2014 Anixter Inc.

400GBPS ETHERNET EST EN EL HORIZONTE

La necesidad est siendo

Proprietary 2014 Anixter Inc.

400GBPS ETHERNET EST EN EL HORIZONTE

IEEE estableci un grupo de estudio para 400Gbps Ethernet (Marzo, 2013)

IEEE 802.3 Pronstico de agregacin de ancho de banda (bandwidth

Source: IEEE 802.3 Ethernet Working Group

Proprietary 2014 Anixter Inc.

PRINCIPALES PREOCUPACIONES URGENTES PARA

Conectividad de centros de datos (82%)

Dsiponibilidad y Resiliencia del Centro de Datos (80%)

Control sobre las instalaciones (78%)

De las empresas investigadas:

Source: Forrester Research,

INFRAESTRUCTURA EN GRADO DE UTILIDAD

Cualidades de los productos para empresa de servicios pblicos

Construidos para capacidad futura no solo hoy

La Infrastructura de los centros de datos deben cumplir un rendimiento con

Proprietary 2014 Anixter Inc.

TIPOS DE CENTROS DE DATOS

CENTROS DE DATOS TRADICIONALES

Operado por el propietario

Los tipos de Centros de Datos estn Evolucionando de Acuerdo a las

Proprietary 2014 Anixter Inc.

MULTI-TENANT DATA CENTERS (MTDC)

Multi-tenant data centers son instalaciones de

Proprietary 2014 Anixter Inc.

MTDC - WHOLESALE DATA CENTERS

Se ofrecen en PODs o celulas. Los tamaos van desde 10,000 50,000

Proprietary 2014 Anixter Inc.

El espacio del centro de datos se vende sobre la base

Empresas Fortune 1000

Sistema completo de instalacin y mantenimiento

Proprietary 2014 Anixter Inc.