RedIRIS JT2004

Red de 10 Gb/s de fibra oscura de la Universitat de

València

Jose Miguel FemeniaServei d’Informàtica

jose.m.femenia@uv.es

2 RedIRIS JT 2004

Sumario

La red de la Universitat de València

Proyecto de 10 Gb/s y Fibra Oscura Antecedentes Génesis y desarrollo del Proyecto Situación actual Evolución futura

3 RedIRIS JT 2004

Red de la Universitat de València

4.000 empleados, 50.000 alumnos.

3 grandes campus (90% de la universidad).

23 centros más pequeños (la mayoría en el área metropolitana de Valencia).

Necesidades en la red de datos: Incremento de conectividad, nuevos centros. Prestaciones muy elevadas, ubicuidad de

servidores.

4 RedIRIS JT 2004

Red de la Universitat de València Infraestructura de cableado estructurado F.O.

y UTP-5 Uso de diversas tecnologías de red:

Ethernet conmutada 10/100/1000/10000 Mb/s ATM 155/622 Mb/s Puentes inalámbricos 802.11b (11 Mb/s)

Red IP clase B: 147.156.xxx.xxx 54 VLANs, 125 subredes IP 74 routers, 622 conmutadores GE y 8

conmutadores 10GE + de 10.000 equipos en red local

5 RedIRIS JT 2004

Red de la Universitat de València

Heterogeneidad de equipos Clientes : Windows, MacInthos ( 500) y Linux

Correo: Linux/Sendmail/Postman (80.000 cuentas) Web: Linux/Apache B. de D. equipos de red en Postgres (control de IP’s) Supercomputador SGI 104 CPU’s (Itanium-2), 340 GB

RAM en Linux Red Hat (2004) Mainframe z890 IBM tecnología ‘on demand’ (2004) Disco compartido sobre SMB.

6 RedIRIS JT 2004

Red U. Valencia (1996)

E3 (34 Mb/s)

STM-1 (155 Mb/s)

10BASE-TX

100BASE-TX/FX

LANE(datos) NaranjosBurjassot

Blasco Ibáñez

7 RedIRIS JT 2004

Red U. Valencia (2003)

E1 (2 Mb/s)

STM-1 ( 155 Mb/s)

STM-4 (622 Mb/s)

100BASE-TX

1000BASE-LX/SX

LANE+CES(datos+voz)

Nave

Blasco Ibáñez

NaranjosBurjassot

8 RedIRIS JT 2004

Problemas de ATM/LANE

Eficiencia: rendimiento máximo 130 Mb/s Compatibilidad: algunos protocolos de

Ethernet no funcionan bajo LANE Complejidad: La configuración de los equipos

requiere una planificación minuciosa Costo: elevado (compra y mantenimiento) Obsolescencia: no aparecen productos

nuevos, tecnología estancada en 622 Mb/s Inestabilidad : Ocasionalmente. Difícil acotar

debido a los diferentes componentes (LECS, LES/BUS, LEC).

LANE integrada por 10 dispositivos (routers+conmutadores) y 6 hosts.

DATOS

9 RedIRIS JT 2004

Experiencia con ATM/CES

Mientras en datos se imponía una migración de ATM a Ethernet, el uso de CES (Emulacion de Circuitos) en telefonía se considera una solución aún válida :

Eficiencia: mayor que en LANE (y se requiere menor capacidad)

Compatibilidad: No hemos detectado problemas Complejidad: reducida Costo: en proporción menor que en LANE (las posibles

alternativas no son tan baratas) Fiabilidad: se aprovecha todas las posibilidades la

topología en anillo. La disponibilidad 99,99% ( ‘alta disponibilidad’), con el uso de PNNI + SoftPVCs.

Obsolescencia: sigue siendo un problema

TELEFONÍA

10 RedIRIS JT 2004

Novedades año 2000 Nuevos servicios de fibra oscura de operadoras

permite disponer de enlaces de fibra entre los tres campus.

Declive de ATM y el crecimiento de Ethernet en ámbito metropolitano hace cada vez más interesante evolucionar la red de datos hacia un entorno Ethernet puro, prescindiendo de ATM/LANE.

En cambio el uso de ATM/CES se considera aceptable para el servicio de telefonía, entre otras razones por el elevado costo de una migración a Telefonia IP

11 RedIRIS JT 2004

Opciones Con una nueva red de fibra se planteaba :

A) - Migrar sólo DATOS de ATM Ethernet y manteniendo TELEFONIA ATM . De dos formas :

1.-Duplicando el número de fibras utilizadas, o bien2.-Haciendo uso de WDM, para que pueda coexistir Ethernet

y ATM en la misma fibra (lambdas distintas)

B) – Migrar DATOS + TELEFONIA de ATM Ethernet. Aquí se planteaban a su vez dos posibilidades:

1.-Instalar multiplexores que encapsulan tramas E1 de telefonia en paquetes IP. No requiere cambio de centralitas

2.-Migrar a telefonía IP. Requiere una modificación grande de la red telefónica con importantes inversiones

12 RedIRIS JT 2004

Opciones (A-2)Burjassot

Blasco Ibáñez

NaranjosNaveE1

STM-1 (MM o SM)STM-4 (MM o SM)100BASE-T1000BASE-LX

ONS ONS

ONS

Fibra con WDM

Fibra oscura + DWDM (ATM + GE)

13 RedIRIS JT 2004

Opciones (B-1)Burjassot

Blasco Ibáñez

NaranjosNave

E1STM-1 (MM o SM)STM-4 (MM o SM)100BASE-T1000BASE-LX

IPmuxIPmux

IPmux

IPmux

Fibra oscura + GE + E1 IPmuxo bien, 10GE

14 RedIRIS JT 2004

Solución Una vez valoradas desde el punto de vista técnico

y económico las cuatro posibilidades se optó por :

Opcion A-1.-Duplicar el numero de fibras para mantener la telefonía en CES/ATM y datos en ethernet, en fibras independientes.

Esto no excluía la más que probable evolución hacia telefonía IP en el futuro, ni el uso de WDM para obtener un mayor rendimiento de las fibras.

DATOSVOZ

15 RedIRIS JT 2004

Propuesta de la nueva red A finales de 2002 la UV presenta al programa FEDER

dos propuestas de inversiones complementarias:

Superestructura de fibra óptica: La Universitat dispondría de fibra propia entre los tres campus

Infraestructura electrónica 10G: Adquirir el

equipamiento de routers y conmutadores de altas prestaciones que permita sacar máximo partido a la fibra óptica.

Ambas propuestas fueron aprobadas (Julio 2003). Los correspondientes concursos se convocaron y

adjudicaron a finales de 2003

16 RedIRIS JT 2004

Superestructura Fibra Óptica

Presupuesto: 480.000 euros Adquisición de fibra oscura a operadoras

considerado opción más viable y rentable Requisitos: tres enlaces de dos fibras cada unoRecibidas cinco ofertas:

COLT Inabensa Neo-Sky ONO Telefónica

Adjudicado a Neo-Sky: cuatro enlaces de cuatro fibras en topología de anillo, con pares por caminos físicos diferentes. Redundancia entre campus 98%. Garantía de servicio durante 15 años

17 RedIRIS JT 2004

4.042 m

5.159 m

10.963 m

18.620 mCampus

BurjassotCampusNaranjos

Edif. HistóricoC/Nave

CampusBlasco Ibáñez

Esquema red de fibra oscura

Caminos físicos completamente diferentes

Distancias máximas 10G:

Fibra monomodo 9/125 m

2ª ventana (10GBASE-LR): 10Km3ª ventana (10GBASE-ER): 40Km

18 RedIRIS JT 2004

Burjassot

Naranjos

BlascoIbáñez

Nave

Botánico

Magisterio

Centro conectado

Conexión en proyecto

Trazado de la red de fibra

19 RedIRIS JT 2004

CampusBurjassot

CampusBlasco Ibáñez

IVEF(Cheste)

CIDE(Albal)

Esc. Empresar.(Onteniente)

DepartamentoFisioterapia

EscuelaFisioterapia

Serv. Normaliz.Lingüística

Serv. Extens.Universitaria

CampusNaranjos

Edif. HistóricoC/Nave

Col. MayorRector Peset

INTRAS

JardínBotánico

Serv. Formac.Permanente

EscuelaMagisterio

ADSL(Túneles VPN)

Acceso Internet ADSL 2000/300 Kb/s

155 Mb/s2 Mb/s

512 Kb/s

11 Mb/s (802.11b)

ADEIT

ObservatorioLaboral

Centro deIdiomas

Esc. Magisterio(Onteniente)

RedIRIS

Lab. Psicol.Experimental

Fundac. Gral.Universidad

WAN de la U. Valencia (centros)

Escuela dePodología

10 Gb/s1 Gb/s

20 RedIRIS JT 2004

Infraestructura Electrónica 10G

Presupuesto: 600.000 euros Requisitos:

4 conmutadores 28 interfaces ethernet de 10 Gb/s 144 interfaces ethernet de 1 Gb/s

15 ofertas presentadas (todas con Cisco Catalyst 6500 con sup720)

Adjudicado a Nextira-One 8 conmutadores 52 interfaces de 10 Gb/s 246 interfaces ethernet 1 Gb/s

21 RedIRIS JT 2004

Instalación de un conmutador

Interfaces 10 Gb/s (XENPAK)

Cisco Catalyst 6509

Interfaces 1 Gb/s fibra (SFP)

Tarjeta supervisora (SUP720)

Fuentes de alimentación

Interfaces 1000BASE-T

Tarjeta cortafuegos

22 RedIRIS JT 2004

Ejecución del proyecto

Ambos concursos se desarrollaron de forma sincronizada y en paralelo.

23/12/2003: Adjudicación de los concursos.

20/5/2004: Nueva red 10G sobre fibra oscura operativa.

Resultado: R.A.P.I.D.A. Red de Altas Prestaciones Intercampus en

Doble Anillo

23 RedIRIS JT 2004

Red U. Valencia (2004)

E1 (2 Mb/s)

STM-1 ( 155 Mb/s)

STM-4 (622 Mb/s)

100BASE-TX

1000BASE-LX/SX

10GBASE-LX/SX

IP+CES

NaveBlasco Ibáñez

NaranjosBurjassot

24 RedIRIS JT 2004

Red U. Valencia (2004)

10GBASE TRUNK VLAN

10GBASE IP

Blasco Ibáñez

Burjassot

Naranjos

25 RedIRIS JT 2004

Fiabilidad Objetivo: Alta Disponibilidad en red troncal

(99,99%, <53 min. fuera de servicio al año) Medidas:

Salas acondicionadas para equipos principales. Alimentación diversificada (dobles fuente alim.) Stock propio de recambios para piezas clave. Monitorización continua de la red. Topología en anillo real (no colapsado) con

protocolos de routing apropiados : PNNI + Soft PVCs para CES E1 telefonía + Soft PVCs IP

datos EIGRP para datos a nivel 3 ST (Spanning Tree) para datos a nivel 2

26 RedIRIS JT 2004

Routing en anillos

Blasco Ibáñez

NaranjosBurjassot

Los protocolos de routing permiten redirigir el tráfico por una ruta alternativa en caso de fallo de algún enlace o

equipo. Siempre se elige la ruta mas rápida o más corta

1: Falla enlace 10G Naranjos-Blasco Ibáñez.El tráfico se reencamina por 10G Naranjos-Burjassot

2: Falla enlace 10G Naranjos-Burjassot.El tráfico se reencamina por ATM Naranjos-Blasco Ibáñez

3: Falla enlace ATM Naranjos-Blasco Ibáñez.El tráfico se reencamina por ATM Naranjos-Burjassot

4: Falla enlace ATM Naranjos-Burjassot.Se corta el servicio ( Naranjos aislado)

27 RedIRIS JT 2004

Proyectos de Futuro Ampliar la red de fibra oscura a nuevas

dependencias: ( Dic. 2004) Escuela de Magisterio Jardín Botánico

Despliegue de nuevos servicios con grandes requerimientos de capacidad Disaster Recovery on line: (2005 – 2006) Integración de servidores distribuidos.

Utilización de WDM para soportar múltiples protocolos sin ampliar el número de fibras (2005 - 2006).

28 RedIRIS JT 2004

Gracias por su atención