2006-stato-calcolo - Ira-Inaf

Dall’ultima slide dello scorso anno …….
Calcolo scientifico all’IRA
Sono ancora sufficienti le Work Station ?
Rischiamo di perdere il treno del Grid e
del calcolo parallelo ?
Risorse di Calcolo all’IRA
- 78
Sistemi Privati
- 20
Pubblici, Studenti, Ospiti
Su rete a 100 Mbit/s
- 18
Macchine di servizio
- 30
Apparati di rete (router, switch)
Su rete a 1 Gbit/sec
Cluster Mach-16 ( 16CPU )
Grid Computing Element ( 8 CPU )
Cosa sta’ cambiando sul mercato ?
Dal 1995 al 2004 :
CPU
da 100 MHz a 2400 MHz
Network da 10 Mbit a 100 Mbit
Dischi
da 400 MBy a 32 Gby
Dal 2004 al 2006 :
CPU
da 2400 MHz a 3600 MHz (< 4G ) *
Network da 100 Mbit a 1 Gbit (10G)
Dischi
da 32 GBy a 750 Gby
* Ora si punta sul Dual core e Quad core
Il miglior sistema per la riduzione
dati astronomici (Aips & C) e’ …….
…. una Work Station con tanto disco locale ….
Helicon (Amd 3000+) Net: 100 Mbit/s
Su disco locale
: 64 AipsMark
Su disco di rete : 16 AipsMark
…. o un sistema con disco di rete ?
Gaia (Xeon 3.2GHz) Net: 1 Gbit/s
Su disco locale
: 70 AipsMark
Su disco di rete : 44 AipsMark
Perche’ tanto interesse per i dischi di
rete ?
Si possono realizzare grandi aree di lavoro
(alcuni terabyte) mettendo dischi in parallelo
Si puo’ garantire sicurezza senza raddoppiare
lo spazio disco (RAID – 5) e bk centralizzati
Si rendono indipendente le Work-Station dalle
aree di lavoro (condivisione, sostituzione)
E’ il modo di realizzare CLUSTER di
calcolo
Network Attachment Storage (NAS)
Un sistema collegato a Luna e Terra dal 1998
( “Il Raid” per gli amici) 300 GBit su rete a 100 Mbit
Il nuovo sistema NAS1 su rete a 1 Gbit
Primo set di 8 dsk: 1.5 TBy
/iranet/home2
/iranet/virmos
/DATA/NAS1_1 … NAS1_6
Secondo set di 8 dsk: 2.4 TBy
/iranet/XYZ
Back_up e trasporto dati
I sistemi a nastro stanno diventando
obsoleti e costosi
Un nastro ha capacita’ di 30-40 Giga
• Conservare i DAT per lettura vecchi nastri e
compatibilita’ con esterno.
•Sistema centrale di Back_up su disco per aree “preziose”
(/home /mail servizi in genere )
•Distribuire Dischi-USB (200-300 GBy) per salvataggi &
trasporto dati personali (no lavoro !!)
Interventi sulla rete
Andare verso la rete a 1 Giga dando la priorita’
a:
Macchine di Servizio e sistemi comuni
(completato)
NAS e Cluster di Calcolo (completato)
Macchine pubbliche per studenti
Work Station personali
Si intende reralizzare una stella ottica a 1 Giga
per la rete di area (condivisione del calcolo ? )
Man di Bologna
Rete complessiva
Collegamenti in fibra spenta (1G, 10G)
Sistemi operativi
Sono stati spenti tutti I sistemi DecAlpha
Oltre ad alcune macchine HP (geo) e un paio di
Mac abbiamo OS Windows e LINUX
Microsoft ha annunciato “Vista” che sostituira’
Win XP …. Ne parleremo tra 2 anni :-}
Distribuzioni LINUX
 FEDORA per le Work Station (aggiornato)
 Scientific Linus per i server (stabile)
Macchine di servizio
W1
Web, ftp
D1
Dns, YP, Time server, dhcp, gatekeeper
Iranet
Samba server
M1
Mail e Liste
H1
Home e SW via NFS
DB
Cataloghi e archivi
Tape-srv
Nastri (e fedora repository)
Server2000 Window (desktop remoto)
Altri sistemi comuni
Gaia
Calcolo, accesso e back_up
C1, C2
Riserve utilizzabili x calcolo
Luna
In via di spegnimento
Terra
SPENTO
Raid -300 Giga
In dismissione
NAS - 1 Tera
Attivo da potenziare
Back-Up
Da acquistare
Cluster di Calcolo
MACH - 16
AMD Athlon 64 3400+, 2400 MHz, Cache
512KB, Memoria 2 Giga
SO: Fedora FC3
MPI: LAM
Comp. Portland : speedup X 4-6
In produzione !!!!
Potenziato nella memoria
In acquisto unita’ di controllo e
memoria di massa
Cluster di Calcolo x Grid
(Progetto Inaf-Grid)
1 -- Computing Element
1 -- Storage Element
4 -- Working Nodes :
2 CPU Intel Xeon, 3.0 GHz, Cache 2048
KB, Memoria 2 Giga
Nave scuola !!!!
Non ancora registrato nella griglia
Mail e SPAM
Corsa agli armamenti
Grey-list
Fine
ira.cnr.it
Voice Over IP
Telefonate/miniconf via rete
Skype & C : soluzioni individuali
OS: Win, Linux, Mac
Cuffie/microfoni disponibili
Conferenze 4 + 1
Video & Chat
Pc a Pc
=0
Pc a Fisso = circa 1 E/ora
Pc mobile = troppo
Voice Over IP
Come via alternativa alle telecoms
Progetti GARR – CNR – INAF - ….
Voice Over IP
CNR:




Roma
Pisa
Cosenza
………………
INAF:
Altri:
 Bologna Area
 Arcetri
 Trieste




Cineca **
INFN
Universita’
Siti esteri
Area di Bologna
0
Telefonata normale via telecom
2
“Tenta” Telefonata via IP
** radice 0039
Attivazione della Fibra Medicina -- Nodo Garr di Bologna
Nel Maggio 2005 e’ stata posata una fibra ottica tra Medicina e
il Radiotelescopio ( percorso di 6 Km)
Attivazione della Fibra Medicina -- Nodo Garr di Bologna
Sul percorso tra Medicina e Bologna doveva essere messo a disposizione una
coppia di fibre tra quelle della dorsale di Lepida sulla via breve 40 Km
Mancanza
di
permessi
hanno
bloccato i
lavori a
Budrio
A febbraio 2006 abbiamo ottenuto un percorso di
back_up (120 Km), ma con un ripetitore a Faenza.
Attivazione della Fibra Medicina -- Nodo Garr di Bologna
La presenza del ripetitore impedisce l’uso del Jumboframes (pacchetti da 9000 bytes invece di 1500)
Su percorso diretto Med-Bo velocita’ sostenuta di 1 Gbit/s
Dopo tuning della rete su percorso Med-Jive picchi di 750 Mbit/s
Su lunghe distanze impossibile mantenere velocita’
costanti superiori ai 400 Mbit/sec (256 Mbit per e-vlbi)
Medicina una delle 6 antenne del e-vlbi europeo
The e-EVN & Pan-European Research Network GEANT2
•First Open Observations (March 2006) were a bit of a disaster:
–Cygnus X-3 was going through one of its brightest recorded flares
(many Jansky)
–Bug in Correlator software resulted in no fringes, no useful data!
•Second Open Observations (April 2006) went well…
–But Cygnus X-3 quiescent (a few mJy)
•First e-VLBI Target of Opportunity Observations (May 2006, Cygnus X-3),
Tudose et al. (in prep).
–Cygnus X-3 again flaring…!
First e-EVN Astronomy Publications
1 Gbps
1 Gbps (2007/8)
1 Gbps (200?)
Premi e ricadute del e-vlbi
e-VLBI project wins IDEA award:
The e-VLBI project, led at JIVE, has received a
prestigious award for its progress in high speed
data transfer at the inaugural IDEA awards
ceremony held on April 21st 2006.
e-vlbi sta’ stimolando lo studio di piu’ efficienti
protocolli IP
e-vlbi sara’ una delle prime applicazioni che
utilizzera’ gli switch ottici su scala continentale
EXPReS
Un progetto FP6 dei membri JIVE per potenziare
l’infrastruttura di rete e-vlbi
Richieste INAF
Medicina:
•Apparati di trasmissione da 10 Gigabit/sec
Noto:
•Progetto di fattibilita’
•Secondo MARK V per E-VLBI off line
SRT
•Apparati di trasmissione da 10 Gigabit/sec
Correlatore nazionale
• Medicina – SRT – Noto + Resto del mondo
Correlazione hardware
Correlazione software real time : richiede
calcolo di un fattore 100 – 1000 superiore
oppure software molto furbo
Esperienza che serve per Alma – Ska ……….
6 Novembre meeting IRA
Griglie Computazionali: GRID
Mettere a disposizione risorse di calcolo a
livello globale
Chi puo’ usare che cosa e come
Stessi problemi per accedere a IBM360 negli anni 70
Soluzioni molto simili :-}
Indotto:
 Sistema di autenticazione (chi sei ?)
 Nodi di calcolo (cluster di calcolo efficienti)
 Identico modo di operare (unico linguaggio)
Certificati per il Grid
Costituita Registration Authority
INAF-BO
La RA garantisce che “siete proprio Voi”
alla Certification Authority INFN-GARR
per ottenere i certificati digitali
Con i certificati potete “firmare” e crittografare
e-mail e usare le risorse grid grid locali e globali
attraverso una grid user interface
ALLA PROSSIMA PUNTATA ……….