Calcolo distribuito in Radioastronomia M Nanni INAF Ist
Calcolo distribuito in Radioastronomia - M. Nanni (INAF – Ist. Radioastronomia Bologna)
Alma § Up to sixty-four 12 -meters antennas located at an elevation of 5000 m § Frequency range from 33 Ghz to 950 Ghz (10 mm and 350 microns) § Array configuration from 150 m to 10 Km § Spatial resolution of 10 milliarcseconds, (10 times better than HST) § Velocity resolution under 0. 05 km/s § Point source detection sensitivity 20 times better than the VLA
WWW. ALMA. INAF. IT
Alma Regional Center Requirements Users should be able to load data on the storage from remote hosts as well as from a local external USB/E-SATA disk. Single object size is up to 1 TB. During processing, CASA requires about three times the object size of free disk space. At least 10 TB of disk space are needed per-user. Data has a limited lifetime. Depending of the degree of parallelization reached, an 8 cores computer should be enough for both interactive and non-interactive usage.
The ARC cluster at IRA 1 Gbit/s
What will be the tasks at INAF ARC computer cluster ? Tasks that take advantage using many cores: Data reduction of many (100 -1000) images at a time Run of the task on a data set with different parameters Tasks that require strong CPU and BIG memory Large images ( > 8000 x 8000) Mosaic Multidimensional images
L’ e-VLBI intercontinentale a 1 Gbit/s e’ realta’ dal 2009
Mc - Medicina December 2005 : Connected by “Lepida” Regional Network Long path (120 Km. ) with a repeater in the middle. Was not a “dark fiber” ! April 2009 : Crossed the railroad ! Short path (38 Km) Now “Dark fiber” We are updating to 10 Gbit/s
www. nexpres. eu The EC has awarded the new NEXPRe. S project 3. 5 million euros to advance data transfer, buffering, storage and distributed computing technologies. The improvements are expected to significantly enhance the "e-EVN Programme", a SKA Pathfinder Technology ØIncrementare il numero di stazioni che partecipano all’e-Vlbi ØIncrementare la banda osservativa da 512 Mbps a 4 Gbps (d. BBC) ØBuffering/storage alla stazione ed al correlatore ØLarga banda e storage on demand ØCorrelazione distribuita (Di. FX e implementazione formato VDIF)
Collegamento dell’Antenna di NOTO 135 Km di fibra ottica dal Po. P GARR di Catania all’antenna di Noto
Sardinia Radio Telescope: 64 Metri di diametro, 100 GHz
GARR: Rete per la radioastronomia TN 1 MI 4 CO MI 2 TO PV MI 1 MI 3 MI 5 TN PI UD PD FE BO 1 GE UD 1 TS FE 1 BO 2 FI AN AN 1 PG Civitavec. G. 652 RM 2 AQ 1 MI 1 PE AQ RM 1 2 x 10 G Termoli FG 1 CB SS 1 Olbia NA CA BR SA PZ CS CA 1 MT IRA-INAF BO BO 1 BA 3 x 10 G LE 10 G CZ Lamezia G. 654 PA ME 1 RC Mazara CT Oss. S. Basilio (CA) Oss. Medicina (BO) Oss. Noto (SR)
Buffer/storage
Area osservata dalle antenne (d = alcuni primi d’arco) correlazione (d = milliarcsec)
Duck / Grid in questi mesi • Occasione per ridiscutere valutare le esigenze di calcolo degli Istituti nell’AREA di Ricerca di Bologna (Grid / HPC / Cloud) • Portato sul Grid 100 cores di calcolo di Area – Realta’ eterogenee CNR/INAF vs organizzazione INFN/CERN • Studio uso di parallelismo a grana grossa: – Valutazione interventi sui task critici – Parallelizzato “Clean” di CASA (64 bande frequenza) – Uso del grid nella aggregazione di dataset distribuiti
Cosa ci aspettiamo di ottenere • Non sappiamo cosa vorranno fare I ricercatori di questi potenti strumenti domani – survey di 10. 000 immagini ? – Simulazioni ? – Correlazioni di centinaia di campi ? • Le risorse di calcolo e di rete non devono essere limitanti nella ideazione e sviluppo dei progetti. • Non possiamo dimensionare le risorse alle massime esigenze oggi (!) prevedibili. • Possiamo contribuire a realizzare uno “Strumento” che, alla bisogna, ci possa fornire 100 -10. 000 unita’ di calcolo
- Slides: 18