TRUBA Teknik Ekibi AKADEMİK BİLİŞİM 2016 3 Şubat 2016.

... konulu sunumlar: "TRUBA Teknik Ekibi AKADEMİK BİLİŞİM 2016 3 Şubat 2016."— Sunum transkripti:

1 TRUBA Teknik Ekibi AKADEMİK BİLİŞİM 2016 3 Şubat 2016

2 Türk Ulusal Bilim e-Altyapısı T. C
Türk Ulusal Bilim e-Altyapısı T.C. Kalkınma Bakanlığı tarafından desteklenmektedir.

3 Sunum İçeriği Ön Bilgi Tarihçe Projeler ve İşbirlikleri
Altyapı ve Kaynaklar Servisler İstatistikler İletişim Bilgileri

4 Sayılarla TRUBA

5 2003 2004 TRUBA Tarihçesi 128 PC’den oluşan ilk Linux küme bilgisayar
AB 6. Çerçeve Programı Grid Altyapı projelerine giriş

6 2005 2006 TRUBA Tarihçesi TR-Grid test altyapısı
(ODTÜ, Boğaziçi Üniversitesi, Erciyes Üniversitesi, Pamukkale Üniversitesi katılımı ile) 2006 TUGA Projesi (TÜBİTAK) TR-Grid çalışabilir altyapısının kurulması

7 TRUBA Tarihçesi 2007 İlk infiniband küme ve anahtarlama cihazı İlk lustre yüksek başarımlı depolama TÜBİTAK ARDEB ile işbirliği Danışma Kurulu’nun kurulması 2008 Infiniband küme güncellemesi Depolama güncellemesi 2009 TR-Grid e-Altyapı Güçlendirme Projesi Infiniband küme güncellemesi Lustre depolama güncellemesi

8 TRUBA Tarihçesi 2010 2010 648 arabirimli 4x QDR infiniband anahtarlama cihazi Infiniband küme güncellemesi Lustre depolama güncellemesi TRUBA Danışma Kurulu’nun kurulması ve çalışma esaslarının kabulu

9 2011 TRUBA Tarihçesi Yeni sistem odasına taşınma
Infiniband küme güncellemesi Lustre depolama güncellemesi AFAD ile TDVM Projesi

10 TRUBA Tarihçesi 2006-2010 TÜBİTAK ULAKBİM
Yüksek Başarımlı Hesaplama Merkezi TÜBİTAK ULAKBİM Yüksek Başarımlı Hesaplama Merkezi

11 TRUBA Tarihçesi 2012 TRUBA Güçlendirme Projesi (Kalkınma Bakanlığı) GPU güncellemesi Depolama güncellemesi OpenNebula ile grid servisi 2013 Infiniband küme güncellemesi Harici veri depolama güncellemesi OpenStack ile bulut hizmeti

12 2014 2015 TRUBA Tarihçesi Depolama güncellemesi
Infiniband küme güncellemesi Depolama güncellemesi OpenStack ile ferede bulut hizmeti 2015 Depolama güncellemesi

13 TRUBA Tarihçesi

14 TRUBA Hesaplama Kaynakları
Yıl Adet CPU / GPU Bellek 2003 128 1 çekirdek CPU 1 GB 2006 256 4 çekirdek CPU 4 GB 2007 30 8 çekirdek CPU 16 GB 2008 16 2009 154 24 GB 2010 120 48 çekirdek CPU 128 GB 2011 192 24 çekirdek CPU 2012 32 512 çekirdek GPU 6 GB 2013 16 çekirdek CPU 256 GB 2014 64 24 Çekirdek CPU

15 TRUBA Depolama Kaynakları
Yıl Kapasite 2006 48 TB 2008 560 TB 2009 72 TB (Lustre) 2010 768 TB (Lustre) 2011 480 TB (Lustre) 2012 1152 TB (ZFS) 2014 1125 TB (Lustre) 2015 1728 TB (Lustre)

16 TRUBA Hesaplama Kaynakları - Bağlantı
Infiniband Yıl Bağlantı Tipi Port Sayısı 2007 DDR 144 2009 QDR 648

17 TRUBA Kaynakları

18 TRUBA 2016 Planları Hesaplama
çekirdekli 6-7 Tbyte bellekli SMP prototip adet 24 veya üzeri çekirdekli hesalama kümesi Performans ağı EDR 100GB Anahtarlama cihazı Depolama Mevcut 4Pbyte alana bir güncelleme düşünülmüyor.

19 İş Kuyrukları İş Kuyrukları Kuyruk adı Çalışma süresi
Maksimum Çekirdek Minimum Çekirdek Donanım Single 15 gün 1 Levrekler Short 8 saat 96 2 Mid1 2 gün Mid2 7 gün Long Cuda 8 Levrekler-v2 Levrekv2 Mercan Mercanlar Tom 32 İş Kuyrukları

20 TRUBA Teknoloji Öncülükleri
Tüm akademik araştırmacılara hizmet veren ilk ulusal merkez Üretici bağımsız altyapı Tamamı enstitüde yüklenen, özelleştirilen, yönetilen işletim sistemi ve yazılım katmanları 128 işlemcili küme bilgisayar (2003) Ulusal grid test yatağı (2004) Ulusal grid altyapısı (2006) Hadoop denemeleri (2006) Tamamı enstitüde tasarlanan ve kurulan ilk ulusal yüksek başarımlı hesaplama kümesi ve dağıtık dosya sistemi (2007) 10 Tflops Yüksek başarımlı hesaplama kümesi (2009) Open Nebula tabanlı bulut denemeleri(2010) 40 Tflops Yüksek başarımlı hesaplama kümesi (2010)

21 TRUBA Teknoloji Öncülükleri
10 Gbyte/saniye erişime izin veren dağıtık dosya sistemi (2010) Hesaplama kaynaklarının, bilimsel veri ambarlarının paylaşımı için farklı uçlarla doğrudan fiber veya yüksek hızlı (10Gbps) bağlantı OpenNebula ile grid hesaplama sunucularının sunumu (2012) OpenStack tabanlı servis sunucuları (2013) YBH kümelerinde Hadoop desteği (2015)

22 TRUBA Kullanıcı Profili
Bireysel Kullanıcılar Tüm üniversitede araştırma yapan akademisyenlere, üyelik işlemleri sonrasında hizmet verilmektedir. TÜBİTAK ARDEB Kullanıcıları Verilen projelerde hesaplama ihtiyacı bulunan gruplara TRUBA üzerinde kaynak tahsisi yapılmaktadır yılından bu yana 33ayrı projeye destek verilmiştir. Kamu Kurumları AFAD Kandilli Rasathanesi Meteroloji Genel Müdürlüğü TAEK TÜBİTAK-SAGE TÜBİTAK-MAM TÜBİTAK-UZAY Özel Kurum: TAI

23 Projeler ve İş Birlikleri
Coğrafi Bilgi Sistemleri Genel Müdürlüğü Gerçek (True) Ortofoto ve Coğrafi Veri Üretimi Projesi Başbakanlık Afet ve Acil Durum Yönetimi Başkanlığı Türkiye Deprem Veri Merkezi Projesi (AFAD-TDVM) Türkiye Atom Enerjisi Kurumu Yüksek enerji fiziği çalışmaları: ATLAS ve CMS

24 Projeler ve İş Birlikleri
Boğaziçi Üniversitesi Kandilli Rasathanesi ve Deprem Araştırma Enstitüsü Turkish Aerospace Industries

25 Projeler ve İş Birlikleri
TÜBİTAK SAGE Savunma Sanayii Araştirma ve Geliştirme Enstitüsü TÜBİTAK MAM Yer ve Deniz Bilimleri Enstitüsü TÜBİTAK UZAY Uzay Teknolojileri Araştırma Enstitüsü

26 Kullanıcı Başvuruları, Üyelik, Sertifika
Yeni kullanıcı başvurusu Kullanıcı sertifikaları Kullanıcı sertifikası başvurusu Sertifika kullanımı Grid servisleri yetkilendirmeleri OpenVPN ile TRUBA kaynakları kullanımı

27 TRUBA Araştırmacı Servisleri
Kullanım desteği Grid mimarisi Küme mimarisi Uygulama kurulum desteği Sık kullanılan ücretsiz uygulamalar ve versiyonları Yeni uygulamaların derlenmesi ve kurulması için destek. Uygulamaların kümelerin yapısına uygun bir şekilde derlenmesi/optimize edilmesi Ücretli lisanslı uygulamalar

28 Sık Kullanılan Uygulamalar
Gaussian09 Gamess Vasp Comsol Amber Abaqus Abinit Wien2k Lammps Molpro Gromacs Meep Quantum Espresso Namd; Charmm Octa Siesta Nsp Fluka R Octave Cpmd Ansys14 OpenFoam Matlab

29 Derleyiciler ve Debug Araçları
Gcc 4.4.7 Intel Composer Xe 2013 Intel Parallel Studio Intel Inspector Intel IPP Intel Vtune Cuda 5.5 Cuda 4.4

30 MPI Kütüphaneleri Openmpi Mvapich Intel mpi Matematik Kütüphaneleri
Mkl Acml 4.4 Acml 5.1 Fftw2/3 Blas Lapack Scalapack MPI Kütüphaneleri Openmpi Mvapich Intel mpi

31 TRUBA Yayınları

32 TRUBA Kullanımı

33