Ukládání, přenos a zpracování velkých vědecko-výzkumných finančních dat v prostředí e-INFRA CZ

Abstract

Cílem projektu bylo navrhnout, ověřit a uživatelům e-INFRA CZ zpřístupnit metodiku způsobu migrace a efektivního uložení velkých vědecko-výzkumných finančních dat v objektovém datovém úložišti a jejich následné zpracování v prostředí MetaCentra. Hlavními výsledky jsou návodné dokumenty pro uživatele e-INFRA CZ popisující ukládání a zpracování velkých objemů dat v objektovém úložišti S3 při výpočtech v MetaCentru a jak v úlohách trénování neuronových sítí použít chytré monitorovací nástroje jako je Weights & Biases.