Data Management is responsible for creating the software, services and systems which will be used to produce LSST's data products. If you are interested in installing the pipeline software jump to pipelines.lsst.io. The speed with which LSST maps the southern sky and the depth to which it can see will produce an enormous volume of data, about 20 terabytes (TB), or 20 trillion bytes of raw data per night. The total amount of data collected over the ten years of operation will be about 60 petabytes (PB), and processing this data will produce a 15 PB catalog database. The total data volume after processing will be several hundred PB, processed using about 150 TFLOPS (trillion floating point operations per second) of computing power for the first Data Release, increasing to 950 TFLOPS by Data Release 11 at the end of the ten-year survey. Processing such a large volume of data, converting the raw images into a faithful representation of the universe, implementing automated data quality assessment and automated discovery of moving or transient sources, and archiving the results in useful form for a broad community of users is a major challenge.

Data Management es responsable de crear el software, los servicios y los sistemas que se utilizarán para producir los productos de datos de LSST. Si está interesado en instalar el software de canalización, vaya a pipelines.lsst.io. La velocidad con la que LSST mapea el cielo del sur y la profundidad a la que puede ver producirá un enorme volumen de datos, aproximadamente 20 terabytes (TB), o 20 billones de bytes de datos sin procesar por noche. La cantidad total de datos recopilados durante los diez años de operación será de aproximadamente 60 petabytes (PB), y el procesamiento de estos datos producirá una base de datos de catálogo de 15 PB. El volumen total de datos después del procesamiento será de varios cientos de PB, procesados ​​utilizando aproximadamente 150 TFLOPS (billones de operaciones de punto flotante por segundo) de potencia informática para el primer lanzamiento de datos, aumentando a 950 TFLOPS en el lanzamiento de datos 11 al final de los diez años. encuesta. Procesar un volumen de datos tan grande, convertir las imágenes en bruto en una representación fiel del universo, implementar una evaluación de calidad de datos automatizada y un descubrimiento automatizado de fuentes móviles o transitorias, y archivar los resultados en forma útil para una amplia comunidad de usuarios es una de las principales reto.