Телескоп Rubin будет собирать до 500 000 ТБ данных за 10 лет с помощью 3200-мегапиксельной камеры

Иногда сложно осознать огромные объёмы данных, составляющих нашу цифровую реальность. Ещё труднее представить, какое невероятное количество информации собирает всего одна обсерватория, наблюдающая за космосом. Обсерватория Веры Рубин, расположенная в Чили, делает около 1000 снимков ночного неба каждый день.

Недавно The New York Times опубликовала интервью с членами команды обсерватории, которые подтвердили, что каждый снимок, сделанный камерой телескопа, состоит из 3,2 миллиарда пикселей, каждый из которых представляет один из 65 536 оттенков серого. В среднем одно изображение содержит около 6,4 ГБ данных.

Снимки автоматически отправляются на ближайшие серверы, что позволяет телескопу перемещаться в другой участок неба и делать новые фотографии. Планируется наблюдать одни и те же области в течение как минимум десяти лет. По словам команды, ожидается, что проект сгенерирует огромный объём данных — к концу миссии он составит не менее 60 миллиардов байт (примерно 60 000 ТБ).

Для обработки такого количества данных в обсерватории Rubin построили собственный дата-центр, способный хранить как минимум месячный объём информации на случай непредвиденных проблем с сетью. Это обеспечивает необходимую избыточность для защиты данных. Команда также может анализировать информацию прямо в обсерватории перед отправкой для дальнейшего изучения.

Данные передаются в Национальную ускорительную лабораторию SLAC, которая является частью Центра энергетических исследований в Менло-Парке (Калифорния). Для подключения дата-центра к чилийскому городу Ла-Серена проложено 60 миль оптоволоконного кабеля, что гарантирует бесперебойную передачу информации. Именно здесь новые снимки сравнивают с более старыми изображениями того же участка космоса, чтобы обнаружить любые значительные изменения. Все обнаруженные отклонения затем выделяются и изучаются более детально.

Хотя команда оценивает итоговый объём данных примерно в 60 000 ТБ, существует множество факторов, которые могут повлиять на окончательный результат. По некоторым оценкам, общий объём может достигать 500 000 ТБ. Доктор О’Маллейн, заместитель директора обсерватории по производству данных, считает, что астрономам будет проще анализировать такие объёмы информации с помощью искусственного интеллекта.

Источник: Tomshardware.com