Нельзя попросить протоны сталкиваться помедленнее: как устроена фильтрация данных CERN

Значимый прорыв формирует отрасль ИИ: AlyaCheers 51 минуту назад Нельзя попросить протоны сталкиваться помедленнее: как устроена фильтрация данных CERN Простой 7 мин 2. 1K Блог компании Selectel IT-компании Хранение данных * Научно-популярное IT-инфраструктура * Обзор Привет! Я — Аля, старший продакт-менеджер выделенных серверов в Selectel.

Этой весной я побывала на экскурсии в CERN — и там я узнала, что за все время работы коллайдера на лентах архива накоплено более эксабайта данных. И это только то, что прошло фильтрацию — 99,99% уже было отброшено. У меня сразу возникло много вопросов.

Технические детали

Как они справляются с таким потоком? Как хранят все это десятилетиями? Как проектируют архитектуру, которая должна работать десятки лет?

Эти вопросы легли в основу серии статей — каждая прослеживает один инфраструктурный слой на пути данных от детекторной пещеры до ноутбука физика где-то в мире. CERN — это не просто физическая организацияВыставочно-просветительский центр CERN Science Gateway. CERN принято описывать как место, где изучают фундаментальную физику.

Но если смотреть с точки зрения инфраструктуры, CERN — это нечто более необычное. Это специализированная фабрика данных в масштабах, запредельными для коммерческого бизнеса, и спроектированная так, чтобы работать десятилетиями. Большой адронный коллайдер (БАК) запущен в 2008 году и должен оставаться работоспособным в 2040–2050.

Отраслевые последствия

То есть все данные, включая те, что помогли подтвердить существование бозона Хиггса, должны быть доступны для анализа спустя годы. Только представьте: их будут изучать исследователи, которые сегодня еще учатся в школе. Один из экспериментальных залов CERN.

Долговечность — это не метафора, а реальное техническое требование, которое меняет всю логику принятия инфраструктурных решений. В CERN не думают кварталами, а думают экспериментами, длящимися десятилетия. 500 млрд страниц текста в секундуВизуализация сложных потоков субатомных частиц, образующихся при столкновении пучков протонов в детекторе CMS.

Когда в БАК сталкиваются два протона, то огромные детекторы размером с пятиэтажный дом фиксируют событие и начинают генерировать данные. Сырой сигнал с детекторов идет со скоростью порядка петабайта в секунду. Для понимания масштаба: один петабайт — это примерно 500 млрд страниц текста.

Этот прогресс даёт важные сигналы о будущем отрасли, и технологический мир внимательно наблюдает.