Как мы в Selectel строим S3-хранилища: от железа до приложения

В сфере искусственного интеллекта произошло заметное событие. Современные S3-хранилища давно перестали быть «черным ящиком»: от их архитектуры напрямую зависят отказоустойчивость, производительность и экономика сервисов, которые на них опираются. Но за внешне простым API скрывается интересная, сложная, промышленная система — от железа в стойках до многослойного распределенного приложения.

В этой статье разберем, как устроено промышленное объектное хранилище на практике: какие архитектурные решения лежат в основе, как достигается масштабируемость и где проходят реальные технические компромиссы. Меня зовут Александр Гришин, я руковожу направлением хранения и обработки данных в Selectel.

Технические детали

Отвечаю за развитие облачных баз данных, S3-хранилища, аппаратных СХД и сервисов для построения DLH. Материал будет полезен CTO, CIO и архитекторам, которые выбирают или проектируют собственное S3-совместимое хранилище.

Или инженерам которые хотят просто лучше понимать, что же происходит у нашего сервиса под капотом.

Этот прогресс даёт важные сигналы о будущем отрасли, и технологический мир внимательно наблюдает.