Research Insights Made Simple 15 Review of"What goes around comes around ... and around" - Part II (Рубрика Databases)

Этот выпуск продолжает обсуждение whitepaper "What goes around comes around ... and around" от Michael Stonebraker и Andrew Pavlo про развитие баз данных за последние 20 лет. Здесь мы поговорили о том, как менялись архитектуры баз данных и почему, а также обсудили выводы авторов исследования о будущем баз данных. Разбору статьи помогает мне Алексей Светличный, мой коллега, что руководит развитием отдела баз данных в Т-Банке. Алексей работает с базами данных более 15 лет, где он прошел путь от небольших систем, до крупных Enterprise решений. Сейчас руководит командой, которая разрабатывает DBaaS и развивает экспертизу по базам данных в компании.

За час общения с Лешей мы обсудили вторую половину статьи, куда входили следующие темы

• Введение и план обсудить эволюцию архитектур баз данных за 20 лет.
• Развитие архитектур реляционных и колоночных БД
• Появление и развитие облачных БД с разделением хранения и вычислений (масштабирование ресурсов, эластичность вычислений, объектное хранилище)
• Прорывы в OLTP-масштабировании (пример AWS Aurora)
• Data Lake House и гибридные движки (Parquet, Iceberg, разделение масштабирования воркеров и хранилища)
• Качество данных и подходы к хранению разных классов данных
• Изменение парадигмы ответственности за данные в компаниях (Data Mesh)
• NoSQL базы, CAP-теорема и консистентность (MongoDB, Cassandra, ACID в NoSQL)
• NewSQL базы (Google Spanner, CockroachDB, YDB) и сложность их эксплуатации
• Новые технологии и аппаратная поддержка БД
• Роль маркетинга в успехе технологий, опенсорс и пользовательский опыт
• Финальные выводы whitepaper и размышление о будушем баз данных

Выпуск подкаста доступен в Youtube, VK Video, Podster.fm, Ya Music.

#Software #Engineering #Metrics #Databases #Architecture #Devops