Первая архитектура данных: как шумеры строили OLTP, DWH и реестры сотрудников за 4000 лет до нашей эры

В период Третьей династии Ура (XXI в. до н. э.) шумеры создали государственную учётную систему на глиняных табличках. По своей сути — полноценную иерархическую СУБД с первичными документами, агрегатами, реестрами мастер-данных и аутентификацией.

📁 Иерархия табличек

Система строилась на трёх уровнях:

1. Детальные транзакции — таблички, фиксирующие проведенные операции: «в дату какую-то выдано 5 мер зерна гонцу Или-шинату».
2. Периодические сводки — агрегация количественных данных за неделю или месяц с группировкой по типу операции.
3. Мастер-табличка — итоговый документ периода, суммирующий все поступления и расходы. Документ содержал начальный остаток, приход и расход за период и итоговый остаток.

Таблички одного периода собирались в корзину и снабжались глиняным ярлыком-описью — это своего рода физический аналог S3 Glacier с каталогом содержимого.

👥 Реестры чиновников, воинов и рабочих

Государство вело детальные реестры по категориям населения. Например, сохранилась административная бирка из Гирсу, где перечислены типы учётных документов в архиве. Среди учтённых категорий населения были чиновники и управленцы (землемеры, надзиратели зернохранилищ, писцы), воины, работники (пахари, строители, носильщики и т.п.).

Атрибуты строки в реестре работников включали: профессию, специализацию, участок работ, статус (активен/умер в пути), имя бригадира.

Одна из сохранившихся табличек 2027 г. до н. э. содержит поимённый перечень персонала храмового хозяйства с указанием их пайков.

Для учёта трудозатрат применялась агрегация в стиле: «14 работников × 15 дней = 210 человеко-дней» — детали и свод одновременно. Правда система счисления использовалась шестидесятиричная (кстати, именно из Шумера идет наше исчисление времени: деление часа на 60 минут, а минуты на 60 секунд).

🖊️ Подпись данных и защита от их изменения

С 3500 г. до н.э. в Шумере активно использовались цилиндрические печати — персональные идентификаторы чиновников. Они представляли собой резной цилиндр, который прокатывался по еще влажной глине только что составленного документа, после чего на нем оставался уникальный рельефный рисунок и имя владельца печати. После нанесения рельефа было невозможно что-то дописать или стереть.

Пример из документа об оплате труда (ок. 2033 г. до н. э.): в конце таблички указано «[запечатано] Ур-Шульпаэ, сыном Лугаль-кугани». Это буквально аутентификация транзакции.

Иногда использовалось коллегиальное подтверждение – документ "подписывали" сразу несколько человек.

♻️ Жизненный цикл данных

Хранение: таблички в корзинах — архивный слой с медленным доступом.

Уничтожение: документы с истекшей юридической силой физически разбивали. Аналог современного hard delete без возможности восстановления.

Вывод: Шумерская информационная система включала в себя разделение на транзакционный и аналитический слои, мастер-данные по персоналу, агрегацию в итоговых табличках и механизм подтверждения подлинности. Это первая известная нам реализация принципов, которые сегодня лежат в основе многих современных бизнес-систем.

Построено навечно

Кажется, что некоторые технологии прошлого буквально обречены на вечную жизнь.

Например, немецкая СУБД Adabas, которая была выпущена в 1971 году, пережила расцвет мейнфреймов, эпоху реляционных баз данных и не только не канула в Лету, но живет полной жизнью и имеет большое сообщество пользователей.

Вот несколько фактов об этой живучей системе:

📜 Глубокая история: Эта СУБД была выпущена для мейнфреймов IBM еще в 1971 году и уже в 1983 году занимала 11% мирового рынка.

⚙️ Уникальная архитектура: Отличается моделью данных на базе инвертированного индекса, впоследствии дополненной реляционными элементами.

⚡ Скорость и надежность: Может обслуживать десятки тысяч параллельно работающих пользователей и обрабатывать более 2 миллионов запросов в секунду, обеспечивая самую низкую стоимость транзакции из официально зарегистрированных.

🚀 Развитие и планы на будущее: Adabas был портирован на Linux, Unix и Windows, поддерживает Unicode, имеет облачную версию, активно продвигается, проводит вебинары и живет по долгосрочной стратегии развития, охватывающей интервал до 2050 года.

👶 Известные наследники: СУБД SAP MaxDB и СУБД SAP HANA являются прямыми потомками ("внук" и "правнук") СУБД Adabas и используют внутри её наработки.

Многие крупные зарубежные авиакомпании до сих пор используют в системах продажи авиабилетов СУБД Adabas.

👴 Другие СУБД-долгожители

Adabas не одинок в клубе старейшин мира СУБД.
Вот ещё ряд примеров СУБД, чей возраст перевалил за несколько десятилетий, но они все еще в строю:

· IMS (Information Management System) от IBM: Была создана в 1968 году для программы «Аполлон». До сих пор является основой многих критически важных систем в зарубежных банках и страховых компаниях.

· Oracle Database: Первая в мире коммерчески успешная реляционная СУБД. Была выпущена в 1979 году, но до сих пор занимает огромную долю рынка.

· Советская СУБД «Ника»: Прямой наследник выпущенной в конце 70-х СУБД ИНЕС, которая во второй половине 80-х работала практически на каждом третьем компьютере ЕС ЭВМ в стране. «Ника» включена в Единый реестр российского ПО и до сих пор эксплуатируется и сопровождается.

Дорогие подписчики!

Сегодня — 12 июня, День России.

Праздник, который напоминает: мы живём в большой стране с богатой историей, разными традициями и по-настоящему талантливыми людьми. И у каждого из нас — свой уголок, своё дело, своя команда.

Желаем вам не бояться масштабных задач, находить опору в своих ценностях и всегда двигаться вперёд — даже если путь кажется непростым.

С Днём России!

🤖 13 июня 1961 года: патент на первого промышленного робота

Ровно 65 лет назад - 13 июня 1961 года изобретателю Джорджу Деволу (George Devol) из США был выдан патент US2988237A, на основе которого в том же году был создан Unimate — первый в истории промышленный робот.

Unimate впервые начали применять на заводе General Motors в Нью-Джерси. Он вынимал раскалённые детали из литейной машины.

Однако позже его "научили" (в маркетинговых целях) играть в гольф и разливать кофе.

Программа действий робота была записана на вращающемся магнитном барабане и могла включать в себя последовательность действий размером до 200 шагов.

Робот Unimate - дедушка всех современных промышленных роботов.

Это была важная веха в развитии робототехники, ведь без нее не было бы современных автоматизированных сборочных линий на автозаводах, полностью роботизированных складов у крупных ритейлеров, а также милых роботов-доставщиков от Яндекса.

Как появился на свет легендарный формат DBF

В 1978 году программист-подрядчик NASA Уэйн Рэтлифф решил автоматизировать офисный тотализатор на матчах по американскому футболу.

Он написал свою первую СУБД и назвал её Vulcan — в честь планеты Мистера Спока из «Звёздного пути».

Коммерческого успеха у этой новой СУБД не было, пока разработку не заметил Джордж Тейт, глава компании Ashton-Tate.

В 1981 году Тейт и Рэтлифф заключили маркетинговое соглашение, но у них возникла проблема с тем, что название Vulcan уже принадлежало другой фирме. Нужно было срочно придумать новое.

Тейт предложил использовать уже не новый к тому времени маркетинговый ход, подсмотренный у Oracle: СУБД Vulcan переименовали в dBASE II — пропустив первую версию, чтобы сразу создать впечатление зрелости и надёжности.

📈 Результат оказался более чем впечатляющим: новая СУБД разошлась тиражом в миллионы копий, а формат таблиц .DBF стал стандартом де-факто на годы вперёд.

Дорогие подписчики!

Сегодня, 20 июня, — Всемирный день Wi-Fi.

Ровно 27 лет назад, в 1999 году, эта технология была официально представлена миру. Тогда мало кто мог представить, что беспроводной интернет станет таким же привычным, как электричество в розетке.

Wi-Fi давно перестал быть просто удобством — он стал частью повседневной жизни. Работа, общение, развлечения, учёба — всё это прочно связано с беспроводным интернетом, который мы сегодня воспринимаем как должное.

С праздником! Пусть ваш Wi-Fi всегда будет быстрым, а связь — стабильной.

Запуск первой программы из оперативной памяти компьютера

🔥 Ровно 78 лет назад, 21 июня 1948 года, в Манчестере случилось то, без чего не было бы современного нам ИТ.

ЭВМ с ласковым названием «Baby» успешно выполнила первую в мире программу, которая хранилась не на перфокартах, а в оперативной памяти этого компьютера.

Это был прорыв: 17 инструкций, написанных в двоичном коде, и компьютер понял их без подсказок с бумажных носителей. Именно тогда родилась архитектура фон Неймана — фундамент, на котором стоят все современные ПК, серверы и даже ваши смартфоны.

До этого — компьютер был большой вычислительной машиной.
После этого — он стал универсальным устройством, способным менять программы на лету.

Интересный факт:
Первую успешную программу написал Том Килберн. Она вычисляла наибольший делитель числа — и сделала это за 52 минуты (процессор был небыстрым). Но эти минуты изменили мир.

P.S. С тех пор хранение данных в памяти стало священным правилом. И даже если Вы администрируете огромную СУБД, помните: всё началось с крошечного «Baby» и 17 строк кода. 🧬