Например,
Cache позволяет отдавать часто используемые данные без обращения к базе данных, а Load Balancer распределяет запросы между несколькими серверами, повышая скорость и отказоустойчивость приложения.На картинке — основные стратегии уменьшения задержек в высоконагруженных системах.
Сохрани, чтобы не потерять!
Please open Telegram to view this post
VIEW IN TELEGRAM
❤12🔥9🤝4👍1
Почему OFFSET деградирует на больших таблицах!
Есть таблица:
Типичная пагинация:
Кажется, что база должна просто пропустить миллион строк и вернуть следующие 50. Но SQL-движок не может сделать настоящий прыжок через
Без подходящего индекса это может выглядеть так: база читает строки, определяет порядок сортировки, обрабатывает
Даже если есть индекс:
ситуация всё равно не идеальна.
Индекс помогает быстрее читать данные в нужном порядке, но базе всё равно приходится пройти большое количество записей, чтобы добраться до нужного
Например:
означает, что базе нужно обработать примерно миллион строк перед тем, как вернуть результат.
Для глубоких страниц обычно используют keyset pagination (cursor pagination). Вместо номера страницы передаётся последнее значение из предыдущего результата:
Теперь база может использовать индекс и сразу искать позицию, с которой нужно продолжить чтение.
Но одного
Например:
Порядок становится неоднозначным. Поэтому добавляют уникальный ключ:
И запрос становится:
Теперь курсор точно определяет позицию в индексе.
Главное преимущество такого подхода — стоимость запроса зависит в основном от размера страницы, а не от глубины пагинации. Первая страница:
и страница после миллионов записей:
используют один и тот же принцип: найти позицию в B-tree индексе и продолжить чтение.
🔥 Делаем вывод:
➡️ SQL Ready | #практика
OFFSET часто используют для пагинации, потому что запрос выглядит просто. На небольших таблицах проблем обычно нет, но на больших объёмах стоимость такого подхода растёт вместе с глубиной страницы.Есть таблица:
events(
id BIGINT,
user_id BIGINT,
payload JSONB,
created_at TIMESTAMPTZ
)
Типичная пагинация:
SELECT
id,
user_id,
created_at
FROM events
ORDER BY created_at DESC
LIMIT 50 OFFSET 1000000;
Кажется, что база должна просто пропустить миллион строк и вернуть следующие 50. Но SQL-движок не может сделать настоящий прыжок через
OFFSET. Ему нужно обработать строки до нужной позиции, а потом отбросить их.Без подходящего индекса это может выглядеть так: база читает строки, определяет порядок сортировки, обрабатывает
OFFSET + LIMIT записей, выбрасывает ненужные строки и возвращает только нужный результат.Даже если есть индекс:
CREATE INDEX idx_events_created_at
ON events(created_at DESC);
ситуация всё равно не идеальна.
Индекс помогает быстрее читать данные в нужном порядке, но базе всё равно приходится пройти большое количество записей, чтобы добраться до нужного
OFFSET.Например:
LIMIT 50 OFFSET 1000000;
означает, что базе нужно обработать примерно миллион строк перед тем, как вернуть результат.
Для глубоких страниц обычно используют keyset pagination (cursor pagination). Вместо номера страницы передаётся последнее значение из предыдущего результата:
SELECT
id,
user_id,
created_at
FROM events
WHERE created_at < '2026-08-01 12:00:00'
ORDER BY created_at DESC
LIMIT 50;
Теперь база может использовать индекс и сразу искать позицию, с которой нужно продолжить чтение.
Но одного
created_at недостаточно, если несколько событий имеют одинаковое время.Например:
2026-08-01 12:00:00
2026-08-01 12:00:00
2026-08-01 12:00:00
Порядок становится неоднозначным. Поэтому добавляют уникальный ключ:
CREATE INDEX idx_events_cursor
ON events(created_at DESC, id DESC);
И запрос становится:
SELECT
id,
user_id,
created_at
FROM events
WHERE (created_at, id) < ('2026-08-01 12:00:00', 1500000)
ORDER BY created_at DESC, id DESC
LIMIT 50;
Теперь курсор точно определяет позицию в индексе.
Главное преимущество такого подхода — стоимость запроса зависит в основном от размера страницы, а не от глубины пагинации. Первая страница:
LIMIT 50;
и страница после миллионов записей:
WHERE (created_at, id) < (...)
LIMIT 50;
используют один и тот же принцип: найти позицию в B-tree индексе и продолжить чтение.
OFFSET остаётся нормальным решением для административных интерфейсов, внутренних инструментов и небольших таблиц. Но для лент событий, истории операций, логов и больших списков он быстро становится узким местом.OFFSET удобен для разработки, но плохо масштабируется на больших объёмах данных. Для больших таблиц лучше использовать keyset pagination с составным индексом и стабильным курсором.Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12👍7🤝7
В этой статье:
• Разберётесь, почему для денег и точных расчётов часто выбирают numeric, несмотря на его производительность;• Узнаете, чем на практике отличаются numeric, целые типы и double precision;• Посмотрите, какие требования к точности и округлению предъявляют SQL, платёжные системы и финансовые стандарты.🔊 Продолжай читать на Habr!
Please open Telegram to view this post
VIEW IN TELEGRAM
❤12🔥7👍5
Настройки только для одного запроса!
Необязательно менять
Так миграция не будет бесконечно ждать блокировку: если таблица занята дольше заданного времени, PostgreSQL завершит операцию ошибкой.
Можно даже точечно дать тяжёлому запросу больше памяти, не увеличивая
🔥
➡️ SQL Ready | #совет
Необязательно менять
statement_timeout, work_mem или другие параметры для всей сессии. SET LOCAL действует только до конца текущей транзакции.BEGIN;
SET LOCAL lock_timeout = '500ms';
ALTER TABLE orders
ADD COLUMN source text;
COMMIT;
Так миграция не будет бесконечно ждать блокировку: если таблица занята дольше заданного времени, PostgreSQL завершит операцию ошибкой.
BEGIN;
SET LOCAL work_mem = '512MB';
SELECT customer_id, count(*)
FROM events
GROUP BY customer_id;
COMMIT;
Можно даже точечно дать тяжёлому запросу больше памяти, не увеличивая
work_mem для остальных запросов соединения.SET LOCAL позволяет тюнить PostgreSQL под конкретную операцию и автоматически возвращает настройки назад после COMMIT или ROLLBACK.Please open Telegram to view this post
VIEW IN TELEGRAM
❤10👍7🔥5🤝1
This media is not supported in your browser
VIEW IN TELEGRAM
Здесь собраны разборы типичных ситуаций при работе с PostgreSQL: проблемы с подключением и настройкой, ошибки в SQL, оптимизация медленных запросов, партиционирование, размеры таблиц,
timestamp with time zone, pg_dump и другие нюансы. Есть конкретные команды, примеры диагностики и рекомендации по тому, какие данные собирать для поиска проблем. Оставляю ссылочку: GitHub📱
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12❤8👍6🤝2
Шпаргалка по работе с последовательностями в PostgreSQL: создание и удаление sequence, получение новых и текущих значений, сброс и синхронизация счётчика после импорта, а также привязка последовательности к столбцу. Помогает управлять генерацией идентификаторов и корректно работать со счётчиками при конкурентных вставках и загрузке данных.Please open Telegram to view this post
VIEW IN TELEGRAM
👍12❤7🤝3🔥2
Проверяйте преобразование без исключений!
Обычный
PostgreSQL умеет проверять, является ли строка допустимым значением конкретного типа, не вызывая ошибку.
Типом может быть не только
А
🔥
➡️ SQL Ready | #совет
Обычный
cast падает с ошибкой, если значение нельзя преобразовать. Из-за этого в ETL и в запросах к промежуточным данным часто приходится заранее чистить данные или писать PL/pgSQL с обработкой исключений.SELECT value::integer
FROM staging;
-- ERROR при первом плохом значении
PostgreSQL умеет проверять, является ли строка допустимым значением конкретного типа, не вызывая ошибку.
SELECT value
FROM staging
WHERE pg_input_is_valid(value, 'integer');
Типом может быть не только
integer:SELECT pg_input_is_valid('192.168.1.10', 'inet');
SELECT pg_input_is_valid('550e8400-e29b-41d4-a716-446655440000', 'uuid');
SELECT pg_input_is_valid('2026-09-08', 'date');А
pg_input_error_info() позволяет получить причину, почему преобразование невозможно.SELECT *
FROM pg_input_error_info('2026-02-30', 'date');
pg_input_is_valid() позволяет валидировать грязные входные данные средствами самой системы типов PostgreSQL.Please open Telegram to view this post
VIEW IN TELEGRAM
🔥15👍8🤝4
This media is not supported in your browser
VIEW IN TELEGRAM
Справочник по SQL с примерами запросов и пояснениями. Здесь на небольших таблицах разобраны INNER, LEFT, RIGHT, FULL и CROSS JOIN, а также показаны различия синтаксиса между PostgreSQL, MySQL, SQLite и SQL Server. Для команд указано, что именно они делают и в каких ситуациях применяются.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥14❤7👍5
Например, стек работает по принципу LIFO — последний добавленный элемент извлекается первым, а очередь наоборот использует FIFO — первым выходит тот, кто пришёл первым.
На картинке — 7 основных структур данных: массивы, связные списки, стек, очередь, хеш-таблица, дерево и граф. Полезная база, которую стоит знать каждому разработчику.
Сохрани, чтобы не потерять!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11👍8❤6🤝1