Analytical SQL

Оконные функции, агрегации и CTE — основной инструмент подготовки признаков на больших данных.

Ключевые тезисы

• Оконные функции считают лаги, скользящие суммы и ранги без выгрузки данных в память.
• Признаки лучше считать в хранилище: это быстрее и воспроизводимо в проде.
• QUALIFY, GROUPING SETS и семплирование экономят часы при работе с большими таблицами.

Подробный разбор

2 подтем — раскройте любую, чтобы увидеть объяснение, формулы, примеры и интерактивные графики.

SELECT user_id, ts, amount,
  LAG(amount, 1) OVER w                                   AS prev_amount,
  AVG(amount) OVER (w ROWS BETWEEN 6 PRECEDING AND 1 PRECEDING) AS avg_7,
  COUNT(*)    OVER (w RANGE BETWEEN INTERVAL '30' DAY PRECEDING AND CURRENT ROW) AS cnt_30d
FROM transactions
WINDOW w AS (PARTITION BY user_id ORDER BY ts)

Связанные темы

Платформа данных