Large key — это не фиксированный размер, а структура, операция над которой нарушает ваш latency budget. Большая строка перегружает сеть и копирование, коллекция с миллионами элементов делает линейную команду долгой, а удаление крупного объекта освобождает память. Сначала докажите связь со всплеском, иначе можно потратить окно работ на большой, но редко используемый ключ.
Не запускайте `KEYS *`, полный `GET`, `LRANGE 0 -1`, `SMEMBERS` или `HGETALL` для «осмотра» production. Redis рекомендует инкрементальные SCAN-команды и проверку алгоритмической сложности; одна диагностическая команда сама может стать причиной того простоя, который вы ищете.
Large, hot и slow — разные диагнозы
| Признак | Что происходит | Подтверждение |
|---|---|---|
| Large key | Один value/collection велик | MEMORY USAGE, тип и cardinality |
| Hot key | Очень много операций по одному key | Command/key telemetry и распределение трафика |
| Slow command | Алгоритм обходит много элементов | SLOWLOG и complexity команды |
| Memory pressure | Eviction/allocator/persistence добавляют задержку | INFO memory, stats и системные метрики |
| Network payload | Ответ велик для клиента/канала | Response bytes и client output buffers |
Один ключ может быть одновременно large и hot, но исправления разные. Локальный кеш уменьшит чтения hot key, однако не сделает безопасным `SMEMBERS` по огромному Set. Разбиение коллекции снизит размер операции, но может увеличить число keys и изменить транзакционные гарантии.
Сначала используем выборочные и ограниченные инструменты
# Запускайте с отдельного диагностического клиента и в непиковое окно
redis-cli --memkeys -i 0.1
redis-cli SLOWLOG GET 32
redis-cli TYPE candidate:key
redis-cli MEMORY USAGE candidate:key SAMPLES 5
# Для коллекций — SSCAN/HSCAN/ZSCAN небольшими порциями, не полный dump`--memkeys` и `--bigkeys` сканируют keyspace через SCAN и дают кандидатов; параметр `-i` добавляет паузу между порциями. На Redis Cluster проверяйте каждый primary shard по отдельности и фиксируйте время запуска. `MEMORY USAGE` с sampling даёт оценку для nested data types, поэтому принимайте решение вместе с cardinality и реальным временем команды.
Исправление выбирают по модели доступа
- Огромную строку разделите на адресуемые chunks, если клиенты читают части.
- Неограниченный List/Stream ограничьте retention по времени или длине.
- Hash/Set/ZSet разбейте по tenant, периоду или bucket, сохранив понятный индекс bucketов.
- Полный обход замените SSCAN/HSCAN/ZSCAN с resumable cursor и лимитом работы за итерацию.
- Тяжёлую агрегацию вынесите из request path либо считайте инкрементально.
Новая схема требует dual-read или dual-write перехода. Создайте версионированный namespace, переносите порциями с checkpoint, сравнивайте количество и контрольные агрегаты, затем переключите readers. Массовое переименование или копирование одного large value не уменьшает стоимость операций и может удвоить память.
Удаление — отдельная операция с риском
`UNLINK` отвязывает ключ от keyspace и освобождает память асинхронно, поэтому обычно уменьшает блокировку основного потока по сравнению с `DEL` для крупного значения. Но логический эффект мгновенный: читатели сразу увидят отсутствие данных, а фоновое освобождение всё ещё потребляет CPU. Сначала подтвердите владельца, TTL, возможность восстановления и запас памяти.
Если ключ — кеш, прогрейте новый путь и ограничьте stampede после удаления. Если это единственная копия данных, не удаляйте её как «оптимизацию»: сделайте проверенный export/backup и миграцию. В cluster multi-key операции дополнительно ограничены hash slots, что нужно учесть в новой схеме.
Приёмка смотрит на p99, а не только на память
- Повторить тот же sampled отчёт и зафиксировать размер/cardinality.
- Сравнить p95/p99 latency Redis и приложения в одинаковом окне нагрузки.
- Убедиться, что SLOWLOG больше не содержит прежнюю тяжёлую команду.
- Проверить корректность dual-read и отсутствие потерянных элементов.
- Провести ограниченный rollback на старый namespace до его удаления.
Для расследования подготовьте версию/topology Redis, тип и обезличенный шаблон key, MEMORY USAGE/cardinality, SLOWLOG без аргументов с данными, команду и графики latency. Значения keys, credentials, connection strings и содержимое пользовательских структур не передавайте.