kodnado.ru/articles
↻

Статьи

Короткие разборы по сайтам, ботам, скриптам, серверу и автоматизации. Без академичности: только то, что помогает быстрее понять задачу и принять решение.

2272 материаловРазборы по сайтам, ботам, API, серверам и автоматизации

Индекс Elasticsearch разросся: измеряем стоимость mapping на копии

Как сравнить размер на одинаковых документах, отделить реплики от структуры полей и уменьшить индекс без потери нужного поиска.

качество данных, диагностика, разработка Читать статью →

Похожие товары в каталоге: отличаем дубль от упаковки и предложения

Как определить товарную единицу перед дедупликацией, не смешать штуки с коробками и сохранить предложения разных поставщиков.

качество данных, диагностика, разработка Читать статью →

Очистка email: не превращаем опечатку в чужой адрес

Как разделить синтаксис, домен и подтверждение владения, предлагать исправления без тихой подмены и безопасно разобрать старую базу.

качество данных, диагностика, разработка Читать статью →

Компания отличается одной буквой: настраиваем список кандидатов

Как искать похожие названия компаний, учитывать короткие строки и общие слова и проверять качество без автоматического слияния контрагентов.

качество данных, диагностика, разработка Читать статью →

Нормализация ФИО: сохраняем написание, отдельно готовим поиск

Как разделить исходное имя, поля анкеты и поисковое представление, не потерять дефисы и инициалы и не объявить совпадение личности по строке.

качество данных, диагностика, разработка Читать статью →

Старая запись не помещается в новую модель: проверяем смысл преобразования

Как описать mapping старых статусов и значений, разделить отсутствие и неизвестность, организовать карантин и принять результат по бизнес-смыслу.

данные, миграция, разработка Читать статью →

Две старые системы прислали один ID: сохраняем происхождение записей

Как объединять независимые базы: составной ключ источника, таблица соответствий, разрешение конфликтов и перенос связей без случайного слияния.

данные, миграция, разработка Читать статью →

Агрегаты ClickHouse изменились после обновления: сравниваем один вход

Как разделить изменение выборки, формулы и числовой модели, воспроизвести расхождение на замороженных данных и задать критерий приёмки.

данные, миграция, разработка Читать статью →

Таблицы ClickHouse перенесены: проверяем, куда теперь ведут зависимости

Как принять перенос между кластерами: локальные таблицы, Distributed, словари, представления и изоляция от прежних источников.

данные, миграция, разработка Читать статью →

Входной JSON изменился: проверяем совместимость событий до загрузки ClickHouse

Как отличить новое поле от смены типа и смысла, испытать старого и нового отправителя и не потерять события при изменении схемы.

данные, миграция, разработка Читать статью →

Одну Redis-задачу выполняют все серверы: проверяем группы потребителей

Как отличить fan-out по разным consumer groups от повторной публикации и повторной доставки, не маскируя ошибку топологии блокировкой.

диагностика, backend, разработка Читать статью →

Redis отвечает cache hit, а страница медленная: считаем полный путь

Как измерить стоимость попадания в кеш, отделить последовательные обращения от сборки ответа и сравнить hit, miss и обход кеша.

диагностика, backend, разработка Читать статью →