Не начинайте с увеличения тайм-аута. Возьмите одну длинную запись и сравните размер, checksum, container duration и timestamp последнего аудиопакета в четырёх точках: файл у клиента, объект после загрузки, локальный вход worker и итоговый файл. Первая точка расхождения показывает повреждённый участок; сообщение «обработка завершена» само по себе ничего не говорит о полноте результата.
Если размер уже отличается в storage, FFmpeg не восстановит отсутствующий хвост. Если байты одинаковы, но декодер заканчивает раньше, смотрите ошибки контейнера и timestamps. Если полный промежуточный WAV становится коротким только после склейки, причина находится в списке сегментов, вычислении duration или условии завершения job.
Паспорт файла снимается на каждой границе
sha256sum input.m4a
stat -c '%s' input.m4a
ffprobe -v error -show_entries format=duration,size -of json input.m4a
ffprobe -v error -select_streams a:0 -show_entries packet=pts_time,duration_time -of csv input.m4a | tail| Граница | Что записать | Признак обрыва |
|---|---|---|
| браузер/клиент | size, checksum, ожидаемая длительность | клиент завершил запись раньше |
| object storage | Content-Length, ETag/checksum, upload state | не все части загрузились |
| worker input | size, checksum, ffprobe | скачан неполный объект или чтение оборвалось |
| после decode | exit code, stderr, last timestamp | ошибка контейнера или декодера |
| финальная сборка | число сегментов, диапазоны, output duration | пропущен или неверно склеен хвост |
HTTP-лимит и тайм-аут оставляют разные следы
Ограничение размера обычно отклоняет запрос или не создаёт полный объект; тайм-аут proxy может оборвать ожидание ответа, хотя фоновая задача продолжится. В Nginx `proxy_read_timeout` измеряет паузу между чтениями от upstream, а не полную длительность запроса. Поэтому увеличение значения без проверки журнала может только скрыть синхронную архитектуру, не исправив потерю данных.
- Сопоставьте request ID клиента, reverse proxy, API и upload session.
- Для multipart upload подтверждайте завершение только после всех ожидаемых частей.
- Не запускайте worker по событию первой части или временного файла.
- Отделите timeout ожидания браузера от состояния фоновой job.
ffprobe показывает, где заканчивается реальная временная шкала
Поле duration контейнера может быть неточным или отсутствовать, особенно у повреждённого файла. Сравните его с timestamps последних пакетов и stderr декодера. FFmpeg прямо предупреждает, что неверная duration, например у truncated file, вызывает артефакты при concat. Для решения важно понять, отсутствуют ли сами пакеты или только неверно описана их длительность.
Не подавляйте stderr ключом, который скрывает предупреждения в production-журнале. Сохраняйте exit code, версию FFmpeg, имя demuxer, число потоков и последние диагностические строки. Полный пользовательский файл в журнал или тикет не прикладывается; достаточно обезличенного тестового образца либо метаданных.
Сегменты собираются по manifest, а не по списку файлов в папке
Параллельная обработка создаёт гонку: aggregator может увидеть первые N сегментов и решить, что работа закончена. Manifest должен содержать ожидаемое количество, временные границы, checksum и состояние каждого сегмента. Готовность наступает после атомарного подтверждения всех частей, а повтор worker заменяется идемпотентным результатом с тем же segment ID.
job=aud_42 expected_segments=18
segment=17 start=1020.000 end=1080.000 checksum=... status=ready
segment=18 start=1080.000 end=1137.420 checksum=... status=ready
aggregate expected=18 ready=18
output_duration=1137.418 delta=-0.002 status=acceptedПри concat сверяйте одинаковые stream parameters и порядок. FFmpeg использует длительности частей для корректировки timestamps; ошибочное значение одной части сдвигает последующие. Если источники отличаются codec или time base, безопаснее нормализовать их в контролируемый промежуточный формат перед сборкой.
Критерий готовности сравнивает вход и выход
- Прогнать файл немного меньше порога, точно на пороге и заметно больше него.
- Подтвердить совпадение checksum между клиентом, storage и worker input.
- Сравнить last packet timestamp входа и декодированного промежуточного файла.
- Проверить полный manifest сегментов и успешный exit code сборки.
- Задать допустимую разницу duration с учётом codec/container и отклонять результат за пределами этого допуска.
Для воспроизведения нужны размер и checksum входа, вывод ffprobe, версия FFmpeg, stderr, manifest сегментов и идентификаторы job/upload без персональных данных. По ним видно, нужен ли ремонт загрузки, очереди или media pipeline; общее повышение лимитов больше не служит догадкой.