Полное условие и решение

Рабочий материал для самостоятельного использования. Скопируй текст в свой документ и адаптируй под свою задачу. Данные не отправляются.

Практикум: опубликовать только завершённый экспорт

Нужно сформировать 100000 строк вида row,index с переводом строки и без заголовка. Индексы идут от 0 до 99999. Источник передаёт каждую строку отдельным Buffer. Readable и Writable используют highWaterMark=64 байта. Медленный Writable записывает данные в свой временный файл, уступая выполнение между записями.

Итоговый CSV появляется после успешного pipeline и закрытия файла: временный файл переименовывается внутри одной директории и файловой системы. У каждого задания собственный уникальный id. Существующий итоговый путь отвергается; одновременно выполняемые задания в тесте имеют разные id.

AbortController моделирует отмену после записи 37-й строки. В этом случае временный файл удаляется, готовый CSV не создаётся. Аналогичное правило действует при ошибке записи. Отдельно проверяются пустой экспорт, отмена до старта и два параллельных задания.

Это локальный файловый получатель, не настоящий HTTP-клиент. Аварийное выключение ОС, fsync, восстановление orphan-файлов после падения процесса и межпроцессная блокировка одинакового id не входят в проверенную модель.

Что уточнить и как решить

Спроси, что считается готовностью: закончить генерацию, доставить байты клиенту или опубликовать файл для последующего скачивания. Уточни, допустима ли частичная выгрузка, как действует отмена и кто владеет именем результата. Без этого невозможно понять, можно ли переименовать файл в finally.

Ответ интервьюеру:

Я разделю генерацию, запись и публикацию. Потоковая генерация не собирает весь CSV в массив. Pipeline согласует скорость и ошибки; собственный Writable корректно завершает активную запись. После успеха закрываю дескриптор и публикую файл. В finally остаётся очистка временного пути, а не безусловное создание результата. Операция rename не означает, что данные переживут любое отключение питания: долговечность надо оговаривать отдельно.

В коде учитывается возможность частичного результата файлового write: запись продолжается с нужного смещения до передачи всего chunk. Если запись не продвигается, это ошибка. После отмены нельзя закрыть файл одновременно с ещё работающей собственной записью; поэтому _destroy ждёт её завершения.

Ожидаемые исходы

СценарийИтог
100000 строкОдин готовый CSV, 100000 строк, верная SHA256
Отмена после строки 37AbortError, нет временного или готового файла
Ошибка записи строки 11Ошибка, нет опубликованного результата
Ноль строкКорректный пустой CSV
Отмена до начала потокаAbortError, файлов не остаётся
Два задания с разными idДва независимых результата
Существующий итоговый путьОтказ без его перезаписи
Неверные count/id, null или слишком длинный idОтказ проверки входа

Фактическая проверка и ограничения

На Node.js 26.8.2 команда node test.mjs прошла все сценарии. Файл из 100000 строк содержит 988890 байт; его SHA256 сверена с отдельно рассчитанным на Python эталоном. Пик writableLength, измеренный после каждого write и в начале _write, — 72 байта. HighWaterMark=64 задаёт порог обратного давления, а не жёсткий потолок очереди. Отдельная проверка трёх синхронно поставленных chunks по 8 байт фиксирует пик 24: прежний выборочный замер только в _write этого пика не видел. Это измерение конкретной очереди в конкретном запуске, а не общий расход памяти и не обещание производительности в реальном сервисе.

Команда node test.mjs --negative включает намеренно неправильную политику: после отмены всё равно публикуется частичный файл. Проверка обнаружила cancel.csv и завершилась с кодом 2. Значит, тест замечает важное нарушение состояния «готово», а не только считает строки на успешном пути.

Полный проект, README и журнал находятся в комплекте. Никаких серверов для запуска не требуется. В конце ответа назови оставшиеся производственные задачи: авторизацию скачивания, объём и срок хранения, лимит диска, контроль ошибок и восстановление после падения. Обсуди, какие из них входят в роль команды, вместо обещания готового production-решения по результату одного локального теста.