Некорректная обработка TableStoreJsonLine при изменении структуры дата-каталога
Real-time, incremental ETL library for ML with record-level depend
Status: Alpha
Brought to you by:
otatarinova
Originally created by: puritanne
Воспроизведение:
- беру пример model-inference
- запускаю пайплайн - ок
- меняю структуру дата-каталога: удаляю pipeline_id
- пересоздаю БД
- перезапускаю пайплайн без очистки output.jsonline
- структура в output.jsonline получается такая:
{"input_id":3,"model_id":"upper","pipeline_id":null,"text":"ABC"}
То есть, идентификатор pipeline_id остается, но имеет значение null.
Ожидаю, что файл перезапишется и идентификатора pipeline_id не будет.