Почему не парсится JSON в Docker-контейнере?

Question

[Александр]

Столкнулся с такой проблемой.
Из-под локальной машины все работает, но, при деплое в прод этот код не отрабатывает

Код

var responseDto = await response.Content.ReadFromJsonAsync<TResponseDto>(SerializerOptions.JsonOptions, cancellationToken);
        response.Content.ReadAsStringAsync(cancellationToken).GetAwaiter().GetResult();
        return responseDto!;

Не совсем представляю, что выложить из кода сюда.
В общем был написан тест этого участка кода, т. к. думали может Unix ругается на регистр, он проходит, но, в проде валится, на локальной машине с таким же окружением все работает.
Никаких исключений не выбрасывает, нашли единственную лишь зацепку из логгера

Лог

Selected output formatter 'Microsoft.AspNetCore.Mvc.Formatters.SystemTextJsonOutputFormatter' and content type 'application/json' to write the response.
14 Aug 2023 12:22:51.395
Attempting to select the first output formatter in the output formatters list which supports a content type from the explicitly specified content types '['application/json']'.
14 Aug 2023 12:22:51.395
No information found on request to perform content negotiation.
14 Aug 2023 12:22:51.395
List of registered output formatters, in the following order: ['Microsoft.AspNetCore.Mvc.Formatters.HttpNoContentOutputFormatter', 'Microsoft.AspNetCore…

И проблема в том, что на одной прод машине все работает (тоже debian стоит), а на второй нет и никаких ошибок, все молчит

Есть такой фильтр и здесь показывает, что как раз Attachments который приходит с JSON пуст, хотя сам JSON можно вытащить.

Код фильтра

var resultDocs = response.Result.Item
    .Where(x => x.Attachments.Any(a => a.Type is AttachmentType.Deal or AttachmentType.Lead))
    .ToArray();

Опции сериализатор

Encoder = JavaScriptEncoder.Create(UnicodeRanges.BasicLatin, UnicodeRanges.Cyrillic),
        WriteIndented = true,
        PropertyNamingPolicy = JsonNamingPolicy.CamelCase,
        DefaultIgnoreCondition = JsonIgnoreCondition.WhenWritingNull,
        PropertyNameCaseInsensitive = true

В общем проблема, что проблема проявлятся лишь на одной прод-машине, в чем может быть проблема? Куда копать?

Comments

[Сергей Кузнецов]

Зачем вы хотите парситься?

[Александр]

Сергей Кузнецов, идет запрос к API, возвращается JSON, его десериализуем уже в модель, это ли не парсинг?

[Сергей Кузнецов]

Александр, я имел в виду формулировку вопроса. Вы написали что хотите СЕБЯ парсить. Стало интересно как и зачем)

[mayton2019]

А где сама ошибка?

[Александр]

mayton2019, как я и сказал, ее как таковой нету, я скинул, все что удалось найти в логгере

[mayton2019]

Александр, пока из того что мы видим - код работает as designed. Ошибок нету. Следовательно ты сам не понимаешь
как работает твой код.

Напиши одну функцию которой на вход приходит JSON и на выходе она возвращает несколько примитивов
или tuples в виде парсинга. И покрой эту функцию тестами. Скорее всего тебе на вход просто прилетел
JSON нового вида который ты не ожидал. Вот закрепи все варианты тестами.

Так делают в enterprise.

[Александр]

mayton2019, как я и сказал, я не знаю что именно выложить, код работает на всем кроме одной машины, на одном и том же json'e, нового вида нет. Я и спрашиваю причины не работы этого кода типа as designed.

[mayton2019]

Александр, я не специалист в dotnet. Но во всех языках, если разработчик чего-то не знает или сомневается - он делает логгирование. Добавь следующее.

logger.info("input json = " + ...... );

var responseDto = await response.Content.ReadFromJsonAsync<TResponseDto>(SerializerOptions.JsonOptions, cancellationToken);

logger.info("responseDto = " + Convert.ToString(responseDto );

[Александр]

mayton2019, возвращает просто null, что было весьма очевидно. Я по этому и спрашиваю - в чем проблема. В самом System.Text.Json? Если да, то почему только на одной машине?

[mayton2019]

Александр, какой документ в этот момент приходит на вход? Я предполагаю что там - IO-Exception и ты получаешь недописанный до конца документ. Поврежденный документ. И эта ошибка не детектируется но просто ReadFromJsonAsync возвращает пустоту.

[Александр]

mayton2019, к сожалению, сам документ не могу прикрепить. Но, приходит один и тот же (отчет за определенную дату) и вся проблема в том, что оно просто не работает на одной из машин. Ни IO exception, никакого exception нету, если бы он был, я бы и не задавал этот вопрос :) Весь код и та же последовательность действий работают на других машинах.

[mayton2019]

Александр,

оно просто не работает на одной из машин

продолжай декомпозицию этой функции на части. Она состоит из двух частей. Собственно - асинхронная
операция I/O и парсинг.

Сделай так чтобы эти две операции были раздельны и мы могли трассировать шаги.

Блин почему я должен тебя за руку вести по простой активности разработчика??

Answer 1

[Сергей Соловьев]

1) Может у вас прокси стоит, который заголовки удаляет?

Логи говорят, что невозможно выполнить согласование контента (content negotiation).

2) Попробуйте вручную зарегистировать Json форматтер для запросов первым с списке.

В списке первым стоит `Microsoft.AspNetCore.Mvc.Formatters.HttpNoContentOutputFormatter`. Не работал с ним, но название говорит, что это какой-то Fallback класс, который просто скипает запрос