При выгрузке или загрузке больших файлов JSON (сотни мегабайт/гигабайты) возникают проблемы:

• Аварийное завершение процесса rphost с ошибкой Недостаточно свободной памяти (Out of memory).
• Функция ПрочитатьJSON() или ЗаписатьJSON() зависает при попытке десериализации дерева структур целиком в ОЗУ.
• Превышение лимита памяти на рабочий процесс 1С и принудительный перезапуск сеанса сервером кластера.

1. Разница между объектной и потоковой обработкой JSON

Метод ПрочитатьJSON(ЧтениеJSON) загружает весь документ в виде единого объекта (Структура / Соответствие / Массив), что требует объема ОЗУ в 5-10 раз больше размера самого JSON-файла. Потоковое чтение (Streaming API) считывает файл токен за токеном, удерживая в памяти только один текущий элемент.

2. Потоковая генерация JSON-файла большого объема

&НаСервере
Процедура ВыгрузитьНоменклатуруВПотокJSON(ИмяФайлаВыгрузки)
    
    ЗаписьJSON = Новый ЗаписьJSON;
    ПараметрыЗаписи = Новый ПараметрыЗаписиJSON(ПереносСтрокJSON.Авто, " ", Истина);
    ЗаписьJSON.ОткрытьФайл(ИмяФайлаВыгрузки, КодировкаТекста.UTF8, , ПараметрыЗаписи);
    
    ЗаписьJSON.ЗаписатьНачалоОбъекта();
    ЗаписьJSON.ЗаписатьИмяСвойства("version");
    ЗаписьJSON.ЗаписатьЗначение("2.0");
    
    ЗаписьJSON.ЗаписатьИмяСвойства("items");
    ЗаписьJSON.ЗаписатьНачалоМассива();
    
    Запрос = Новый Запрос;
    Запрос.Текст = 
        "ВЫБРАТЬ
        |   Номенклатура.Ссылка КАК Ссылка,
        |   Номенклатура.Код КАК Код,
        |   Номенклатура.Наименование КАК Наименование,
        |   Номенклатура.Артикул КАК Артикул
        |ИЗ
        |   Справочник.Номенклатура КАК Номенклатура
        |ГДЕ
        |   НЕ Номенклатура.ЭтоГруппа";
        
    Выборка = Запрос.Выполнить().Выбрать();
    
    Пока Выборка.Следующий() Цикл
        ЗаписьJSON.ЗаписатьНачалоОбъекта();
        ЗаписьJSON.ЗаписатьИмяСвойства("guid");
        ЗаписьJSON.ЗаписатьЗначение(Строка(Выборка.Ссылка.УникальныйИдентификатор()));
        ЗаписьJSON.ЗаписатьИмяСвойства("code");
        ЗаписьJSON.ЗаписатьЗначение(Выборка.Код);
        ЗаписьJSON.ЗаписатьИмяСвойства("name");
        ЗаписьJSON.ЗаписатьЗначение(Выборка.Наименование);
        ЗаписьJSON.ЗаписатьИмяСвойства("article");
        ЗаписьJSON.ЗаписатьЗначение(Выборка.Артикул);
        ЗаписьJSON.ЗаписатьКонецОбъекта();
    КонецЦикла;
    
    ЗаписьJSON.ЗаписатьКонецМассива();
    ЗаписьJSON.ЗаписатьКонецОбъекта();
    ЗаписьJSON.Закрыть();
    
КонецПроцедуры

3. Потоковое чтение огромных файлов JSON

&НаСервере
Процедура ЗагрузитьБольшойJSON(ИмяФайла)
    
    ЧтениеJSON = Новый ЧтениеJSON;
    ЧтениеJSON.ОткрытьФайл(ИмяФайла, КодировкаТекста.UTF8);
    
    // Позиционирование на массиве элементов
    Пока ЧтениеJSON.Прочитать() Цикл
        Если ЧтениеJSON.ТипТекущегоЗначения = ТипЗначенияJSON.ИмяСвойства И ЧтениеJSON.ТекущееЗначение = "items" Тогда
            Прервать;
        КонецЕсли;
    КонецЦикла;
    
    // Пропускаем начало массива
    ЧтениеJSON.Прочитать();
    
    // Потоковая десериализация каждого объекта массива по отдельности
    Пока ЧтениеJSON.ТипТекущегоЗначения = ТипЗначенияJSON.НачалоОбъекта Цикл
        // Считываем только один элемент в структуру
        ТоварСтруктура = ПрочитатьJSON(ЧтениеJSON, Ложь);
        
        // Бизнес-логика обработки элемента без накопления в ОЗУ
        ОбработатьОдинТовар(ТоварСтруктура);
    КонецЦикла;
    
    ЧтениеJSON.Закрыть();
    
КонецПроцедуры