Архитектура работы с памятью и проблема DOM-парсинга

При обмене огромными объемами данных (например, выгрузка номенклатуры с миллионом позиций на сайт или загрузка маркетплейс-прайсов) через формат JSON разработчики 1С часто используют простые методы: формирование структуры (Дерева Значений, Массива) в памяти с последующим вызовом ЗаписатьJSON(Объект, ...) или использование функции ПрочитатьJSON(). Это DOM-модель: она пытается загрузить весь документ в оперативную память (RAM) рабочего процесса rphost.exe. Результат: экспоненциальный рост потребления памяти, падение процесса по лимиту (Ограничение памяти на рабочий процесс), зависание фоновых заданий и ошибка «Недостаточно памяти». Бизнес-риски: остановка интеграций, срыв обмена с внешними системами (API, интернет-магазины).

Сравнение методов обработки JSON в 1С

Алгоритмы потоковой обработки (Streaming)

Сценарий 1: Потоковая запись JSON (Стриминг в файл)

Вместо формирования гигантского массива, пишем элементы по одному прямо в дисковый поток.

 ЗаписьJSON = Новый ЗаписьJSON;
 ПараметрыЗаписи = Новый ПараметрыЗаписиJSON(ПереносСтрокJSON.Нет);
 ЗаписьJSON.ОткрытьФайл("C:\temp\export.json", , , ПараметрыЗаписи);

 ЗаписьJSON.ЗаписатьНачалоМассива(); // Начинаем массив товаров
 
 Пока ВыборкаТоваров.Следующий() Цикл
    ЗаписьJSON.ЗаписатьНачалоОбъекта(); // { 
    
    ЗаписьJSON.ЗаписатьИмяСвойства("SKU");
    ЗаписьJSON.ЗаписатьЗначение(ВыборкаТоваров.Артикул);
    
    ЗаписьJSON.ЗаписатьИмяСвойства("Price");
    ЗаписьJSON.ЗаписатьЗначение(ВыборкаТоваров.Цена);
    
    ЗаписьJSON.ЗаписатьКонецОбъекта(); // } 
 КонецЦикла;
 
 ЗаписьJSON.ЗаписатьКонецМассива(); // Завершаем массив
 ЗаписьJSON.Закрыть(); // Сброс буферов на диск

Сценарий 2: Потоковое чтение JSON (SAX-подобный парсинг)

Читаем узлы последовательно, не загружая файл целиком.

 ЧтениеJSON = Новый ЧтениеJSON;
 ЧтениеJSON.ОткрытьФайл("C:\temp\import.json");
 
 Пока ЧтениеJSON.Прочитать() Цикл
    ТипУзла = ЧтениеJSON.ТипТекущегоЗначения;
    Если ТипУзла = ТипЗначенияJSON.ИмяСвойства И ЧтениеJSON.ТекущееЗначение = "SKU" Тогда
        ЧтениеJSON.Прочитать(); // Переходим к значению свойства
        Сообщить("Обработка артикула: " + ЧтениеJSON.ТекущееЗначение);
        // Вызов логики обработки товара...
    КонецЕсли;
 КонецЦикла;
 
 ЧтениеJSON.Закрыть();

Типовые ошибки программистов 1С

• Попытка смешивать стриминг и DOM: Использование ЗаписатьJSON() внутри цикла обхода выборки перезапишет файл (или сформирует невалидный JSON с множеством корневых элементов), а не добавит данные в конец.
• Забытый метод Закрыть(): Объект ЗаписьJSON держит эксклюзивную блокировку на файле (File Handle) на уровне ОС и буферизирует данные. Без вызова Закрыть() файл останется заблокированным и неполным.