Имеется mxl файл с плоской таблицей. Размер файла 85 Гб. Как его сохранить в текстовый файл с разделителями, если при открытии файла в платформе (не важно какой режим), или в программе "1С:Работа с файлами" потребляется более 128 Гб оперативки?

(0) Yoksel попробуй

(0) попробуй сделать то же самое в 1с, но открывать файл через прослойку в виде:
табдок.прочитать(
Новый ФайловыйПоток(<ИмяФайла>, <РежимОткрытия>, <РазмерБуфера>)
);

(0) А сколько памяти есть в наличии?

(3) Сейчас 32 Гб. Файл делался на машине с 128 Гб.

(4) Значит на той машине и конвертируй.

(1) Помер Yoksel.
(5) Рад бы, но при конвертации платформе требуется еще столько же памяти. Поэтому и сохранялось в xml.

(6) Позовите программиста, который умеет пользоваться ЗаписьТекста.

(6)

XML <> MXL

Определитесь плиз

(8) Да, MXL. В (6) описка.

(9)

1) Купить 128 Гб ОЗУ быстро/"дешево"/сразу заработает (наверное)
2) Ковырять формат MXL и написать свою компоненту для нативного чтения.
Самому или нанять кого.
Но тут смотри п1. -- стоимость 128 Гб ОЗУ

P.S.
Если не секрет, какой-такой чудодейственный метод может собрать целый mxl
Но не состоянии плюнуть текстовой строкой в плоский файл.

(10) Это выгрузка журнала регистрации за пол года. Анализировать его в платформе - то еще мучение. Выгружать в XML нужно больше ресурсов. Поэтому хотелось выгрузить в большой текстовый файл и анализировать его в Excel (благо он умеет работать с неограниченным текстовым файлом). Просто выгрузить в Excel не получается, т.к. ограничение количества строк.

(11)

Сейчас (наверное) придут "опытные собаководы" и расскажут про стек ELK и поделятся опытом

P.S.
Я бы начал с чтения
https://infostart.ru/1c/articles/1257666/

или чего-то подобного

P.P.S.
Увы, у самого так руки и не дошли.

(11) (12)

вот еще

https://infostart.ru/1c/articles/1432598/

(10) Восьмерка еще сырая. В 7.7 стандартно можно сохранить журнал регистрации как текстовый файл

(14) :-) В 8 тоже, но ресурсов на это нужно дополнительно.

(15) Через Еще - вывести в список тоже памяти не хватает?

(16) Да.

(16) Точнее не так. Журнал был выведен в список. Его удалось сохранить в mxl. Сохранить в txt нужно больше памяти. Сохранить журнал в XML, так вообще сразу всю оперативку сжирает не успев ничего записать на диск.

(17) тогда частями за период. Фары тер, по колесу стучал, почему не едет не знаю. (Из какого-то анекдота)

(0) только самому парсить mxl. у меня где то валяется mxl2csv.exe
писал пару лет назад. выложи примерчик. попробую, распарсит или нет.

о. даже mxl2xlsx.exe
и памяти ваще не потребляет. только таких больших не пробовал. 100-150 мгб были файлы

(18) Лет 10 назад выгружал достаточно большой журнал в xml без проблем. Только делал это периодами в квартал, потом склеил в отдельной базе, чтобы отчетики красивые рисовать

(22) Ну не в сам журнал, а справочник с нужными полями создал, в который этот журнал запихал.

(21) mxl2xlsx.exe - если есть скинь на [email protected]

ексель тоже помрет чем лдг не устроил?

(0) Эээээ, читать не весь файл одним куском а порционно?

(26)

А можно простой пример (код или псевдокод), как прочитать из моксель файла порцию строк откуда-нибудь с середины файла?

P.S.
Как прочитать что-то из плоского файла объяснять не нужно, fileseek и т.п. и т.д

(27) Структура известна - http://yoksel.net.ru/FormatMOXCEL/StrukturaFajjla#formatmoxcel/sekcii
читать последовательно, писать кусками. не?

А что windows уже отучилась виртуальную память использовать ?
Ну или Linux взять и swap-ов насоздавать хоть на терабайт.
Да,будет медленно,но что вы хотели.

На той машине,где сохраняли,почему именно mxl выбрали ?
ЗаписьXml умеет писать очень и очень большие файлы.

(29) + руками отключили виртуальную память?

(0) А если так: https://blogadminday.ru/import-xml-fayla-v-bazu-dannyh-mssql/

MXL - это табличный документ 1с.
Интересно,если такое же в Excel запихать в родном Microsoft-формате,какой размер файла будет ?
(Понятно,что новый формат xml в zip будет существенно меньше).

В 1С на уровне платформы есть методы по чтению информации из журнала регистрации. Пишешь простую обработку которая построчно читает журнал и пишешься его куда хочешь.

(11) >Выгружать в XML нужно больше ресурсов.
Как при помощи КД2 выгружают данные? Там же порциями пишется в файл, зачем пытаться всю таблицу сразу записать?

Xml - это файл последовательного доступа (если DOM не использовать)
Поэтому,очень удобно писать файлы любого размера.

(33) какие?

(0) Зачем в текст!? Засунуть все в БД, в постгрес, мускул, мелкОсофт или еще куда, настроить индексы и радоваться. При условии что все быстро [приемлемо] считывается.

(27), поддерживаю, поток => в => поток, главное инструментарий правильно выбрать