Есть функция, которая зачитывает текстовый CSV файл в ТаблицуЗначений:
http://forum.script-coding.com/viewtopic.php?id=5664
Сама выборка из файла работает очень быстро.
А вот помещение прочитанных строк в ТаблицуЗначений сделано "в лоб" и достаточно хорошо пожирает память.

Можно ли сделать лучше и как?

(0)
Считывать в ТЗ "кусками", как вариант, например по 5000 строк, потом обработка ТЗ, потом очистка ТЗ, потом следующая порция.

(1) Да, хороший способ.
Но хочется иметь ТЗ целиком, т.к. по ней удобно искать.

Где-то были какие-то временные таблицы, вроде (в 8.1, потом убрали?). Может, есть способы БЫСТРО загнать все данные в базу (в регистр или справочник какой-нибудь), чтобы потом делать выборки?

А ещё есть нересурсоёмкие хранилища, по которым удобно искать, кроме ТЗ?

В порядке бреда:
Одно из полей по котиорому будет поиск или первую букву в строковых полях фигачить в объект Структура, а для каждого элемента структуры свою таблицу значений.

35000 элементов никогда не будут быстро записаны в базу, посему опять таки в порядке бреда:

возможно имеет смысл подумать чтобы файл загружался заранее в каком-нибудь фоновом регл.задании в отдельную базу к которой потом через com.connector например делать запрос

То есть можно как-то более обще на задачу взглянуть

(0)
попробуйте скд. должо ускориться.

(6) А как именно? Можно кратко, по шагам?

(0)
Раз читаешь через ADO, то GameWithFire.dll тебе в помощь.

(6) Хорошая шутка, годная.

(3) Наверное, 6 ТЗ по 50 тыс. строк будут вешать комп так же, как одна ТЗ на 300 тыс. строк.

Нересурсоёмкое хранилище, по которому удобно искать - sqlite.

(8) Спасибо, сейчас попробуем...

(0)
Еще вариант. Загнать файл в таблицу Акцесс, а с Акцессом уже работать по COM.
Там и поиск можно замутить.

(8) Отлично, спасибо!
Быстрее раз в десять и более, висяков компа почти нет.

Орефков это голова

(15)
GameWithFire - это DmitrO, это он голова

Добавил по ссылке в (0) краткий пример.

(14)
Вот вам и сравнение скорости интерпретатора 1С с С++, тк унутре себя gamewithfire делает то же, что и твой код, только перебор сделан на С++, плюс вызываются через COM методы объектов 1С.

(11) А что-нибудь подобное 1sqlite для 8-ки есть?

(19) Присоединяюсь к вопросу :-)

(19,20) ой....

а, понял

(19), (20)
Есть COM-врапперы, вполне юзабельные в 1С 8.2
Использовал dhRichClient (http://www.thecommon.net/2.html, вполне нормально)
А так http://www.sqlite.org/cvstrac/wiki?p=SqliteWrappers - там смотрите COM Wrappers

(23) Спасибо, попробуем...

А что потом делается с этим файлом - не проще ли его сразу в базу читать по строкам - тогда никаких расходов памяти не будет ?