Есть csv файл больше гига со списком недействительных паспортов.
надо проверять по нему вводимые паспорта, желательно почти мгновенно.

файл ФМС тут: кому интересно
http://services.fms.gov.ru/info-service.htm?sid=2103

будет ли быстрее напрямую в СКУль загрузить и проверять вхождение средствами скуля? или в 1с можно чото более быстрое организовать?

Проверка по базе загруженной в SQL будет почти мгновенно.

да и РС с одним полем не сильно долго должен работать

+(1)У меня по таблице с 1,5 млн записей выборка делается в доли секунды.
Это журнал регистрации 1С загруженный в SQL

Можно в dbf с индексом (если неохота править конфу).

а ведь наварняка можно и к цсв индекс замутить

(5)Думаешь???

(6) А почему нет?

(0) Можно покурить  тему как кинуть линк на текст и обычным Select * from where

(0) Искренне надеюсь, что "загрузить в скуль" - это не значит сразу в одно поле.

А парсинг и нормализация вполне может занять больше времени, чем построчная запись. Проверил бы уже)

(8) О господи...

попа еще и в том что файл обновляется каждый рабочий день. я пока так не узнал скоко у него строк.. все еще считает. ни ексель ни прочие не открыли его ваще

программно перебираю строки с утра. пока 2,5 млн строк... считает дальше...

(11) тогда РС не покатит

(12) не очень у меня умная идея, но может его нормализовать предварительно чем то другим а не средствами 1с ? Результат нормализации уже потом вгружать в программу

BULK INSERT в скуле

(15) спасибо. ценно. проглотит ли формат
http://blog.sqlauthority.com/2008/02/06/sql-server-import-csv-file-into-sql-server-using-bulk-insert-load-comma-delimited-file-into-sql-server/

>попа еще и в том что файл обновляется каждый рабочий день

гы... я так и думал, тогда в 1с лучше это не волочь

>А парсинг и нормализация вполне может занять больше времени, чем построчная запись

это умел DTS делать в скуле еще в 2000 году

(18) Ну вообще да) Но тоже не мгновенно)

(17) по ночам обновлять

(16) глотает любой формат с разделителями

(0)Попробуй(3)+(15)+(18)

(0)Ну как, что попробовал?

на 4 млн строке перебора 1с вылетела с нехваткой памяти...
пока больше не пробовал. боюсь скуль уронить

(24) комп г.вно

ЧтениеТекста использовал в одноэс?

(25) судя по нехватке памяти ТекстовыйДокумент

(24) "Уронить скуль" - я не знаю, что нужно сделать, чтобы уронить скуль. Скорее 1С-ка "подавится".

Попробуй загрузить данные сразу в Скуль.

(27) ну у вас и запросы - сказал скуль  и повесился

http://infostart.ru/public/252434/

(29) Забавно... Темп размещать на диске с? И базы данных, видимо, здесь же???  Колхоз "Красный Лапоть"...

(30) неважно, где в колхозе темпы размещены. в (29) написано как завалить

(0) автор, у тебя прием на работу тысячами в день происходит? может, лучше запрос к сайту делать, хотя бы и с капчей?

Красно-чёрное дерево присобачьте к файлику.

>на 4 млн строке перебора 1с вылетела с нехваткой памяти...
пока больше не пробовал. боюсь скуль уронить

причем ту скуль? клиент 1с отожрал положенную ему память и умер

(32) надо мгновенно без лишних движений операторов, табом с поля перешел - проверка прошла, если недействителтный - вызов ФСБ

перебором я пока хотел узнать сколько всего строк. перебирал ессно на локальной.
чтоб тестить на сервер надо доехать до сервера с флэшкой и присунуть комунить.

пока терпит

(11) diff натрави.

Наверно лучше булки инсерт и дтс ничо лучше не придумать. Поэтому как вставлю отпишусь

(5) можно, но гиморно и, главное, не нужно. Гораздо проще конвертнуть в БД, у которой индексы уже предусмотрены.