Регламентным задание каждую минуту запрашиваю информацию, которую получаю в виде xml-файла.
Сейчас сваливаю все файлики в общую сетевую шару, чтобы их могли читать все, кому надо.
В итоге - файлов много, размер большой.

Какие есть варианты всё это хранить в сжатом виде, учитывая, что к любому файлу доступ нужен быстрый и постоянный?
Кроме написания своей базульки, в которой сжимать текст и хранить в реквизите?

gDrive

По дням каталоги создай и раскладывай. Если не хватит - по часам.

венда умеет работать с зип папками

а какая разница где хрониьтся в файле на диске или в файле на скуле? Или типа место на диске кончаеться?

(0)
> файлов много
Разбивай по каталогам по дате

> размер большой
Включи сжатие NTF (если windows)

(5)+ NTFS

(4) В скуле я могу перед записью его сжимать, а перед выдачей разжимать. На диске, конечно, тоже можно, но читалка понадобится какая-то

(0) Должны только читать?

По теме так и продолжай сваливать в общую папку но сделай БД и API для выборки имен нужных файликов по отборам/фильтрам.

(3) Попробую. Фиг знает, будет ли этот зип на 500000 файликов тормозить

(8)+ Заодно чтобы этот API мог и сам файл по http отдавать кому надо, а кто не умеет тем есть на шаре файл описаний в csv например и пусть сами отбирают.

(8) Так размер быстро растет, надо сжимать

(10) Да, значит так и сделаю. Но тут уже, наверно, проще хранить сразу двоичными данными в БД.

https://www.theorycrafter.org/quipu/creating-a-simple-download-server-with-apache/

(11) А кто такие "их могли читать все, кому надо"?

(10) +100500
И если вдруг решат хранить файлики где-то в другом месте, проще будет переделать их получение. Вдруг на s3 какое-нить решатся))

(14) Всякие програмки, 1С:Бухия, 1С:Документооборот, 1С:ЧтоТоЕщё и прочее ПО

(16) Понял.

Тогда тупейший вариант, виртуалку подними с шарой и сжатием диска установленным и там и храни.
Сжатие можно или винда со своим сжатием дисков или линукс с zfs

(17)+ К сожалению поискал http to smb|cifs 2 proxy и не нашел ничего.
Чтобы умело получать/писать файлы по http и отдавать/предоставлять их как шара стандартная.

(18) ты наверно хотел вебдав?

(19) Неа для webdav должна быть поддержка у винде у клиента и оно глючное

(20)+ Думал про вебдав но понял что не то, можно да но неудобно юзерам им надо вебдав как диск подрубать и прочие извраты.

(21)+ Хотя если взять вебдав и подключить как симлинк на шару на сервере - хз что будет если честно.

Да. Направление ясно, спасибо )

(22) Как-то больно много промежуточных звеньев получается

для веб дав есть сторонние клиенты

(17) вроде бы делаем файл vhdx, монтируем, форматируем с разрешением сжатия и все

а файлики кто-то будет перезаписывать и т.п.?
если нет,то можно в один файл писать,как почтовая программа делает

(0) Для быстрого поиска можно проиндексировать пути хранения файлов. Веди спецификацию файлов. Тогда не придется их искать повторно.

Start SFTP Drive - по протоколу ssh конектится шарит как сетевой диск. SSH и винда и линукс можут..
Ну раз webdav предлагают...