Сборка PostgreSQL для платформы 1С под Linux и Windows

http://www.postgrespro.ru/products/1c_build

На данной странице представлены для ознакомления собранные компанией Postgres Professional установочные пакеты новейшей версии PostgreSQL (9.4.4) под Windows 64bit и различные дистрибутивы Linux. В установочные пакеты включены изменения, предоставленные компанией 1C.

Представленное программное обеспечение предлагается для загрузки на бесплатной основе.

Если вы нашли баг, если у вас есть замечания или предложения, напишите на [email protected], мы обязательно ответим.

>> Есть интеграционные тесты - обновили postgres, запустили базу 1С и прогнали пару отчетов, любимые запросы к регистрам сведений?

>>Тем более в (0) заявляют, что они есть разработчики патчей этих.

функциональное тестирование нам проводили пара организаций, в дальнейшем постораемся это автоматизировать и опубликовать.
пока не получили зеленый свет со стороны 1С :)

(14) Если исходить, что 1С тестирует свои патчи со своей платформой перед публикацией (ведь мы все надеемся на это?), то логично предположить, что эти патчи будут работать, если их наложит кто-то другой.

(15) trusted builds будет, ни или хоть сам Dockerfile?
Ато, сравните документацию на запуск официального postgres и то что на hub лежит, docker pull уже не достаточно.

Dockerfile будет тут: https://github.com/postgrespro/

(17) у 1с патчи на версию 9.4.2 , тут же собраны под 9.4.4

>> docker pull уже не достаточно
наверно вот в таком направлении пойдем:
https://gist.github.com/vadv/16ee78201c3b2ab290a3

(21) для тестов подойдет, но для compose , trust - нет

(0) А чего для винды только 64-разрядные сборки?

>> А чего для винды только 64-разрядные сборки?
искали человека, которому 32 бита нужны :)

>> для тестов подойдет, но для compose , trust - нет
docker годится для чего-то кроме тестов? покажите мне организацию, которая не тратит времени на поддержку этих костылей в проде?

Проблемы с libicu46-52, я надеюсь решили? Из-за которых пересобирать пакет с сайта 1с приходилось, для установки на ubuntu

+(26). Я кривой, запятую пропустил. И убунту имелась в виду 14.04

кстати, недавно была ветка уже про Ваш сайт
Сборки PostgeSql_1с  от Postgres Professional

(27) см.(5)

>> И убунту имелась в виду 14.04
сломана убунту 14.04, спасибо за фидбек :(
обновление будет в вторник-среду.

(0)(30) Куда лучше фидбыки писать? Мы извращенцы, обычно ломаем неломаемое. :)

>> обычно ломаем

Пишите сюда: [email protected] или [email protected] обязательно ответим :)

хм... Спасибо!

(27) Добрый день! Для убунту починили (следует сгенирировать ru_RU.UTF-8 и en_US.UTF-8 локали). Обновлять сборки до 9.4.5 мы не будем пока, так как есть критичный баг, из-за которого будет общее обновление всех бранчей.

Попытался качнуть - ссылки не рабочие. Например
http://1c.postgrespro.ru/win/64/PostgresPro%201C_9.4.4_64bit_Setup.exe

(35) Прошу прощения. Починил!

(34) какой?

>> какой?
http://www.postgresql.org/message-id/[email protected]

(38) у нас при ответе можно просто номер ставить в скобки. Движок распознает.

Насколько круче MSSQL?

Поставить погонять что ли...

Эх..
Вкратце результат сравнения таков: производительность Microsoft SQL Server и PostgreSQL принципиально не отличается при условии: речь идет о PostgreSQL на Linux. А вот на Windows PostgreSQL ставить не следует - нерационально это.
http://catalog.mista.ru/public/248638/

(40) Честно? ничем не круче. MSSQL имеет нативную поддержку, PostgreSQL постольку поскольку. Но работа со стороны 1С сделать движок более дружелюбному к PostgreSQL есть. Плюс со своей стороны мы пытаемся сделать более умный планер запросов (генетические алгоритмы уже в каком то виде реализованы). Основная фича - стоимость.

(42) postgresql под windows будем исправлять.
есть много откровенных багов, пользователи windows по привычке считают это нормой. есть проблема с разделяемой памятью, но думаю если заказчики появятся на винде - будет заинтерисованость - будут новый патчи на перфоманс.

>>есть много откровенных багов
пока речь не про потерю данных:
а неожиданная остановка сервиса
или последствия требуют перезагрузки системы

(34) Спасибо, будем тестить. Полезное дело делаете)

А поделитесь пожалуйста конфигом для постгреса для 1С :)

http://kb.1c.ru/articleView.jsp?id=91

(48) Спасибо!

(44) а вас не спонсируют? Мне кажется странным, что государство на поддержку СПО не кошелится.

Поставил 9.4.4 на win при изменении параметра effective_io_concurrency > 1 перестает запускаться
хз в чем проблема, в событиях нет описания проблемы

(42) А зачем postges на windows? Сервер на CentOS/Debian поднимается с нуля за пару часов, в виртуальной среде еще быстрее, лицензий не просит.

(52) Дебиан поднят тоже, хочу для сравнения проверить производительность и заодно поиграться с конфигами
Первый тест показал проведение документов в винде быстрее :(

(51)
> type "c:\Program Files\PostgreSQL\9.4\data\postgresql.conf" | findstr /i effective_io
effective_io_concurrency = 2            # 1-1000; 0 disables prefetching

>"c:\Program Files\PostgreSQL\9.4\bin\pg_ctl.exe" -D "c:\Program Files\PostgreSQL\9.4\data" start
server starting
LOG:  parameter "effective_io_concurrency" cannot be changed
2015-10-15 10:31:48 AST FATAL:  configuration file "c:/Program Files/PostgreQL/9.4/data/postgresql.conf" contains errors

документация говорит нам о

Asynchronous I/O depends on an effective posix_fadvise function, which some operating systems lack. If the function is not present then setting this parameter to anything but zero will result in an error. On some operating systems (e.g., Solaris), the function is present but does not actually do anything.

в windows нет документированого вызова, который подсказал планировщику о том, что можно прочитать не только несколько страниц данных с диска, но вперед будет читаться еще N блоков.

https://msdn.microsoft.com/en-us/library/windows/desktop/hh780543(v=vs.85).aspx

в windows 8 появилось что-то, надо будет попросить программистов попатчить, попробовать :)

(50) нет, пока не спонсирует.

15 июня, 18:00
Минкомсвязь России назвало победителей среди заявок по импортозамещению программного обеспечения

Cистемы управления базами данных (СУБД). Победитель — «Постгрес профессиональный», «Диасофт», «1С». Второе место — отечественная СУБД «Линтер»: «Релэкс», «Диасофт Платформа», «Техносерв».


денег каких-то пока не видели.

Добрый день!
Мы обновили Linux и Windows сборки до 9.2.14, 9.3.10, 9.4.5. Также, для Windows включает в себя 2 патча, один из которых фиксит критический баг с остановкой Postgres и другой -- фикс на права доступа.

(58) Найти их можно на: http://1c.postgrespro.ru/win

(58) Также, мы учли пожелания и выложили x86_32 сборку под Windows.

(60) Могли бы дать рекомендации по настройке СУБД? Под интенсивное изменение данных, только под интенсивное чтение, только под интенсивную запись данных?
Те настройки которыми пользуемся получены при переводе оригинальных доков. Исходили из общих знаний IT.
Даже после такой настройки скорость работы с базами увеличилась почти в 5-10 раз.

(61) а какими вы пользуетесь настройками? Расскажите в чем отличия от стандартных.

(62)
Файл настроек https://yadi.sk/i/soSpGs8vjuqvN
Файл конфигурации сервера https://yadi.sk/i/6Q2bI_g2juqte
На сервере кроме PostgreSQL версии 9.2.1-1.1С(x64), поднят сервер SVN, и три экземпляра серверов 1С:Предприятие 8. Каждому экземпляру выделено по 5 Гб ОЗУ.
Файл pgstat.stat вынесен на ram диск.

На сервере около 79 баз. Ускорение рассчитываем по времени загрузки баз из dt файла. При настройках по умолчанию, загрузка шла около 20 часов. После изменения настроек 2-3 часа.

Одновременно работают не более чем с 5. Оптимизацию делали на чтение. Изменения редкие.

(63) Благодарю.

(65) А сколько пользователей?

А кто-нибудь уже опробовал в деле версии предлагаемые в топике?

(67) Около 6-8 пользователей. Тут храним копии баз. Обычно с каждой базой работает не более одного пользователя. Крайне редко количество пользователей на одну базу может достигать 10. Но все работают только на чтение. Исключения базы разработчиков. Это 4 человека. Там могут быть изменения.
(68) Опробовали :) Вчера, вроде, админу прислали фиксы. Пока не ставили. Срочная работа появилась.
Планируем в ближайшее время постепенно переходить на версии из топика.

Я проверяю на время заполнения и проведения документов, как будет удачный конфиг выложу

(69)
>Около 6-8 пользователей
у вас параметр max_connections = 100. Разве нет смысла его уменьшать?


>постепенно переходить
так бывает?

По хорошему, нужен не конфиг, а инструкция по настройке. Документацию, конечно, надо читать, но пробираться через 100500 параметров, выискивая по наитию нужный, - не очень эффективный вариант.

(71) Ок. max_connections порежем. Не думал что он много ресурсов может тратить.
Постепенный переход протестирован.  Поднимаем второй экземпляр СУБД на другом порту и постепенно туда базы новые добавляем. Старые переносим когда с ними никто не работает.
Версия из топика не смогла поделить память (предположительно) с имеющимися экземплярами. Но это было до выхода фиксов.
(72)Эх... где б ее найти на русском. Админ благо английский хорошо знает. Сидел почти месяц переводил. Потом вместе с ним по ключевым (на мое усмотрение) параметрам пробежались. Но исходил я из общих представлений "как работают" СУБД. Х.з. насколько точно вышло.

(72) свой конфиг можно сравнить с конфигом который "разогнал" чей-то сервак и подумать.

(74) Некогда думать, работать надо.

(75) А мануалы читать есть когда?

(0) Круто!
Надо бы посмотреть...

А может кто, на пальцах объяснить что за механизмы кэширования использует Postgre? Как я понял, при изучении переводов, СУБД использует систему кэширования данных предоставляемую ОС. И тут нужно выбирать объем который будет как бы свободным. Интересно, что делается с этим кэшем, когда эта память начинает использоваться под другие процессы? Она же не считается (по крайней мере в Windows) занятой.

(78) https://youtu.be/jGOkSerUPw4

(79) А вот за это - Спасибо!

(72) Вот вроде есть неплохой мануал
http://postgresql.leopard.in.ua/

(80) Будь ласка.

(81) Ух! Оно еще и актуализируется. Похоже устаревшую версию этого находил в других местах. Спасибо.

(58) Хочу спросить про huge pages, возможность использования которых включили в PostgreSQL, начиная с версии 9.4. Как я понял(если не ошибаюсь), в область huge pages помещаются shared buffers. Насколько эта возможность может быть полезна, на каком функционале СУБД эта полезность будет ощутимо проявляться? Или наоборот, работа может ухудшиться, есть уже какая-нибудь статистика по этой теме?
Речь, естественно, о Linux.

(84) для OLTP нагрузки должна помочь.

(0) Вчера весь вечер пытался с помощью pg_dump сделать бекап базы, не получилось
писал такую команду
pg_dump -F c -U potgres db > backup.tgz
или так
pg_dump -F c -U potgres -W db > backup.tgz
Во всех случаях пишет
не удалось пройти проверку подлинности...
Постгрес стоит на ubuntu server
т.к. на убунту не устанавливается пароль на пользователя, я установил его сам войдя под пользователем системы
sudo su postgres
psql
ALTER USER postgres WITH PASSWORD ‘123456’;

(86) ЧЯДНТ?

(86) >>pg_dump -F c -U potgres -W db > backup.tgz
Букву s в имя пользователя вставь

(88) шаман, лечишь по фотографии :) ?

(88) прошу прощения, писал команду руками сейчас, когда пробовал с десяток раз проверил правильность имени пользователя

(89) Телемедицина :)

(85) То есть, применительно к 1С, на мелких базах(10-20 ГБ) с типовыми конфами и количестве пользователей 20-40 смысла особого не будет, наверное.

(88) pg_dump -F c -U postgres -W db > backup.tgz
не работает
версия 9.4.5, у меня одного такая фигня?

(92) https://youtu.be/jGOkSerUPw4?t=32m21s вот с этого послушай.

(93) А вот так
pg_dump -F c -U potgres -W 123456 > backup.tgz

+ (95) точнее вот так
pg_dump -F c -U "postgres" -W "123456" > backup.tgz

(96) Так не сработает т.к. в команде нет имени базы )
pg_dump -F c -U "postgres" -W "123456" db > backup.tgz
Пробовал, пишет что-то не так с параметрами, попробую вечером еще раз

(94) Спасибо.

(97) Если у тебя без пароля то нужно
pg_dump -F c -U "postgres" -w db > backup.tgz

(99) пароль я установил как тут написал > (86)

(100) Может pg_dump нужно от имени postgres делать?
su postgres && pg_dump -F c -U "postgres" -W "123456" db > backup.tgz

пароли можно передавать так:
http://www.postgresql.org/docs/9.4/static/libpq-pgpass.html

пароли можно передавать так:
PGPASSWORD=123456 pg_dump -F c -U postgres db > backup.tgz

подробнее тут:
http://postgrespro.ru/doc/libpq-envars.html (скоро на русском, обновляется)

(101) пробовал, пишет что у пользователя postgres нет доступа (видимо на создание файла), права настраивать пока не умею (без мануала)
(103) т.е. мой способ изменения пароля неверен и бекап работать не будет? буду пробовать по (102) спасибо за наводку

(104) тогда так
su postgres && pg_dump -F c -U "postgres" -W "123456" db > /tmp/backup.tgz

https://wiki.postgresql.org/wiki/Pgpass/ru

(101) user@ubuntu-server:~$ pg_dump -F c -U "postgres" -W "123456" -d db> backup.tgz
pg_dump: слишком много аргументов командной строки (первый: "123456")
(103)
user@ubuntu-server:~$ PGPASSWORD=123456 pg_dump -F c -U postgres db > backup.tgz
pg_dump: [архиватор (БД)] не удалось подключиться к базе "db": ВАЖНО:  пользователь "postgres" не прошёл проверку подлинности (Peer)
(105) pg_dump -F c -U "postgres" db > /tmp/backup.tgz
Спасибо, получилось во временный каталог

(107)
ВАЖНО:  пользователь "postgres" не прошёл проверку подлинности (Peer)
дело не во временном каталоге, http://postgrespro.ru/doc/auth-methods.html#AUTH-PEER

(2) Жень, там не только репозиторий, они еще немного поправили postgres.conf добавив несколько хитрых настроек - хотя если честно то как показала практика: под каждую типовую нужен свой conf файл. Стоковый не работает

(0) Если честно я от вас жду адаптацию pgPool/pgBounser - без вашего опыта нам это не осилить: почти год работаем, так и не удалось убрать деградацию и артефакты.

(94) Дополнительно к твоей ссылке https://events.yandex.ru/lib/talks/2379/
В ответах на вопросы есть ответ и на мой вопрос по huge pages.

(109) поправили postgres.conf
поправили в initdb, который генерирует инстанс базы. конфиг который всех удовлетворяет невозможно создать, конфиг создан только для того чтобы можно было стартануть.

(109) Если честно я от вас жду адаптацию pgPool/pgBounser
вы озвучте, что хотите, посмотрим :)
[email protected]

(110) по поводу huge pages отвечал еще Лесовский из консалтинга на хабре http://habrahabr.ru/post/228793/

от себя могу добавить, что проблемы дефрагментации - лишний геморой. пока не будет use-case где это будет давать прироста перфоманса, я бы не включал.

(113)Да, я читал, спасибо.
http://rhaas.blogspot.ru/2014/03/back-from-lsfmm-and-collab.html здесь тоже рекомендуют просто не включать.

добавили oracle linux.