Установил Postgresql - с сайта Postgres pro под Windows- самая последняя 9.6 для 1с.

Выполнил рекомендации из ИТС и gilev.ru/postgres. Что на ИТС, что у Гилева встречаются настройки, которых нет в конфигурационном файле, например checkpont_segmens . Из рекомендаций Гилева мне не подошла настройка effective_io_concurrency - c подобной настройкой PG не стартует.


Сравниваю производительность баз данных под MS SQL и Postgresql , поэтому базы подняты с одного dt и выполняю одинаковые длительные обработки на одном и том же компьютере, обе СУБД на одном сервере.

Вот что я заметил. Время выполнения на обоих СУБД почти одинаковое, MS SQL почти всегда быстрее , но не критично , примерно 10%, диски под MS SQL производительней, все файлы PG на одном диске, поэтому такая разница устраивает и понятна.



НО... при втором, третьем выполнении этой же обработки, время на MS SQL уменьшается очень сильно, а на PG - уменьшения - нет .Вообще.

Например , один тест - под MS SQL 10 мин- первый запуск, 7 минут - второй запуск. Под PG- все время 12 минут.(Времена округленные).
второй тест под MS SQL первый прогон- 37, второй- 31 минута. Под Postgresql . Самый первый прогон - 50 минут, после vacuum full verbose analyze и изменения конфигурационнойго файла- 35 минут и на этом все, следующие прогоны вокруг этой цифры, уменьшения нет.


Можно ли добиться использования кеша 1с настройками Postgresgl? Или это не кэш?

(277) подскажи пожалуйста как у PG приятно настроить дифференциальные бекапы?

(286) да все постгресисты-одноэсники такие постгресисты ниибацо что делают бэкапы через выгрузку в dt, а когда спрашиваешь за barman или backrest - "че-че? не, не слышал..."

Архивация WAL? - ессно архивы нужно снимать с реплики - не, денег на второй сервер нет, 2 раза в сутки дамп будем снимать (у архива валидации нет - да и ладно, куроводство сказало и так сойдет)

Проблемы с pg_class при интенсивной работе - а что это такое о_О? вы всё передергиваете и фарцуете мс склем...

(287) резервные копии средствами postgres, архивация WAL работает, реплика тоже работает. Проблем с Postgres не имеем уже 3 года на 5 серверах.
Разницы с производительность  по отношению с MS практически нет (+/-)
Работать через psqд вполне научились, системных представлений и лога вполне достаточно чтобы решать все проблемы с производительностью и не оптимальными запросами.

Работает сервер на debian + postgres стабильнее, по крайней мере по части зависаний и перезагрузок.

Крутится около 20 баз, их них 6 под активной нагрузкой.

Что еще для счастья нужно?

(288) чтобы прийти к этому, нужно специально этим заниматься...как с MS - поставил, настроил и забыл - не получится

и обрати внимание с какими проблемами сталкиваются при нагрузочном тестировании
MS https://www.youtube.com/watch?v=0KN5DdkbS2g
PG https://www.youtube.com/watch?v=ID_W5nMi8cE

PG без допила ядра и патчей вообще не взлетел

+(289) причем эти патчи и допилы могут быть не приняты сообществом и в ванильный Pg не войдут, их скорей всего воткнут в платный Enterprise

вторую ссылку я видел, они как раз сказали что в Enterprise патчи уже включены
Первую посмотрю, но 5000 пользователей это близко не наш уровень, поэтому совсем голова не болит по поводу того кто будет лучше PG или MS на 5к пользователей.

Мы в свое время и на 50 MS SQL ложили;)

(288) Разницы с производительность  по отношению с MS практически нет (+/-)

И это при нулевых знаниях об ms sql. Откуда дровишки то про разницу? Когнитивные искажения?

(291) а сколько у вас активных пользователей?

(293) в основной 100, в других меньше.
Если база в которой до 40 млн записей в сутки, правда это база не связана с 1С.

(294) а у вас есть линукс админ+DBA?

(295) нет. Мы лет 6 назад пересадили ИТ отдел на ПК с linux + многие другие сервисы крутятся на linux, все с ним знакомы.
Сами сервера под Linux в обслуживании не нуждаются, только за свободным местом следим. Хотя есть один сотрудник, который Postgres начинал внедрять и лучше его знает.

(296) ясно, спасибо за инфу

(296) и 1сные сервера на линуксе?

(296) а, еще вопросик, у вас линуксовые сервера виртуальные?

(287) не трынди! Если твоя любимая соска/barman/backrest никому не нужна - это значит только что она никому не нужна.

WAL архивация? Прочитал наконец-то что есть онлайн-бэкап... может следующий раз не будешь так глупо выглядеть.

(292) а чем тебе не нравятся "нулевые знания об мс скл" ? Его же никто знать не должен или как? Тут всем как раз в голову вбивают, что в отличие по постгри, не нужно ничего знать - все работает само, а не так, как в кривом халявном постгри. Поэтому, увы.

(300) это не онлайн бэкап называется, а архивирование WAL

https://postgrespro.ru/docs/postgrespro/9.6/continuous-archiving

так что глупо сейчас ты выглядишь

(289) для комплекта не хватает оракла, в среднем если активных юзеров >300 - оракл рвёт сиквел как тузик грелку

(302) https://www.postgresql.org/docs/8.1/static/backup-online.html

(289)на 1с?

(305) к (303)

(302) Так он же через pg_dump архивы делает. Зачем ему что-то еще )))

(306) да, речь именно про 1с, до 300 активистов в базе не имеет никаких оснований для использования оракла, но далее...

(289) Может плохие танцоры?

(308) Кто тесты проводил? Есть публичная инфа?

(299) нет.так сложилось исторически что виртуализацией практически не пользуемся.

(311) а 1С сервер тоже на линуксе?

(299) например на лейзвийной циске у нас... но тут есть некоторые моменты в использовании с которыми я не согласен. Подробностей не будет, как минимум публично.

(313) А циска уже сервера выпускает? что-то я отстал от жизни

(314) очень давно.... но сцуко на мой взгляд они переоценены

(312) да, под виндой у нас только клиенты, и то не все.

(316) год-два назад некто В.Богачев рекомендовал сервера 1С для нагруженных систем размещать только под окнами....
Нагрузка большая?
Проблемы какие-то есть?

(316) И еще некто Лустин говорит что

"Однако там есть одна особенность – 1С-сервер лучше ставить все-таки не на Linux, а на Windows – из-за проблем с active directory и kerberos-библиотекой. Это связано не с Postgres, а с особенностью статической линковки библиотеки kerberos под CentOS, под Ubuntu и не только."

https://habrahabr.ru/company/pgdayrussia/blog/331448/

Реально есть какие-то "особенности" и вообще о чем он?:)

(318) Мне кажется какая то проблема может всплыть на уровне авторизации. Но не думаю, что такое может влиять на быстродействие.

(319) вот поэтому и хочется услышать человека у кого всё работает в продакшене ;)

(318) с таким не сталкивались, может быть на очень нагруженных системах, но это пока не наш случай.
(317) проблем нет.
Несколько тысяч документов в день, точных цифр уже не помню + активно пользуемся различными вед-сервисами из 1С ну и всякие регламентные задания, которых у нас достаточно.

(321) веб.

(321) ну документ документу рознь, тут оценить от чистого количество корректно не получится.

Веб-сервисы - это чисто обмен данными, вебморда, Rest/Odata?
Какие-то доп. возможности используете кроме веба (риб, ком, внешние источники и т.п.)?

(323) у нас сеть магазинов автозапчастей. Есть работа с веб-сервисами поставщиков, часть поставщиков присылают прайсы, которые парсятся, грузятся в отдельную БД и из нее погружаются в базы 1С, есть обмен с сайтом, правда трафик там небольшой,ну и по мелочи есть еще разные сервисы, которые из 1С используем, кроме того есть различные регламентные задания. Например у нас есть РС с текущей инофрмацией номенклатуры, куда каждые 10 сек записываются текущие остатки + всякая другая нужная информация

(301) Да просто радует логика чела. Я не знаю как это делают на сиквеле, но на слоне точно круче. Что-то из серии - не читал, но осуждаю.

(325) если про меня, то со всем что касается администрирования в ms sql знаком. Мы на sql до перехода на pg года 4 работали. И по поводу круче не нужно передергивать, хотя система резервирования на pg действительно круче.

(326) А чем лучше?

(327) Там из коробки работает репликация, можно реплицировать на несколько серверов. Но на самом деле это ничем не круче AlwaisOn и Windows Failover Cluster
https://docs.microsoft.com/ru-ru/sql/sql-server/failover-clusters/windows/windows-server-failover-clustering-wsfc-with-sql-server

Построение отказоустойчивых схем это овердофига денег и одной постгресовской репликацией ничего не решишь, поэтому непонятен этот аргумент. Ну есть репл-ция и чо?

(328) согласен что отказоустойчивая система стоит дорого. но есть бюджетный вариант резервного сервера с репликой.

Таблицы еще можно бэкапить. Хоть 1С не советует туда лазить но иногда это очень быстро, полезно и приятно)

(329) а зачем нужен резервный сервер с репликой, если автоматически на нее переключиться не получиться? да и где гарантия что получится вообще, если на основном сервере сгорит память и репликация не успеет завершиться?

+(330) насколько я помню прстгресисты говорили что за сутки задержка репликации доходит до нескольких минут

ну несколько минут не критично

Всяко лучше чем вчерашний архив поднимать

(330) всякое решение имеет соотношение цена/качество. На данный момент резервный сервер с репликой базы нас устраивает.
Да и где гарантия что WFS в нужный момент правильно сработает? Вы гоняли рабочие сервера на все возможные форс-мажорные обстоятельства?

(334) А вы переключались на реплики?

(333) зачем вчерашний? полный+диф+бэкапы лога+конечный фрагмент журнала

(336) ну ладно часовой давности

В мскл чтобы сделать (336) достаточно план обслуживания настроить, а на Pg нужно ибаццо https://eax.me/postgresql-replication/

(335) да переключались, во время обновления ПО на рабочих серверах.

(337) да откуда часовой-то? с точностью до секунды до сбоя можно восстановиться при фулл модели

(340) Ты бэкап каждую секунду делаешь? Откуда у тебя данные секундной давности?

А если файл не побит, то ничего и восстанваливать не нужно

(341) (342) /*рукалицо иди поучи матчасть штоли

(340) На одном и том же железе 4 года назад полную модель выключали, потому что сервер упирался в дисковую подсистему в пиковые моменты а также при создании диф. копий.
Сейчас PG пишет WAL без заметной нагрузки на диски.

(339) сколько заняло время переключения?
(344) с реплики пишет?

(345) до 10 мин.

(345) WAL пишутся на рабочем сервера, до каскадной систему репликации мы еще не дошли;)

(346) у меня восстановление из бэкапа занимает столько же
(347) всё это надо админить, само просто так не работает...

+(348) ну может минут 20, а не 10, но одинхрен сопоставимо

при этом я одинесник а не админ

(348) а размер БД? У нас восстановление идет около часа. (350) Я тоже далеко не админ.

(351) около 100 Гб

(351) >>Я тоже далеко не админ.

так вас целый отдел линуксоидов + постгресист, а я один+виндовый одмин который в базах ни бумбум

(352) сопоставимо, у нас чуть более 80.
А за счет чего у вас 20 мин получается? Винты SSD или регистров не так много?
(353) у нас отдел 1С-ников в первую очередь.

У нас на SAS + RAID 10 на MS SQL 2005/2008 восстановление около часа шло.
(354) Хотя регистры тут наверное не причем

(355) SSD + проц https://ark.intel.com/ru/products/91754/Intel-Xeon-Processor-E5-2680-v4-35M-Cache-2_40-GHz

Хотя справедливости ради надо сказать что если сервак упадет то скорость восстановления на другом железе будет меньше, на моем рабочем компе разворачивается около часа.

(356) ясно.

Кто в курсе, дайте, пож-та, ссылку на не старую (максимум год) публикацию Лустина про Postgresql

(359) У него только вебинар платный был. Таких руководств вроде нет

(359) а зачем именно Лустин?

Я несколько раз видел эту фамилию в сочетании с postgresql :)

https://www.1c-interes.ru/catalog/all6964/25227623/

•Глава 6. Администрирование PostgreSQL при работе с «1С:Предприятием» ?Основы
?Расширения
?Логирование
? Настройки PostgreSQL для работы с «1С:Предприятием» ?Основные параметры postgresql.conf
?Общие положения
?Настройки сервера для PostgreSQL
?Обозначения
?Параметры производительности
?Параметры для платформы «1С:Предприятие»
?Online_analyse

?Расследование проблем
?Резервное копирование и восстановление ?Дамп SQL
?Физические бэкапы
?Непрерывная архивация

?Дополнительные источники информации

(363) когда чуваки, которые написали эту чудо-книгу, научатся диагностировать постгрес на таком уровне как чуваки с яндекс-почты, тогда они будут иметь право что-то спрашивать на своем экзамене, ггг

https://habrahabr.ru/company/pgdayrussia/blog/329178/

+(364) а у них в букваре картинки постгреса под винду, бгг

(365) потому что кроме, грубо говоря, балбесов из под винды никому больше эти картинки неинтересны :))))

Ребята, а вы сами напишите.

Начало такое

Настройка PostgreSQL версий 9.6 и 10.0 на максимальную производительность для платформы 1С.

(368) шаг (0) установить линукс

(369) шаг один - открыть терминал

(370) шаг два - снес линукс, поставил ms )

(368) максимальная производительность будет зависеть от ваших конкретных условий - железа, базы данных, нагрузки на эту базу данных.
Общих рекомендаций по настройке PG а также по доработке конфигурации можно много где найти, на том же сайте 1С.
А дальше нужно тестировать и смотреть во что вы упираетесь.

(371) шаг три - наконец-то начал зарабатывать деньги на 1С

(368) >>Настройка PostgreSQL версий 9.6 и 10.0 на максимальную производительность для платформы 1С
Это больше похоже на строку в резюме или название услуги.
И то и другое платно.

С этих слов начинается статья

https://kb.1c.ru/articleView.jsp?id=91

только там про версии 9.2-9.4

(375) думаешь сильно изменилось?

Hi All!

Народ, поделитесь плиз дистрибутивом

PostgreSQL для Linux x86 (64-bit) (DEB), версия 9.6.6-1.1С

Странное дело, на https://releases.1c.ru/ он весит всего 5 метров!

Буду очень признателен!

Михаил.

может там онлайн установщик?

Нет, там таровский архив

postgresql_9.6.6_1.1C_amd64_deb.tar.bz2

с *.deb файлами-пакетов внутри

(377) Бери отсюда
https://postgrespro.ru/products/1c_build

+ (380) Точнее от сюда. https://postgrespro.ru/products/archive/1c

Там то же самое.

(379) Там еще есть архив с доп. модулями. Он тоже нужен.

Архива с до. модулями не увидел.

Там ведь только добавляется репозиторий с ключем, из которого ставится постгри...

Hi All!

Все заработало. Почти сутки - полет нормальный :)

Спасибо!

P.S. Таки не понятно, почему на портале ИТС выложен огрызок дистрибутива:

libpq5_9.6.6-1.1C_amd64                    deb?130096
postgresql-9.6_9.6.6-1.1C_amd64            deb?4038 K
postgresql-client-9.6_9.6.6-1.1C_amd64     deb?1197 K
postgresql-contrib-9.6_9.6.6-1.1C_amd64    deb?524878

http://catalog.mista.ru/public/554213/