На этот раз сильно грузит диски из 1с http://www.gilev.ru/testg1c/
будем мериться?

собственно, у меня так:
http://wstaw.org/m/2013/09/25/0.png
4 sas 10к диска каких-то в 10 рэйде, проц xeon e5620, 24ггц, 24 гига ОЗУ

2,4 ггц :)

А на рабочем серве если запущу - юзеры повесятся?

(3) ну, минуты 3-4 им буде тяжело :)

Гилев купил твой тест?)

делается весьма быстро

(5) это другой

(7)+ но да

(4) Тогда я ночью запущу. Ну их нафиг

(9) в (1) - одновременно на сервере еще где-то 150 сонных хомячков сидело

(0) Результаты как-нибудь будут в дальнейшем сохраняться? Ну чтобы можно было сравнивать СУБД, контроллеры, диски, настройки?

(11) вопрос к Вячеславу же, не ко мне

(12) Ясно, спрошу.

http://wstaw.org/m/2013/09/25/Безымянный.png
Рейд 10 на сата дисках, 32 гб оперативы проц i7-4770K 3,5ГГц

+(14) Это годный результат?

Пишет менеджер заданий не активен
чозах

(16) на файловой не работает

(14)(15) видишь, в один поток - скорость хорошая, но при увеличении нагрузки - масштабируемости нету. там пользователи были, создавали нагрузку ощутимую, или нет?

(18) Около 60 человек. Но они в это время в основном висят

Красная, желтая и зеленая полосочки - это что?

(20) это калибровка 3 раза проходит, чтобы случайные флуктуации подавить

мой ноут
http://savepic.org/4486932.png

вот например в первый раз (красный график) у тебя кто-то нагрузил сервак, что прогон калибровки завершился

(22) не советую много пользователей на него пускать :)

(24)+ кстати, если проапгрейдить ноут ССДхой - разница будет очень сильная, судя по всему

http://wstaw.org/m/2013/09/25/Безымянный2.png Жесткий вроде норм вывозит

(25) видимо

а где расшифровка графиков? одни циферки без буковок

(28) для потоков это штуки, для остальных - это КБ/сек - во всплывающей подсказке на маркерах появляется, по горизонтали у калибровки - это размер строки (примерный, судя по отчету disk usage из скуля), у остальных - время.

(26) очередь зашкаливает

Мой комп:
Проц: i7-3770
ОЗУ: 32Gb
HDD: RAID-1 на двух терабайтных SATA дисках (Hitachi&WD)
http://wstaw.org/m/2013/09/25/i7_No_Cache.png

Потом включил FancyCache в режиме 1Gb - level-1 cache в ОЗУ и 10Gb - level-2 cache на SSD OCZ Vertex4
http://wstaw.org/m/2013/09/25/i7_Cache.png

http://wstaw.org/m/2013/09/25/Безымянный3.png Вот непосредственно, когда тест написал "тестирование".
Кстати, после второго прогона немного другой результат:
http://wstaw.org/m/2013/09/25/Безымянный4.png

Что такое количество потоков: 5?

(33) по графикам - это максимальное количество потоков, когда средняя скорость больше пороговой

(34) И как тест поможет мне понять, почему у меня плохая маштабируемость?

(35) "почему?" это очень сложный вопрос. вот например, почему при калибровке на 512КБ в 100% случаев на всех моих серверах  происходит проседание скорости записи?

(36)+ и не только у меня

(36) Т.е. тест для выявления наличия проблем. И все?

(38) ну, это же важный этап, например для превентивных действий.
а дальше - нужно мерить (в том числе всякие счетчики винды) и думать. может не вывозит проц, может - память, может - шина или даже рэйд-контроллер. может батарейка в контоллер поможет, еще варианты. в общем, много чего. вон, в (31) интересно.

(0) Можно небольшой ОФФ вопрос.

Где почитать про настройку 1С-ки / СУБД чтобы максимально задействовать железо и повысить производительнсть.

Например, имеем комп с процем КорАй-7 , 16 гигов памяти обычный жесткий диск (не рейд, не ССД). База серверная на SQL 2012

Запускаем в 1С-ке алгоритм расчета с использованием больших объемов данных (Запросы с миллионными выборками, многокртные циклические просчеты, и т.д.). Заглядываем в "Производительность" и видим что память сжирается практически мгновенно, а вот нагрузка на проц не доходит и до 50%

Можно как-то улучшить?!

Боевой сервер: Xeon X5675 3/07 GHz RAM 144 Gb
База на RAID10 из 6 SAS все винты Hitachi 256 Gb
Лог-файл на RAID10 из 4 SAS

http://wstaw.org/m/2013/09/25/worker.png

(40) улучшить можно за счет:
+исправления методических ошибок (типа получения ссылки запросом, а потом в обходе выборки - получение данных через точку от ссылки, запросов в цикле и т.п.)
+изменения текущего алгоритма (принципиально. например вместо сортировки пузырьком квиксорт, или использование приблизительного алгоритма, приняв для себя потерю точности)
+изменение структуры данных (в т.ч. индексы)
+распараллеливания (например как этот самый тест)

в зависимости от узкого места можно либо расширять его, либо менять алгоритмы таким образом, чтобы уменьшить его влияние

(42) Интересуют варианты:

+изменение структуры данных (в т.ч. индексы)
+распараллеливания (например как этот самый тест)

(43) ну, за индексы можно почитать http://msdn.microsoft.com/ru-ru/magazine/cc135978.aspx , например, за параллельность - хорошим подспорьем будет изучение node.js

(44) "node.js" - это же ява платформа. Как вы ее применительно к 1С юзаете?

(45) она мозг поворачивает в правильном направлеини

Домашний комп: Q9300, ОЗУ 4Гб, SSD Intel 320 series
https://dl.dropboxusercontent.com/u/67681686/testg1c_1.png

(46) колбэх хэл? :)

(48) говорят, в девятке таки будут колбэки

(49) до 9 дожить надо, тут он еще 8.3 не освоили.

Не пашет :(
http://clip2net.com/s/5P5woF

(51) на сервере 1с сильно загружен проц сейчас?

(52) В пределах 20%.

А второе и третье тестирование успешно завершились. Но результаты как-то сильно разнятся.
http://clip2net.com/s/5P5EnQ
http://clip2net.com/s/5P5Hzd

Какая-то фигня: при тестировании показывает нагрузку меньше 750 иопсов
http://clip2net.com/s/5P62kR

Тогда как во время работы бывает доходит до 3000.

(53)(54) а сервер 1с и скуль - на одной машине? по сети?
просто непонятно, почему на калибровке так колбасит, оно должно расти плавно. Ну и на диаграмме потоков есть падения - они происходят, когда фоновое задание 9 секунд не отвечает, и оно прибивается.

забыл проголосовать
i5, 5400, 4Gb
http://savepic.org/4486932.png
лууууузер

(55) Сервер 1С на винде, СУБД на другом серваке под линем.

(57) сеть нагружена?

(58) Не похоже.
Диаграммы загрузки ЦП и сети на сервере СУБД:
http://clip2net.com/s/5PjYdZ
Загрузка сетевого интерфейса на сервере 1с:
http://clip2net.com/s/5Pk37y
Результаты тестирования:
http://clip2net.com/s/5Pk5dY
Серваки соединены через гигабитный свитч.
Мне кажется надо что-то в самом тесте допилить для совместимости с мультиплатформенными конфигурациями.

(59) а процессор на сервере 1с? я у себя проверил - и с разнесением сервера 1с - субд адекватно работает

http://wstaw.org/m/2013/09/26/tgm.png
Только непонятно, когда тест решает, что надо остановиться.
Пришлось принудительно прервать.

(61) это постгре? прикольно, нету падения на 512 КБ.
решает остановиться, когда скорость ниже пороговой. ну, через несколько итераций подряд.

(61)+ реально интересные результаты. Что за система?

гиг в секунду. интересно, врет? что показывает монитор ресурсов? iotop, например, если линукс

(62)(63) Xeon E5-2680(два), контроллер на LSI SAS 2108, базы на зеркале из 15к SAS дисков, памяти достаточно много. CentOS 6.4, PostgreSQL 9.1.2 от 1С и 8.2.19.68. pg_xlog отдельно.

(64) Память на сервере 128ГБ, память на контроллере 512 МБ+батарейка, iotop показывает, что с дисками работы особенно и нет, так, периодически запись происходит.

(66) и это в момент, когда 1с в 30 потоков шлет строки по мегабайту на запись?

(66) А можно поподробнее про дисковую подсистему узнать. Тоже очень любопытно.

(0) Что за бредовые графики? По одной оси цифры и по другой цифры. Где легенда? Все для людей...

(69) +1
Именно про это хотел сказать, что один старый учитель говорил, что ось без обозначения - это бельевая веревка.

(70) Это сделано специально.
Если не понимаешь, что написано - тебе этот тест не нужен :)

(71) это сделано по причине неуважительного отношения к пользователю. я разберусь, но потрачу на это времени на "дельта икс" больше.

(72) если вы знаете, как подписи к осям добавить, прошу сообщить

(73) сорри. не знаю.

https://www.dropbox.com/s/7ktodfmjno270g5/test.jpg
Сразу оговорюсь, это не продакшн, это "медленные" диски 7К 2ТБ в RAID10, СХД по Fibre Channel. СУБД DB2 на одной машине с 1С, всё на SLES.

+(74) Остановилось с сообщением "Индекс за границей массива". Так и должно?

(75) вообще - нет :) а строка кода какая?

(76) Не было больше ничего. Только это сообщение, и кнопка "ок", на которую я нажал. Теперь прога вроде бы стоит (Текущая отметка остановилась на 10-46), а в консоли вижу продолжение действия фоновых заданий.
Если надо, могу по-новой запустить, выскочит опять-сделаю скриншот. Или в журнале (если он ведется в этой конфигурации) могу посмотреть.

(77) в журнале регистрации должна быть ошибка

(78) Посмотрю через час-полтора и напишу.

(67) Я к тому, что по сравнению с тем, когда выполняются iozone или bonnie++ с постоянной записью со скоростью 120-140 МБайт/с, тут бывают провалы в активности. На выходных посмотрю еще раз, сейчас меня бухгалтера съедят, если запущу тест.

по ссылке из (0) кое-что обновилось (правда результаты выдает те же, изменения скорее косметические)

(78) (79) вот:
{Обработка.Тестирование.Форма.Форма.Форма(140)}: Индекс находится за границами массива