Предыстория
Обязательной операцией при любом внедрении или изменении существующей информационной системы является оценка необходимого быстродействия системы и планирование необходимых вычислительных ресурсов для ее реализации. В настоящее время не существует точного решения этой задачи в общем виде, и если, несмотря на
ее сложность и стоимость, такой алгоритм будет предложен каким-либо производителем, то даже небольшие изменения в аппаратной части, версии программного обеспечения, конфигурации системы или количестве или стандартном поведении пользователей приведут к появлению значительных ошибок.
Тем не менее существует достаточное количество способов . Все эти способы могут применяться в процессе выбора, но потребитель должен понимать их области применения и ограничения.
Большинство существующих методов оценки производительности основывается на том
или ином типе тестирования .
Можно выделить два основных типа тестирования:
компонентное и интегральное.
При компонентном тестировании проводится
тестирование отдельных компонентов решения, начиная от производительности
процессоров или подсистем хранения информации до тестирования
производительности сервера в целом, но без полезной нагрузки в виде того или иного
бизнес-приложения.
Интегральный подход характеризуется оценкой
производительности решения в целом, как его программной, так и аппаратной частей.
При этом может использоваться как бизнес-приложение, которое будет использовано
в конечном решении, так и некоторые модельные приложения, эмулирующие
некоторые стандартные бизнес-процессы и нагрузки.
Тесты TPC
и другие универсальные тесты позволяют выбрать наиболее перспективные платформы и сравнивать между собой предложения различных производителей, но являются лишь справочной информацией, не учитывающей специфики бизнеса. Специализированные тесты позволяют точнее выбрать конкретную модель сервера и его конфигурацию. Однако наиболее обоснованные решения принима ются только на основе результатов проведения нагрузочных тестов. Только они позволяют оптимально сконфигурировать выбранную
серверную платформу и провести ее настройку на максимальную производительность.
Что такое TPC -1C-GILV
Это серия независимых тестов, предназначенных для оценки быстродействия платформы 1С:Предприятие 8.1 на вашем компьютере (ах).
Разумеется, "независимый" тест означает, что он не спонсируется фирмой 1С.
В настоящее время доступен тест "TPC -A-local Throughput / TPC -1C-GILV-A" (последнее обновление - август 2008г. версия 1.0.3)
Идея теста TPC -A-local Throughput / TPC -1C-GILV-A
Вы скачиваете с данного сайта файл выгрузки конфигурации (~400 Кб) и загружаете у себя. Если развернете конфигурацию в файловых вариант, то в значительной степени тест будет тестировать связку "CPU вашего компьютера - HDD где лежит база".
Если развернете конфигурацию в клиент-серверный вариант, то преимущественно нагрузке подвергнуться CPU сервера приложений - CPU сервера субд - - сервера субд.
В тесте выполняется интенсивная запись 5000 документов. Глубокого смысла в бизнес-логике кода нет, оцениваться просто условно выбранная за эталон производительность документа Х.
Главная прелесть теста в том, что Вам не надо знать технических подробностей. Тест выполняется сам и сам выдает оценку. К тому же результат кому сообщать Вам тоже не обязательно:)
Вы можете сравнить производительность нескольких серверов, или одного сервера с разными характеристиками дисковой подсистемы.
Выполняя тест с сервера приложений и с клиента по сети можно понять влиятие сети на участке от клиента до сервера.
Как запустить тест
Запустить тест очень просто. Надо нажать кнопку
и дождаться пока индикатор теста (справа от кнопки) достигнет 100%.
Обычно тест длится около 8 минут.
Что означают результаты теста
Результат теста представляется как "скорость записи" данных теста. Погрешность теста составляет 2 единицы. Для точной оценки можно повторить тест 3 раза.
После того, как индикатор теста достигнет 100% вы увидите примерно такие графики:
Ниже графиков расположены некоторые ранее проведенные аналогичные тесты.
Цвет графика подсказывает о текущем качестве "общей" производительности для работы без учета блокировок.
Зеленый цвет графика в совокупности с некоторыми условно выбранными за эталоны показателями справа позволяет сделать кроссплатформенную обобщенную оценку "неплохой" производительности:)
Как радоваться результатам теста
Вы получили в качестве результата некий индекс производительности (считай скорости). Не важно, хороший или плохой результат - это результат работы ПЛАТФОРМЫ на вашем "железе". В случаи клиент - серверного варианта это результат . Вы получаете общий фактический результат, который определяется САМЫМ УЗКИМ МЕСТОМ в системе. УЗКОЕ МЕСТО ЕСТЬ ВСЕГДА!
Другими словами, и настройки СУБД, и настройки ОС, и оборудование оказывают влияние на общий командный результат:)
Какой сервер лучше
Данный тест, выполненный на конкретном сервере, дает результат по совокупности настроек hardware, операционной системы, субд и т.д. Тем не менее высокий результат на конкретном серверном оборудовании означает, что при соблюдении нормальных условий такой же результат будет на идентичном серверном оборудовании. Данный тест является бесплатной помощью в возможности сравнить установку 1С:Предприятие под Windows и Linux, три различных СУБД, поддерживаемых платформой 1С:Предприятие 8.1 .
Безопасность теста
Тест абсолютно безопасен. Он не приводит к "падению" сервера (отсутствует "стресс"-алгоритм) и не требует предварительных мероприятий даже на "боевом" сервере. Конфиденциальных данных в результаты теста также не записываются. Собирается информация о параметрах CPU, RAM, HDD. Серийные номера устройств не собираются. Во всем этом можно легко убедиться - код теста 100% открыт. Никакой пересылки информации без вашего ведома невозможно.
Как опубликовать результаты теста
Если Вы хотите помочь развивать тест, вы можете выполнить ряд тестов на своих серверах. Затем общего перечня сделанных тестов оставьте только те, что хотите опубликовать и пришлите dt-выгрузку с результатами.
Данные будут вручную проверены (что они не являются ошибочными), в колонку "автор" тестов добавляется адресат тестов и добавляются в выгрузку, доступную для скачивания всем.
Классификация TPC -A-local Throughput / TPC -1C-GILV-A
Тест относится к разделу универсальных интегральных кроссплатформенных тестов. Даже более того, он применим для файлового и клиент-серверного вариантов эксплуатации 1С:Предприятие. Тест работает для всех СУБД, поддерживаемых 1С .
Универсальность позволяет делать обобщенную оценку производительности не привязываясь к конкретной типовой конфигурации платформы.
С другой стороны это означает, что для точных расчетов заказного проекта тест позволяет сделать предварительную оценку перед специализированным нагрузочным тестированием (например с помощью 1С:Тестцентр).
Примечание. Модификация теста "A " означает "автоматическое управлением блокировками" . После выхода официальных версий типовых решений от 1С, планируется модифицировать тест для работы в режиме "управляемых блокировок" и обозначить буквой "M ".
Скачать тест
Данный тест не является коммерческим и .
Результаты тестирования
Топ - 3 лучших клиент-серверных инсталляций 1С на MS SQL Server. Вы тоже можете попасть в эту таблицу. Подробнее можно посмотреть результаты, скачав тест.
Технические подробности
Что происходит в тесте в рамках "одного" такта операции?
Как замерить загруженность железа
Надо отметить, что сам по себе тест уже частично выполняет замер. Для более детальной картины рекомендую воспользоваться утилитой Марка Русиновича .
На рисунке показан пример замера для файлового варианта.
Контакты для TPC -1C-GILV
http://сайт/1c/tpc
результаты тестов, предложения о развитии
Компьютеры(условное название) участвовавшие в тестах - описание (диски указаны только для БД):
(уточнение между серверами сеть 1 Гбит )
1) IT33 - десктоп на Core i5 4 ядра по 2.8 Ггц, DDR3 3 ГБ , один жесткий диск 7200 об/с .
2) REAL - САМЫЙ МОЩНЫЙ как мне думалось)) 8 ядер Xeon по 3 Ггц , DDR2 48 Гб , RAID10 на SSD
3) REAL2 - 8 ядер Xeon по 2 Ггц, DDR2 22 ГБ , RAID10 на жестких дисках SAS 10 000 об/с
Были проведены тесты в конфигурации 1с от Гилева:
"Сервер SQL"--->"Сервер 1с"--->"Оценка" + "Имя клиентского компьютера(если не указан то Он Же - певый в списке)">1)REAL2--->REAL2--->25.64(TCP--SQL)
>2)REAL2--->REAL2--->26.32(SQL--Shared Memory)
>3)REAL2--->REAL2--->25.64(SQL--Shared Memory) + IT33(клиент) - от клиента до Серверов сеть=10 Мбит
>4
)REAL2--->REAL2--->24.27(SQL--Shared Memory) + REAL(клиент) - хм.. странно сеть 1 Гбит... почему же меньше попугаев..
>5)REAL2--->REAL2--->37.59(Файловый)
**
****
**************************
>1)REAL--->REAL--->8.73(TCP--SQL)
>2)REAL--->Real2 --->11.99(TCP--SQL) --- это уже начало меня наводить на некоторые мысли))
>3)REAL--->REAL--->17.48(Файловый)
** **** ******************************
>1)IT33--->IT33--->26.88(TCP--SQL)
>2)IT33--->IT33--->34.72(SQL--Shared Memory)
>3)IT33--->IT33--->59.52(Файловый)
Итоги:
Смотрел результаты теста... крутил и так и сяк)) и вот осенило (сделал замеры скорости работы Оперативной памяти),
что на скорость работы 1с 8.х (замечу что Результаты Теста основаны на ОДНОПОЛЬЗОВАТЕЛЬСКОМ режиме, но и для клиент-серверного варианта при многопользовательской работе - думаю также будут иметь немалую долю влияния) -
итак на скорость 1С влияет: частота шины CPU + частота RAM памяти
----> что влияет на скорости ЗАПИСИ и ЧТЕНИЯ в RAM. Что и есть основа быстродействия 1с 8.х .
Компьютеры разделившие призовые места По скорости работы 1с))
1)IT33 --->IT33--->59.52(Файловый)
RAM DDR 3 (Чтение 11089 Мб/с, Запись 7047 Мб/с)------ как я и предпологал разница будет значительной с серверами
2)REAL2
--->REAL2--->37.59(Файловый)
- RAM DDR2 (Чтение=3474, Запись=2068)
3)REAL
--->REAL--->17.48(Файловый)
- RAM DDR2 (Чтение=1737 Мб/с, Запись=1042 Мб/с) - как выяснилось скорость ниже чем на Real2 - ровно в 2 раза,
из за включенных Виртуальных ядер (Гипер-трейдинг)- будем скорее всего отключать.
ВЫВОДЫ:
Наибольшая скорость работы 1с 8.х достигается:
I) для Файлового варианта (мне лично неинтересен)
А)запуск Клиента(любого) на компьютере с большой скоростью работы с Оперативной памятью. (например Терминальный сервер
БД тамже).
II) для Клиент-Серверного варианта
1) Толстые клиенты 1C на "Терминальном сервере" - с +
2) Тонкие клиенты 1C
- уже нет особой разницы где... но желательно настроить через "HTTP://".
3а) "SQL сервер" +"Сервер 1с предприятия"
(в режиме Shared Memory) - на одной тачке сНаибольшей скоростью Запись/Чтение оперативки
+ Наибольшая частота Ггц Ядер процессора
дисках
Уточнения:
- поддержка Shared Memory - появилась на движке начиная с 8.2.17 (ВНИМАНИЕ в конфигурации - не должен быть включен режим совместимости с предыдущими версиями движка), на предыдущих движках будет использоватся Naimed Pipes - тоже показывающий неплохие результаты))
- RAID на SSD дисках - целесообразно использование RAID10 - для отказоустойчивости, при этом беря в расчет ШРАФ на Запись:
пример RAID10 (4 шт Штраф записи=2) , Скорость Записи= 4/2 = 2 диска, Штрафа на чтение нет.
Еще можно дополнительно поднять надежность и стабильность скорости SSD - используя не весь объем диска.
пример(поднятие надежности Десктопного SSD до уровня Серверного SSD):
Если к примеру, SSD Intel 520 series 120GB, и разметить 81 GB, а остальное пространство оставить неразмеченным -
то под over provisioning будет выделено около 32% пространства SSD дополнительно к уже имеющимся скрытым 8%. Итого получаем около 40%
Отличие серверного SSD Intel 710 series от десктопного SSD Intel 320 series как раз и составляет разница в over provisioning: более 40% для Intel 710 и 8% Intel 320.
Если клиентов 1С много от 100 и далее:
1)На текущих технологиях сети Ethernet - НЕ ЦЕЛЕСООБРАЗНО ранесение "SQL""Сервер 1С" .
например из-за Латентности(задержек) в сети Gigabit Ethernet - реальная скорость обмена с SQL= 30 Мегабайт/с - что мало даже для интенсивной работы с Базой Данных 1-го пользователя.
2)Т.к. фактически "Сервер 1с"="Объектная СУБД" (многомерные объекты), а "SQL"="Реляционная СУБД" (плоское -табличное хранение данных)
=> в базе SQL -хранится ПЛОСКАЯ проекция Объектов 1С и Сервер 1С собирает из этой проекции Объект, далее проводит работы с этим Объектом и наконец по завершении работы Опять раскладывает в плоский вид сохраня в SQL.
То как следствие между "SQL""Сервер 1С" - и приходится отказыватся от разнесение на два физических сервера. Но можно использовать по полной реализацию NUMA-узлов. (Это должна поддерживать OS и сами процессоры ).
3б) Разносим сервера SQL и Сервера 1с отдельно
:
На текущих технологиях Ethernet - например Gigabit - НЕ ЦЕЛЕСООБРАЗНО
-SQL на сервер
с Наибольшей скоростью Запись/Чтение оперативки
+ Наибольшая частота Ггц Ядер процессора
-Несколько
ФИЗИЧЕСКИХ серверов в Кластере 1с
c Наибольшей скоростью Запись/Чтение оперативки
+
Наибольшая частота Ггц Ядер процессора
+ желательно ипользование RAID на SSD-
дисках
ИГОРЬ ЧУФАРОВ , начальник отдела интегрированных автоматизированных систем АО «Радиозавод», [email protected]
40 баллов в тесте Гилева –
миф или реальность?
Вокруг теста Гилева продолжаются бурные обсуждения, в том числе основанные на противоречивых результатах. Поделюсь своим опытом использования данного инструмента
Истоки неоднозначности
Впервые столкнувшись с тестом Гилева, многие специалисты удивляются нехарактерным результатам, которые получаются с его помощью. Например, десктопное железо может показывать более высокие результаты, чем дорогой мощный сервер. Файловая версия получает более высокий рейтинг, чем SQL. И если со вторым казусом все более или менее понятно, это объясняется и в документации к тесту, и в многочисленных обсуждениях на форумах, то из относительно низких результатов на дорогом серверном оборудовании однозначных выводов пока что никто не сделал.
Прежде чем проинформировать о полученных результатах, стоит пару слов упомянуть о самом тесте Гилева, рассказать, что же это такое.
Под именем «Тест Гилева» подразумевается нагрузочный тест TPC-1C, доступный для свободного скачивания по адресу .
Известные результаты
В источнике приводятся интересные результаты сравнения сервера на базе 2*Intel Xeon E5620 2,4 Ghz с 48 Гб оперативной памяти и персонального компьютера на Intel Core i5 3,0 Ghz с 16 Гб ОЗУ. Без дополнительных настроек иухищрений, что называется «из коробки», рабочая станция «порвала» сервер в тесте Гилева, показав на 155% более высокую производительность.
Сервер набрал примерно 17 баллов, в то время как десктоп – более 40. В результате экспериментов (большая часть из которых заключалась в урезании ресурсов десктопа, чтобы определить, насколько от этого деградирует результат теста) инастройки сервера авторам статьи удалось добиться 25,6 балла.
Результат, прямо скажем, далекий от 40 на обычном системном блоке. Так что же, сервер 1С лучше разворачивать на бюджетном железе, купленном в ближайшем киоске? Конечно же нет.
Обсуждение на Infostart Event 2016
За несколько дней до моей поездки на конференцию Infostart Event 2016 в Санкт-Петербург на сайте курсы-по-1с.рф появилось интересное двухчасовое видео о работе системы 1С:Предприятие в виртуализованных средах, подборе оборудования и вопросах производительности .
На конференции Infostart Event 2016 предполагалось выступление автора данного вебинара Андрея Бурмистрова – 1С-эксперта по технологическим вопросам крупных внедрений, работавшего как в фирме «1С», так и на многих крупных внедрениях в нашей стране, наставника более 2000 специалистов по курсу «Оптимизация производительности 1С» и подготовке к 1С:Эксперт.
На волне интереса к теме я пообщался с Андреем как виртуально, так и впоследствии на самой конференции. Один из вопросов, который я ему задал в ходе круглого стола НighLoad, касался возможности выпуска вебинара с референсным тестированием различных вариантов серверного оборудования – с SSD, с обычным жестким диском, в различной конфигурации оборудования. Ответ звучал примерно так: «Спасибо, идея интересная. Может быть, сделаем. Просто дайте нам Intel P3700, P3600, и мы с радостью его протестируем. Это не так просто раздобыть где-то на тестирование на неделю SSD».
Так вот, оказалось, что именно своими глазами практически никто из моих собеседников не видел больше 30 баллов в режиме SQL, а те, кто видел, отмечали, что это было не на серверном оборудовании.
Замкнутый круг? Назрел нешуточный вопрос: «40 баллов в тесте Гилева на серверном оборудовании в режиме SQL – миф или реальность?»
Статью целиком читайте в журнале «Системный администратор», №5 за 2017 г. на страницах 10-15.
PDF-версию данного номера можно приобрести в нашем
1С Тест-центр 8 — специализированный программный продукт фирмы 1С, который позволяет оценить производительность системы и изучить узкие места информационной системы.
Ранее мы рассмотрели на произвольную конфигурацию. Теперь же научимся создавать сценарии многопользовательского тестирования конфигурации пользователями и запускать само тестирование.
Сценарий тестирования в 1С Тест-центр пишется внутри специально созданной обработки. Шаблон такой находится внутри конфигурации, он имеет название «ТЦШаблонТестовойОбработки». Для создания собственного сценария теста необходимо скопировать данный шаблон и на основании него создать свой, новый, назовём его «Перепроведение поступления товаров»:
Добавим в обработку новый реквизит и выведем его на форму — «ДокументДляКопирования», это тот документ, который мы будем копировать.
Рассмотрим подробнее модуль формы. В нем можно использовать три процедуры — ТЦИнициализировать(), ТЦВыполнить(), Удалить().
- ТЦИнициализировать — используется для начального заполнения настроек информационной базы, например, заполнение учетной политики.
- ТЦВыполнить — основной модуль, в котором прописывается непосредственно сценарий тестирования.
- ТЦУдалитьДанные — модуль, в котором описывается удаление объектов, созданных в процессе тестирования.
Напишем в процедуру ТЦВыполнить() простейший код, который будет 5 раз подряд копировать выбранный документ и замерять копирование и проведение каждого документа:
Для й=1 По 5 Цикл
Инструменты = КипВнешнийКомпонент.ПолучитьИнструменты();
ВремяНачала = КипВнешнийКомпонент.ЗначениеТаймера(Инструменты);
Получите 267 видеоуроков по 1С бесплатно:
СоздатьДокументы();
ВремяОкончания = КипВнешнийКомпонент.ЗначениеТаймера(Инструменты);
ДлительностьВыполнения = (ВремяОкончания — ВремяНачала) / 1000;
ТЦЗаписатьПоказатель(«ВремяВыполнения», ДлительностьВыполнения);
КонецЦикла;
Возврат ТЦРезультатВыполненияУспешно();
Процедура СоздатьДокументы() будет выполнятся на сервере:
Процедура СоздатьДокументы()
НовыйДокумент = ТЦОбъект.ДокументДляКопирования.Скопировать();
НовыйДокумент.Дата = ТекущаяДата();
НовыйДокумент.Записать(РежимЗаписиДокумента.Проведение);
КонецПроцедуры
На этом подготовка сценария закончена, перейдем к Тест-центра для проведения нагрузочного тестирования.
Настройка 1С Тест-центр 8.3
После написания тестирования приступим к настройке самого Тест-центра. Для настройки необходимо заполнить ряд справочников:
- Обработки — справочник, содержащий список обработок, подключенных к тестированию. Обработка может быть как внутренней, так и внешней.
- Роли — справочник для хранения связки обработка-настройки обработки. Настройки — это данные, которые индивидуальны для каждого тестирования (количество итераций, копируемый документ и т.д.).
- Пользователи — список пользователей и их паролей.
- Компьютеры — список компьютеров, на которых будет выполнятся тест.
- Клиенты — настройка того, где, от кого и в каком режиме будет запускаться нагрузочное тестирование.
Сценарии тестирования
Основной справочник, который консолидирует в себе все настройки: сколько раз, каким пользователем, от какого имени будет выполняться нагрузочное тестирование.
Также на вкладке «Параметры» есть возможность настройки сценария тестирования технического характера:
После настройки сценария осталось только произвести его запуск.
Запуск тестирования в 1С: Тест-центр
Когда всё готово, останется только запустить работу тестирования.
Для этого необходим запуск минимум двух сеансов программы: первый — в роли т.н. «агента», а второй в роли инициатора запуска сценария.
Запуск агента:
Запуск сценария:
Для запуска достаточно выбрать из списка нужный сценарий и нажать на кнопку Выполнить.
Результаты нагрузочного теста TPC-1 производительности 1С по Гилеву для конфигурации с файловой базой данных:
Производительность сервера оценивается не загруженностью и очередями к CPU, а способностью выполнить определенное количество операций в единицу времени.
Конкурирования за такие ресурсы, как процессор снижает скорость выполнения операций, когда время отклика определяется:
- временем операции
- временем ожидания оборудования
- временем логических ожиданий вроде блокировок
При этом ключевой характеристикой является скорость операции.
Примечание. Для процессора наиболее значимой характеристикой является частота процессора а не загруженность. Ниже скриншот результатов проведенного тестирования (Чтобы увеличить картинку - нажмите на нее).
Быстродействие системы и планирование необходимых вычислительных ресурсов для ее реализации является обязательной операцией при любом внедрении или изменении существующей ИТ системы.
Большинство существующих методов оценки производительности основывается на том или ином типе тестирования.
Можно выделить два основных типа тестирования: компонентное и интегральное.
При компонентном тестировании проводится тестирование отдельных компонентов решения, начиная от производительности процессоров или подсистем хранения информации до тестирования производительности сервера в целом, но без полезной нагрузки в виде того или иного бизнес-приложения.
Интегральный подход характеризуется оценкой производительности решения в целом, как его программной, так и аппаратной частей. При этом может использоваться как бизнес-приложение, которое будет использовано в конечном решении, так и некоторые модельные приложения, эмулирующие некоторые стандартные бизнес-процессы и нагрузки.
В нашем тесте, как раз и используется такой подход.
Мы получили в качестве результата некий индекс производительности (скорости). Это результат работы платформы в целом на нашем «железе». В случае клиент — серверного варианта это результат сложной цепочки прохождения запросов по различным участкам. Вы получаете общий фактический результат, который определяется самым узким местом в системе. Настройки СУБД, и настройки ОС, и оборудования оказывают влияние на общий результат производительности системы.
Тест оценивает количество работы в единицу времени в одном потоке и подходит для оценки скорости работы однопоточных нагрузок, включая скорость отрисовки интерфейса, влияния затрат на обслуживание виртуальной среды и если есть, перепроводка документов, закрытие месяца, расчет зарплаты и т.п.