Доброго дня! В рамках кейса по распределенному тестированию мы настроили соединение между jmeter-сервером и управляющим центром jmeter. Тесты на удаленном сервере запускаются с некоторой задержкой, а когда они завершаются, на управляющем центре не появляются результаты тестирования, и более того на управляющем центре тест зависает и не дает закрыть программу, хотя сервер уже закончил свою работу и написал сообщение об окончании тестирования. Столкнулись с тем, что тестирование на удаленном сервере по времени выполняется в несколько раз дольше, чем локально - нормально ли такое поведение? Также просьба подсказать, как нам запускать распределенное тестирование так, чтобы на управляющем центре появлялись все результаты? И какие настройки необходимо произвести, чтобы порт не менялся при каждом запуске jmeter? Может быть вы могли бы по опыту подсказать как нам настроить распределенное тестирование или с чем необходимо ознакомиться. Проанализировав проблему со своей стороны произвели следующие настройки в конфигурационном файле:

 

RMI_HOST_DEF=-Djava.rmi.server.hostname=OUR_IP_ADDRESS
server_port=1099
server.rmi.localport=1099
server.rmi.ssl.disable=true

Здравствуйте, коллеги. Нужно помощь в организации тестирования стратегий. В компании развернуто решение для collection. Имеется потребность тестировать стратегии на предмет эффективности согласно подходу А/Б тестирования, он же Champion-Challenger. Стратегий более 25 шт.  

Основная проблема как сделать слепую (рандомную) выборку согласно условиям теста и при этом количество клиентов должно быть одинаковым.

Например нужно взять 30% новых клиентов для конкретной стратегии и из них по 15 % это тестовая и контрольная группа. И на каждой группе применить разные стратегии, старую и новую, Champion-Challenger.  

Для рандомизации пробовал использовать последние цифры дня рождения, "заканчивается на 1" и т.п., но такие условия дают выборку только по 10%. Как вариант ИНН клиента, но насколько знаю ИНН не совсем рандомен. Кроме того выборка дает разное количество клиентов для отработки. Например, 386 и 315 т.е. с досточно большой разницей, что "смажет" результат.

Как вариант генерировать еще 1му полю 0 и 1 рандомно, что бы поделить на 2 группы.

Вопросы:

1. Есть ли в Сreatio функционал для автоматизированного А/Б тестирования? Есть информация, что есть функционал для решения Маркетинг, но здесь немного другая ситуация. Т.к. клиенты заходят залповой загрузкой из основной учетной системы, а не извне в рандомном порядке и нельзя предсказать количество клиентов для тестируемой стратегии.
2. Если у кого нибудь опыт в подобном тестировании в среде creatio?
3. Есть ли у кого опыт в рандомизации?
4. Так же вопрос как оценить результаты теста. Т.е. как сформировать отчет по выборке. Понятно, что в Creatio должны быть id теста как минимум привязанный к клиенту. И возможно в соотношении 1н ко многим. 

Из доступных параметров: дата рождения клиента, дата выхода на просрочку, ИНН, сотовый телефон.  

Пример условий стратегии на скриншоте.



По продукту вроде Financial Services.

Добрый день. Сейчас через скрипт рекордер записываю действия и прогоняю по этому сценарию нагрузку. Вопрос у заказчика в другом, почему к примеру, при нагрузке в 600 пользователей не создаётся 600 тестовых обращений хотя по скрипту записано от и до. Авторизация в JMeter работает.

Добрый день! Есть ли среди участников Community те, кто пользовался приложением из Маркетплейса под названием "Acceptance testing framework for Creatio"?

В инструкции к приложению указан способ его настройки и взаимодействие через IDE WebStorm, а есть ли вариант использовать другое IDE? Если да, то какое? Спасибо.