yandex/yandex-tank

https://overload.yandex.net

Alex A Linch

@ALEXLINCHEVSKY

я с этим бился более 2-х недель - и много чего перелопатил . возможно у меня устаревшая сборка. но та которой я пользуюсь работает именно так

и тесты я запускаю у себя именно вот этой командой

adm@adm:~$ yandex-tank -c load.yaml ammo.txt

Leonid

@leoag_gitlab

Подскажите есть ли простой способ сгенировать общий отчет (не используя сервис overload) с временами ответа, ошибками ? Использую yandex+phantom или все делают свой парсер?

Kirill Amurskiy

@KirillAmurskiy

Добрый день, подскажите, а есть ли возможность в phantom ammo файлах использовать русские символы? (да и вообще любые не английские). В документации написано "utf-8 symbols only", русские символы, вроде как, вполне utf-8. Но при попытке скармливания танку запросов с русскими символами, он их не досылает до целевого сервиса, пишет bad request 400. В логах не нашел в чем дело. Если всю конфигурацию оставлять такой же, но использовать только английские символы, то запросы доходят.

belomore

@Tonsofattraction

Прям в урлах? попробуйте заэнкодить

Kirill Amurskiy

@KirillAmurskiy

@Tonsofattraction , спасибо, помогло!

MilyaushaV

@MilyaushaV

Добрый день, для одновременных get + post запросов какой ammo_type нужен? Согласно документации там только phantom подходит https://yandextank.readthedocs.io/en/latest/tutorial.html#request-style

Plombirius

@Plombirius

Коллеги, а что у меня поломалось? Работало все ок, а потом стал получать вот такое.
Удалял и ставил танr заново. Не помогает

[jtank@TestingGround home]$ yandex-tank -v Traceback (most recent call last): File "/usr/local/bin/yandex-tank", line 11, in <module> load_entry_point('yandextank==1.12.8.1', 'console_scripts', 'yandex-tank')() File "/usr/lib/python3.6/site-packages/pkg_resources/__init__.py", line 476, in load_entry_point return get_distribution(dist).load_entry_point(group, name) File "/usr/lib/python3.6/site-packages/pkg_resources/__init__.py", line 2700, in load_entry_point return ep.load() File "/usr/lib/python3.6/site-packages/pkg_resources/__init__.py", line 2318, in load return self.resolve() File "/usr/lib/python3.6/site-packages/pkg_resources/__init__.py", line 2324, in resolve module = __import__(self.module_name, fromlist=['__name__'], level=0) File "/usr/local/lib/python3.6/site-packages/yandextank/core/__init__.py", line 4, in <module> from .tankcore import TankCore # noqa:F401 File "/usr/local/lib/python3.6/site-packages/yandextank/core/tankcore.py", line 25, in <module> from yandextank.plugins.DataUploader.client import LPRequisites File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/DataUploader/__init__.py", line 1, in <module> from .plugin import Plugin # noqa:F401 File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/DataUploader/plugin.py", line 23, in <module> from ..Autostop import Plugin as AutostopPlugin File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/Autostop/__init__.py", line 1, in <module> from .plugin import Plugin # noqa:F401 File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/Autostop/plugin.py", line 8, in <module> from ..Console import Plugin as ConsolePlugin File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/Console/__init__.py", line 1, in <module> from .plugin import * # noqa:F401,F403 File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/Console/plugin.py", line 7, in <module> from .screen import Screen File "/usr/local/lib/python3.6/site-packages/yandextank/plugins/Console/screen.py", line 1018

Vadim Yangunaev

@ninja-tester

Всем привет!
Подскажите, есть ли возможность стрелять из нескольких танков так, чтобы результаты сливались в один репорт оверлоада?
Если в качестве пушки использовать JMeter?

Vadim Yangunaev

@ninja-tester

Еще вопрос)
Возможно ли использовать JMeter на ВМ предоставляемой Яндекс Облаком? Кто-нибудь пробовал?
Я хочу запустить тест из Яндекс.Облака, использую готовую ВМ Яндекс.Танк (v1.11.2)
Доустановил на неё Java и JMeter, но при запуске теста происходит ошибка

Unable to access to JMeter executable file or it does not exist: /usr/local/apache-jmeter-5.2.1/bin/jmeter

Timur Torubarov

@nettorta

@ninja-tester можно. а куда вы JMeter установили? пути сходятся?

Renat Berezovsky

@BrRenat

Всем привет, возможно уже было в чате. Подскажите пожалуйста, последняя версия пандоры и яндекс танка совместимы?

0.3.0 pandora, 1.12.8 yandex tank
Я смог запустить http тест на 0.1.3 версии пандоры, но грпц сценарий скомпилированный на 3ей версии не работает

Vadim Yangunaev

@ninja-tester

@nettorta да, путь сходится
Пробовал сейчас вот сюда установить:
/home/tank/apache-jmeter-5.2.1/bin/jmeter

Если таким образом запускать только JMeter, то этот путь работает и JMeter стартует тест:
/home/tank/apache-jmeter-5.2.1/bin/jmeter -n -t ReloadTest.jmx -l result-1.jtl -e -o ./result-1

В load.yaml прописал:

phantom:
  enabled: false
jmeter:
  enabled: true
  jmx: ReloadTest.jmx
  buffered_seconds: 10
  jmeter_path: /home/tank/apache-jmeter-5.2.1/bin/jmeter
  jmeter_ver: 5.2
  ext_log: all
overload:
  enabled: true
  package: yandextank.plugins.DataUploader
  token_file: "token.txt"

При запуске получаю ошибку

06:49:54 [ERROR] Test interrupted:
<type 'exceptions.RuntimeError'>: Unable to access to JMeter executable file or it does not exist: /home/tank/apache-jmeter-5.2.1/bin/jmeter

Vadim Yangunaev

@ninja-tester

Описал здесь
https://stackoverflow.com/questions/60701663/yandex-tank-unable-to-run-jmeter-unable-to-access-to-jmeter-executable-file-or

bahodir-annaev

@bahodir-annaev

Всем привет. При нагрузке rps не превышает 300 запросов на самом деле schedule: line(400, 1000, 2m) выглядит так. Можете подсказать почему....

Grigoriy

@ligreen

@bahodir-annaev одним из вариантов может быть нехватка instances, т.е. одновременного кол-ва соединений. По дефолту в танке оно равно 1000

https://yandextank.readthedocs.io/en/latest/config_reference.html#id20

попробуйте поднять его до 10000 и повторить тест

bahodir-annaev

@bahodir-annaev

@ligreen пробовал не помог((

Anton

@c13

Подскажите по образу яндекс-танка с jmeter, он почему-то подвисает при остановке и ctrl+c не помогает

docker run     --rm     -v $(pwd):/var/loadtest     --net host     -it direvius/yandex-tank:jmeter-latest
No handlers could be found for logger "netort.resource"
15:12:27 [INFO] New test id 2020-03-17_15-12-27.791237
15:12:27 [INFO] Logging handler <logging.StreamHandler object at 0x7f65fabb9850> added
15:12:27 [INFO] Logging handler <logging.StreamHandler object at 0x7f65fab5da50> added
15:12:27 [INFO] Created a folder for the test. /var/loadtest/logs/2020-03-17_15-12-27.791237
15:12:27 [INFO] Configuring plugins...
15:12:27 [INFO] Loading plugins...
15:12:27 [INFO] Preparing test...
15:12:27 [INFO] Checking tank resources...
15:12:28 [INFO] Starting test...
15:12:28 [INFO] using verbose histogram
15:12:28 [INFO] Plugin <yandextank.plugins.JsonReport.plugin.Plugin object at 0x7f65fab36e10> required 0.000272 seconds to start
15:12:28 [INFO] Plugin <yandextank.plugins.Autostop.plugin.Plugin object at 0x7f65fab71f10> required 0.000024 seconds to start
                                                                                                                                     . ~~~~~~~~~~~~~~~~~~~~~~~~ JMeter Test | ~~~~~~~~~~~~~~~~~~~~~~~~
                                                                                                                                     . ~~~~~~~~~~~~~~~~~~~~~~~~ JMeter Test / ~~~~~~~~~~~~~~~~~~~~~~~~
 Data delay: 4s, RPS:  46                                                                                                        ▅▇  .      Test Plan: modeus.jmx
                                                                                                                                     .       Duration: 0:00:11
 Percentiles (all/last 1m/last), ms:  . HTTP codes:                                                                                  . Active Threads: 2
 100.0% <  1,015.0  1,015.0    171.0  . 72 +45  96.00% : 200 OK                                                                      .    Responses/s: 46
  99.5% <  1,015.0  1,015.0    171.0  .  3  +1   4.00% : 500 Internal Server Error                                                   . 
  99.0% <  1,015.0  1,015.0    166.0  .                                                                                              . 
  95.0% <    177.0    177.0    103.0  . Net codes:                                                                                   . 
  90.0% <    109.0    109.0     81.5  . 72 +45  96.00% :  0  Success                                                                 . 
15:12:40 [INFO] Finishing test...
15:12:40 [INFO] Stopping load generator and aggregator

конфиг

phantom:
  enabled: false
jmeter:
  enabled: true
  package: yandextank.plugins.JMeter
  jmx: load.jmx
  buffered_seconds: 0
  ext_log: none
  variables:
    protocol: https
    host: example.org
    thread_rpm: 2
    loops: 20
console:
  enabled: true # enable console output
telegraf:
  enabled: false # let's disable telegraf monitoring for the first time

Alex A Linch

@ALEXLINCHEVSKY

насколько я понял ctrl+c не помогает - а лишь отключает отображение в консоли, а процесс теста - продолжается пока не завершится по расписанию в конфиге

Vadim Yangunaev

@ninja-tester

У меня тоже тест c JMeter зависает на этапе остановки генератора:

docker run --entrypoint /bin/bash -v ${PWD}:/var/loadtest -v ${HOME}/.ssh:/root/.ssh -it direvius/yandex-tank:jmeter-latest
Yandex.Tank Docker image
[tank]root@2fb9f3d88afa: /var/loadtest # yandex-tank

                                                                                                                                                                                                                .
20:24:44 [INFO] Finishing test...
20:24:44 [INFO] Stopping load generator and aggregator

При нажатии на ctrl-c появляется еще одна строчка, и более ничего
20:40:54 [WARNING] Interrupting

Renat Berezovsky

@BrRenat

Ребят а пандора жива вообще? Ей кто нибудь пользуется?

belomore

@Tonsofattraction

Жива, пользуются.

Rostislav Rudometov

@rostislaw9

Всем привет. Поскажите подробный мануал на русском, пж

Diman

@krabradosty

Привет. Использую танк с пандорой. Пандора из девелоп ветки. Танк latest из docker hub. В overload почему-то что-то не доходит, в частности информация об rps(https://overload.yandex.net/260950). Но нагрузка генерируется. Вижу по логам танка и мишеней.
Танк с фантомом работает исправно.
Конфиг пандоры:

pools:
  - id: Fabric Gun
    gun:
      type: fabric-gun
      ConnProfilePath: "./connectionProfile.json"
    ammo:
      type: fabric-chaincode
      source:
        type: file
        path: ./json.ammo
    result:
      type: phout
      destination: ./phout.log
    rps: {duration: 20s, type: line,  from: 1, to: 10}
    startup:
      type: once
      times: 10

log:
  level: info
monitoring:
  expvar:
    enabled: false
    port: 1234
  cpuprofile:
    enabled: false
  memprofile:
    enabled: false

Конфиг танка:

overload:
  enabled: true
  package: yandextank.plugins.DataUploader
  token_file: "token.txt"
phantom:
  enabled: false
pandora:
  package: yandextank.plugins.Pandora
  enabled: true
  pandora_cmd: ./pandora-fabric # Pandora executable path
  config_file: load.yaml # Pandora config path

Есть идеи в чем проблема? Спасибо

Renat Berezovsky

@BrRenat

есть проблема

monitoring:
expvar:
enabled: TRUE
port: 1234

@krabradosty понял да?)

Diman

@krabradosty

@BrRenat Понял да) Спасибо

Renat Berezovsky

@BrRenat

А пандора умеет создавать расписание запросов именно по запросам в секунду? А не по ответам.
Хочется стабильную нарастающую нагрузку, независимо от того как отвечает сервер.
С использованием инстансов неполучается такое провернуть. Типа делать 1 запрос в секунду для 1 инстанса и линейно их добавлять.

dmitry-sobol

@dmitry-sobol

Коллеги, привет! Пропала в overload вкладка Monitoring, хотя при попытке создать кастомную вкладку есть галочки от мониторингов, и данные там есть. Подскажите куда копать?

Diman

@krabradosty

@BrRenat Только дошли руки проверить. К сожалению, твой совет не помог. В оверлоуд по-прежнему не доходит информация об rps и threads (https://overload.yandex.net/262177). Еще идеи?)

Diman

@krabradosty

Я так понимаю expvar включает telegraf. Я им вообще никогда не пользовался. Разве он нужен для отправки rps в overload?

В логах нашел файл test_data.log, в котором видна моя проблема. Вот такие значения для теста в пандорой:

{"stats": {"metrics": {"instances": 0, "reqps": 0}, "ts": 1585316225}, "data": {"counted_rps": 9, ...}

И вот значения для теста с фантомом:

{"stats": {"metrics": {"instances": 1, "reqps": 4.0}, "ts": 1585067356}, "data": {"counted_rps": 4, ...}

Почему-то reqps в случае пандоры всего ноль, хотя counted_rps отличен от нуля.

Timur Torubarov

@nettorta

@krabradosty expvar не включает телеграф, он включает интерфейс пандоры, из которого можно добыть статистику о состоянии теста со стороны пушки

Diman

@krabradosty

@BrRenat @nettorta Получилось! Благодарю. В первый раз включение не помогло, потому что я изменил дефолтный порт.

KartingProfi

@KartingProfi

Всем привет! Нужно попробовать нагрузить сайт 500-1000 одновременными распределёнными запросами, можно по API. Задача выявить сервер справится с нагрузкой или нет. Через OverLoad это возможно или другой сервис поискать?

Anton

@c13

@ninja-tester не нашлось решения для остановки теста yandex-tank + jmeter?

Mikhail Shirkov

@shirkevich

что-то в оверлоад сегодня результаты не выгружаются, как-то раньше поминться графики в html можно было генерить

это выпилили?

Grigoriy

@ligreen

@shirkevich Привет, а есть какая-то ошибка при заливке?

Смотрю за последний час есть среди публичных тестов нормально залитые, например:
https://overload.yandex.net/263395

Mikhail Shirkov

@shirkevich

ничего специфичного, висит вот так бесконечно и не умирает по ctrl+c, не отцепляется по ctrl+z, приходится убивать через kill -9

19:16:22 [WARNING] API error, will retry in 10s...
19:16:32 [WARNING] API error, will retry in 10s...
19:16:43 [WARNING] API error, will retry in 10s...
19:16:55 [WARNING] API error, will retry in 10s...

@ligreen :point_up:

Mikhail Shirkov

@shirkevich

я это делаю с тачки на digital ocean, может в этом дело, попробую с другой

Mikhail Shirkov

@shirkevich

заработало. я не дожидался, на 3-й минуте попыток ретрая оно залилось

Eliahu Gunzhin

@EliahuGunzhin_gitlab

@shirkevich @ligreen Та же проблема. Рендомно то сразу заливается, то висит по 10 минут.

Where communities thrive

People

Repo info

Activity