Green Challenge

Привет, образ бейзлайна не проходит этап "10. Статус работы скрипта оценки решения

Превышен лимит времени запуска"

Здравствуйте. Можете подсказать, что конкретно считается out-of-distrubition кроме WBC контроллера отрабатывающего команды? Что еще может отличаться при оценивании политики?

👋 Добро пожаловать в Green Challenge!

Если вы только начинаете разбираться с задачей, вопросов наверняка уже накопилось немало: с чего стартовать, как запустить окружение, что приходит на вход роботу, как устроены actions, что делает baseline и как вообще проверить своё решение.

Для этого и завели этот тред — задавайте здесь любые вопросы по задаче и инфраструктуре. Мы соберём их и разберём самые важные темы на митапе с участниками, который пройдёт 23 сентября в 16:00. А чтобы мы могли лучше подготовиться, напишите в комментариях, что сейчас больше всего мешает вам начать:

▫️ #start — неясно, с чего начать
▫️ #setup — сложности с запуском симулятора или окружения
▫️ #data — вопросы по данным и наблюдениям
▫️ #baseline — вопросы по Green-VLA или стартовому решению
▫️ #control — вопросы по action space и управлению роботом
▫️ #evaluation — вопросы по оценке, метрикам и отправке решения
▫️ #team — ищу команду или не понимаю, как распределить роли
▫️ #other — что-то другое

Достаточно написать тег и буквально одно-два предложения — например, #setup и описать, на каком шаге возникла проблема.

⏰ Комментарии, оставленные до 16:00 22 сентября, мы учтём при подготовке митапа.

Пишите вопросы сюда даже если они кажутся совсем базовыми. Чем больше поймём, где именно сейчас стопор, тем полезнее получится встреча!

Добрый день! Подскажите в какую сторону копать

Загружаю образ из описания задачи - расчет стартует успешно
Переливаю этот же образ себе в registry - ошибка RTX job failed due to an infrastructure error

Добрый день.

Как узнать почему падает на этапе "10. Статус работы скрипта оценки решения Code run"?
В логе вижу что:
Connecting to policy server at ws://127.0.0.1:29177
[WSClient] Server not ready, retry 1/12 in 5s
...
[WSClient] Server not ready, retry 11/12 in 5s
"status": "CANCELLED"

@sha256:b92d06a03629ea5ef9759fa6dcb05ff7d456621f8bde834d4d4f0511a9ff705f

Добрый день. Две попытки подряд падают с INFRA_ERROR / rtx_status: INTERNAL_ERROR, логов прогона нет ("log": false).

Request ID: 01a0b1ca-648b-7f96-aa5b-e4e9e5cb5e9e и 01a0b204-b38e-7016-8d28-f073e7242f9e
Job guid: 8616a72cbd0349f9bb069ccfd6057771

Со своей стороны проверили: образ лежит в публичном реестре на cr.cloud.ru, скачивается анонимно, манифест application/vnd.docker.distribution.manifest.v2+json, одна платформа linux/amd64, все слои и конфиг доступны по digest. Ваш валидатор ссылку и digest принял, ошибка возникает уже после постановки в очередь.

Подскажите, пожалуйста, что означает эта ошибка и что проверить с нашей стороны.

Здравствуйте,подскажите пожалуйста, почему может быть ошибка RTX job failed due to an infrastructure error? тега v1 в сабмите нет,

@sha256:45f82f833858dfabd87900e3f77aa3c982fd5ff18e65509ebb28b57773336232

Добрый день!

У меня есть вопросы к митапу:

#evaluation
1 Финальные результаты: по прайвет лидерборд а не текущему?
2 Правильно понимаю что для проверки на прайвет лидерборде выбирается лучший сабмит по метрикам на публичном лидерборде - нельзя выбрать самому 3 сабмита как в каггле по которым будет оцениваться приватный лидерборд. Есть такой вариант что участник может подумать что его лучший сабмит оверфитнулся на лидерборде и он предпочел бы с меньшим скор выдать как окончательное решение.
3 Надо ли держать все докер образы от всех сабмитов на cloud.ru до конца соревнования?
#other
4 Для тех кто не сможет в митапе учавствовать.. будет ли где то какое то текстовое саммари.

Добрый день! Прошу помочь разобраться со статусом отправки.

Реквизиты:

- job_id 601

- guid 5a951c2d10e34ca39afa5556af2b8de7

- request 01a0bfbb-739e-7e7c-b826-1a3c3536b52a

- отправка 20.09, старт около 16:58 UTC

Что в логе:

Бенчмарк дошёл до конца, посчитаны все 24 эпизода.

Раннер написал:

- aggregating results

- results written

- results copied to /tmp/601-results/results.json

В JSON указано total_episodes: 24.

Итоговый статус при этом JOB_FAILED, «RTX job finished with an error», rtx_status: FAILED.

В stderr контейнера политики последняя строка: *** STEP 601.1 … CANCELLED AT 2026-09-20T23:01:26 DUE to SIGNAL Killed ***.

- Она появилась в ту же секунду, когда записан результат.

- От старта раннера до неё прошло примерно 2 ч 59 мин 54 с.

- Ошибок политики или симулятора в логе нет.

Здравствуйте! Есть пока два небольших вопроса.

1. Почему история отправки не сохраняется во вкладке "Решение задачи"? Написано "История запусков: Загрузите решение в пайплайн и сделайте первый запуск", а далее пусто. Результат же пока первого тестового запуска посчитался и высветился в турнирной таблице.

2. Во вкладке "Обзор" в разделе "Данные и среда разработки" есть две гиперссылки с обозначением 1 и 2, но по их нажатию они никуда не ведут.

Гиперссылка "1" стоит после фразы - «Базовая модель Green-VLA» с примерами инференса1, .....
Гиперссылка "2" стоит после фразы - «Локальный оценочный скрипт» для тестирования модели на нескольких валидационных сценах2 .....

Зачем указаны эти гиперссылки, если они ломанные ? Может там надо рабочие ссылки указать на "примеры инференса базовой модели" и "локальный оценочный скрипт" ?

Добрый день, у всех на 10-м шаге падает?

lm-mpi-job-dbe5285b-3dcd-481e-ba4d-57bf2ea1e8e0

Задача отправки №639 завершается с ошибкой «RTX job finished with an error».

Ссылка на образ и SHA256 успешно проходят проверку реестра.

Тот же самый digest:

• успешно скачивается из Cloud.ru;

• локально запускается с параметрами --gpus all --network none;

• успешно загружает /ckpt;

• успешно завершает 2 из 2 прогревочных запусков;

• слушает порт POLICY_PORT=8999;

• возвращает HTTP 200 на /healthz.

При этом в выводе evaluator файлы vla log/vla err и sim log/sim err пустые.

Пожалуйста, проверьте, был ли вообще создан и запущен процесс контейнера, и предоставьте следующую информацию:

1. модель GPU;

2. версию драйвера NVIDIA;

3. ошибку containerd / nvidia-container-runtime для задачи №639;

4. stdout/stderr до запуска entrypoint, если они доступны.

job_id: 639
guid: 311a37b4b8474e648ade7ca398f0ed73
request_id: 01a0cfb8-8e3f-79da-bf8c-a1e84f2d1ef8

Digest:

sha256:07ad6108adeafc49093224b5b52cb1f16ebe5dd6988690dda9ef9f0610f9843b

Задача отправки №640 завершилась с ошибкой «RTX job finished with an error» через ~2 минуты после Status: queued (2026-09-23 22:26 → 22:28 UTC).

Ссылка на образ и SHA256 прошли проверку реестра. Секции vla log/vla err и sim log/sim err пустые.

Тот же образ локально запускается с --gpus all, загружает /ckpt, проходит 2/2 прогрева и отвечает на запросы политики; наши предыдущие образы на той же базе платформа успешно оценивала.

Похоже на ту же проблему, что у задачи №639 (соседний job_id, те же симптомы).

Пожалуйста, проверьте, был ли создан и запущен контейнер, и сообщите модель GPU, версию драйвера и ошибку containerd / nvidia-container-runtime, если есть.

job_id: 640

guid: 83ed1d0fe3b342c08d86fc5acdd90ea7

request_id: 01a0d060-29b2-7ae2-b70c-f807e8324ca4

Digest образа:

sha256:6536d343785c1ea489af5743d9c66934401233521a4dff1afa950494f6723406
Полная ссылка: nemovaij2026.cr.cloud.ru/green-vla:iter1-adapter@sha256:6536d343785c1ea489af5743d9c66934401233521a4dff1afa950494f6723406
Ошибка (вторая отправка 23.09, 13:28 UTC, request ID 01a0ce74-7f85-711d-b9f0-a83ca50caed4, job guid 0d23e9230129471e851697aae7688e03):

"status": "FAILED",

"error": {

"code": "INFRA_ERROR",

"message": "RTX job failed due to an infrastructure error",

"details": {"rtx_status": "INTERNAL_ERROR"}

},

"log": false

Упало через 2 минуты после постановки в очередь.

Где можно посмотреть вебинар?

Добрый день, Раньше реестр конкурса отдавал образ, а теперь при скачивании его больших слоёв отвечает

QUOTA_NOT_AVAILABLE

В чем может быть проблема?

Здравствуйте! Подскажите, есть ли запись митапа, который был 23.09 в 16:00?

Добрый вечер,
будет ли запись...........??🥹🥹🥹🥹

2026-09-26T03:46:32Z [1,0]<stdout>: "status": "FAILED",

2026-09-26T03:46:32Z [1,0]<stdout>: "error": {

2026-09-26T03:46:32Z [1,0]<stdout>: "code": "INFRA_ERROR",

2026-09-26T03:46:32Z [1,0]<stdout>: "message": "RTX job failed due to an infrastructure error",

2026-09-26T03:46:32Z [1,0]<stdout>: "details": {

2026-09-26T03:46:32Z [1,0]<stdout>: "rtx_status": "INTERNAL_ERROR"

2026-09-26T03:46:32Z [1,0]<stdout>: }

2026-09-26T03:46:32Z [1,0]<stdout>: },
======
Это ошибка на платформе? не понятно что делать в этом случаи

Добрый вечер, когда будет запись вебинара?

Добрый день! Не могли бы подсказать, можно использовать несколько моделей?

@rowe8141 подскажите вот такая ошибка при запуске:
2026-09-29T14:35:38Z [1,0]<stdout>: "status": "FAILED",

2026-09-29T14:35:38Z [1,0]<stdout>: "error": {

2026-09-29T14:35:38Z [1,0]<stdout>: "code": "INFRA_ERROR",

2026-09-29T14:35:38Z [1,0]<stdout>: "message": "RTX job failed due to an infrastructure error",

2026-09-29T14:35:38Z [1,0]<stdout>: "details": {

2026-09-29T14:35:38Z [1,0]<stdout>: "rtx_status": "INTERNAL_ERROR"

2026-09-29T14:35:38Z [1,0]<stdout>: }

2026-09-29T14:35:38Z [1,0]<stdout>: },
====
Помогите пожалуйста, вот мой: @sha256:22e5aba2f2a96ff9cc55ac09ee4ed0d39b789e0441b0d83d70a9f21c800fa7df

Здравствуйте! На вебинаре сказано, что скриптованные действия и адаптеры под конкретную сцену не допускаются. Уточните, пожалуйста, про компоненты, которые не зависят ни от задачи, ни от сцены и не порождают движений сами, а только преобразуют вход и выход модели. Например: сглаживание или фильтрация действий, калибровка трекинга суставов (аналог JointCalibratedBoundary из образа бейзлайна), подстановка в state последней команды самой модели. Допустимы ли такие компоненты в контейнере решения?

Здравствуйте! Ещё вопрос. С каким значением PROPRIO_CMD запускается симулятор при проверке решений на сервере: all (в state эхо предыдущей команды, как рекомендует документация образа политики) или не задан (в state измеренные углы суставов)?

Добрый вечер, запуск неуспешный, но нет ошибки в логах

2026-09-30T17:45:08Z [1,0]<stderr>:2026-09-30 17:45:08,854 INFO Waiting for response: s3://aij/response/01a0f36b-9325-76fa-a7b7-52a3b0cd4f03.json

2026-09-30T17:45:23Z [1,0]<stderr>:2026-09-30 17:45:23,935 INFO Status: queued

🤖 CLOUD.RU PLATFORM LOGS 🤖

ℹ️ JOB INFO

lm-mpi-job-8ac286b1-056c-4e53-bd4b-8d3f6bfb3d33

Status: Failed

sha256:6b9ad1d921abcb1c4227b161f5e2ea381aa28dc04b76d1e55d632b44de9b15dc digest
указывал без тега

Закончилось на INFO Status: queued

При повторном запуске вылезла ошибка

2026-10-01T11:11:29Z [1,0]<stderr>:2026-10-01 11:11:29,567 INFO Response has no log object

2026-10-01T11:11:29Z [1,0]<stdout>:{

2026-10-01T11:11:29Z [1,0]<stdout>: "status": "FAILED",

2026-10-01T11:11:29Z [1,0]<stdout>: "error": {

2026-10-01T11:11:29Z [1,0]<stdout>: "code": "INFRA_ERROR",

2026-10-01T11:11:29Z [1,0]<stdout>: "message": "RTX job failed due to an infrastructure error",

2026-10-01T11:11:29Z [1,0]<stdout>: "details": {

2026-10-01T11:11:29Z [1,0]<stdout>: "rtx_status": "INTERNAL_ERROR"

2026-10-01T11:11:29Z [1,0]<stdout>: }

2026-10-01T11:11:29Z [1,0]<stdout>: },

2026-10-01T11:11:29Z [1,0]<stdout>: "job": {

2026-10-01T11:11:29Z [1,0]<stdout>: "guid": "10f6f171b70c4989808db044b11fe53d"

2026-10-01T11:11:29Z [1,0]<stdout>: },

2026-10-01T11:11:29Z [1,0]<stdout>: "log": false,

2026-10-01T11:11:29Z [1,0]<stdout>: "end": true

2026-10-01T11:11:29Z [1,0]<stdout>:}

2026-10-01T11:11:29Z --------------------------------------------------------------------------

2026-10-01T11:11:29Z Primary job terminated normally, but 1 process returned

2026-10-01T11:11:29Z a non-zero exit code. Per user-direction, the job has been aborted.
Ссылка на образ была также указана без тега

Добрый день! Наш сабмит прошёл проверку формата ссылки, SHA-256 digest и домена реестра, но через ~2 минуты после постановки в очередь завершился `INFRA_ERROR`, `rtx_status: INTERNAL_ERROR`, `"log": false`.

Request ID: `01a0f8d4-9bbf-7b22-a50b-a8413506106e`  
RTX job GUID: `cc9cf3a05c7e4354b098b90afd47ae06`  
Digest: `@sha256:7da67f0866c43a6ad76c9bbe7d9bb71143624d754e4ac23b59a00fde70e84a0c`

Подскажите, дошёл ли RTX до скачивания и запуска контейнера? Какая внутренняя ошибка произошла на этапе image pull/containerd/runtime?

Прошу подскажите, где можно взять логи? если все зеленое

Здравствуйте! Допустима ли модель из двух action expert-ов (перенос руки и хват) с выученным переключателем по визуальным признакам? Маршрутизация по тексту инструкции при этом не используется.

Зависло на Очистка дискового пространства.

2026-10-07T20:58:59Z [1,0]<stdout>:{

2026-10-07T20:58:59Z [1,0]<stdout>: "status": "FAILED",

2026-10-07T20:58:59Z [1,0]<stdout>: "error": {

2026-10-07T20:58:59Z [1,0]<stdout>: "code": "INFRA_ERROR",

2026-10-07T20:58:59Z [1,0]<stdout>: "message": "RTX job failed due to an infrastructure error",

2026-10-07T20:58:59Z [1,0]<stdout>: "details": {

2026-10-07T20:58:59Z [1,0]<stdout>: "rtx_status": "INTERNAL_ERROR"

2026-10-07T20:58:59Z [1,0]<stdout>: }

2026-10-07T20:58:59Z [1,0]<stdout>: },

2026-10-07T20:58:59Z [1,0]<stdout>: "job": {

2026-10-07T20:58:59Z [1,0]<stdout>: "guid": "11efceef63dc4a449396240c5a7c148a"

2026-10-07T20:58:59Z [1,0]<stdout>: },

2026-10-07T20:58:59Z [1,0]<stdout>: "log": false,

2026-10-07T20:58:59Z [1,0]<stdout>: "end": true

2026-10-07T20:58:59Z [1,0]<stdout>:}

зависло все на 01. Очистка дискового пространства

Невозможно скачать docker образ green-vla и green-sim, возникает ошибка error from registry: product_instance is not enabled. Также нет ссылки на "Локальный оценочный скрипт". Я же правильно понял, что докеры и скрипт нам нельзя скачивать?

docker pull aij-green-challenge.cr.cloud.ru/green-sim@sha256:b92d06a03629ea5ef9759fa6dcb05ff7d456621f8bde834d4d4f0511a9ff705f
aij-green-challenge.cr.cloud.ru/green-sim@sha256:b92d06a03629ea5ef9759fa6dcb05ff7d456621f8bde834d4d4f0511a9ff705f: Pulling from green-sim
error from registry: product_instance is not enabled

Здравствуйте! Отправка от 10.10.2026 завершилась с INFRA_ERROR, rtx_status: INTERNAL_ERROR, "log": false.

Ссылка указана без тега, только с digest. Проверки формата ссылки, SHA-256 и домена реестра прошли успешно. После примерно 1 ч 50 мин в очереди получен статус FAILED; статуса running в логе нет.

Со своей стороны проверили:

• анонимный доступ к manifest, конфигурации и всем 25 слоям;

• запуск образа на GPU с --network none;

• загрузку чекпоинта, два прогревочных инференса и HTTP 200 от проверки здоровья сервера.

Реквизиты:

Digest: @sha256:70a9aa1f1d768f2ef4e6b51d0033f10c8e370a4ebe85b3ec0cdeed3fee8c4f04
Request ID: 01a12598-711d-7140-ab12-7d1f055a28e1
RTX job GUID: 9f8f7e80345c41d484715f6cab2605e8

В комментариях видел похожие случаи без тега, по которым сообщали об устранении проблемы. Пожалуйста, проверьте эту задачу: дошла ли она до скачивания и запуска контейнера? Какая внутренняя ошибка произошла на этапе image pull, containerd или GPU runtime? В предоставленном логе подробностей нет.