Карта экспериментов MetroGuard

Разработка с AI · безопасный и объяснимый runtime
77экспериментов 27принято 46отклонено 4без вывода

Итоговые метрики

Зафиксированные результаты. Строки «аудит» показывают переносимость, а не качество на скрытой выборке организаторов.

МетрикаРезультатКритерийЭкспериментСтатус
Полнота на строгих сценариях44.0%измерениеEXP-005внимание
Специфичность на отрицательных примерах97.7%>= 95%EXP-005пройден
Доля тревог на условно чистых данных0.855%<= 1%EXP-005пройден
Снижение тревог мировым трекером25% (20 -> 15)> 0%EXP-014пройден
Внешняя полнота геометрии34/38 (89.5%)аудитEXP-023пройден
Внешняя полнота G420/38 (52.6%)аудитEXP-023внимание
Офлайн-обработка, p9590.81 мс< 100 мсEXP-021пройден
ROS, 10 кадров: худший p9592.34 мс< 100 мсEXP-025пройден
ROS, 100 кадров: воспроизводимость100/100 идентичных результатовточное совпадениеEXP-027пройден
ROS, 100 кадров: худший p95142.03 мс< 100 мсEXP-027не пройден
Линейная модель против компактной MLP53.4% против 49.3% полноты; 0.71% против 2.40% тревогMLP должна победитьEXP-029не пройден
Компоненты + пространственное CV: полнота57.1% -> 44.0%ростEXP-031не пройден
Пространственная MLP: полнота / тревоги36.3% / 4.68%лучше базовых компонентовEXP-032не пройден
CV с учётом домена: полнота57.1% -> 49.4%ростEXP-033не пройден
OOD-аудит: полнота / тревоги56.3% / 0.00%аудит кэша кандидатовEXP-034пройден
CV со случайными свёртками: полнота17.0% -> 17.8%лучше геометрииEXP-035не пройден
OOD-кадры с тревогой, p9572.42 мс< 100 мсEXP-036пройден
CV с рандомизацией: полнота17.8% -> 22.3%лучше геометрииEXP-037не пройден
CV с пересадкой реальных объектов: полнота17.8% -> 21.2%рост без тревогEXP-041пройден
Extra Trees: полнота / тревоги64.6% / 0.71%>57,1% / <=0,71%EXP-046пройден
Гибрид из 100 деревьев: полнота / тревоги68.1% / 0.71%>57,1% / <=0,71%EXP-056пройден
Гибрид на незнакомых формах: полнота6.5%>57,1%EXP-057не пройден
Переносимый гибрид: p95 / размер79.9 мс / 74.7 КБ<100 мсEXP-060пройден
Регрессионные тесты44/4444/44EXP-060пройден
Итоговая доля тревог на полных bag1.44%минимум среди автономных вариантовEXP-067внимание
Итоговая специфичность на точных боксах100.0%100%EXP-067пройден
Итоговое время обработки, p9592.41 мс< 100 мсEXP-067пройден
Эпизоды тревог после временного фильтра23 -> 7без потери событийEXP-068не пройден

Универсальный детектор и эксперт знакомого маршрута

Полнота и специфичность рассчитаны на одних и тех же 376 парах. Эксперт маршрута дополнительно получает чистый эталон той же позиции — это отдельный режим работы.

РежимДополнительные данныеПолнотаСпецифичностьЭксперимент
Универсальная линейная модельНет57.1%78.1%EXP-059
Универсальный гибрид из 100 деревьевНет68.1%100.0%EXP-059
Память знакомого маршрутаЧистый эталон той же позиции87.7%100.0%EXP-059
Временные признаки
E03E07E10E14E16E18E19E20E43E44E59E65E68E72E73E74
Производительность и выпуск
E09E21E22E24E25E27E36E60E66E75
Переносимость
E23E26
EXP-000Замороженный детектор на синтетическом bag организаторов

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
1510
Показатель 2
1116
Показатель 3
313
Показатель 4
81
Показатель 5
215
Показатель 6
59
Показатель 7
1370
Показатель 8
81
Показатель 9
44
Показатель 10
140.9
Полная задержка, p95, мс
284.1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_official_bag external_data/hackathon/synthetic_official/data/cloud_with_fake_obj/cloud_with_fake_obj_0.db3 --output lidar_geometry/artifacts/official_synthetic_frozen.json
EXP-001Удаление бокового veto и парные сценарии габарита

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 5; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.339
Показатель 2
0.679
Показатель 3
0.212
Показатель 4
0.561
Показатель 5
0.261
Показатель 6
0.609
Показатель 7
0.9
Показатель 8
0.833
Показатель 9
1
Показатель 10
1
Показатель 11
0.521
Показатель 12
0.547
Показатель 13
81.48
Полная задержка, p95, мс
113.6

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.scenario_benchmark external_data/hackathon/for_hackathon --every 50 --frames-per-bag 2 --distances 20 40 60 --output lidar_geometry/artifacts/scenario_benchmark_g1.json
EXP-002Компактный ранжировщик геометрических кандидатов

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0
Показатель 2
0.0357
Показатель 3
0.3929
Показатель 4
0.9647
Показатель 5
0.00855

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.train_risk_model external_data/hackathon/for_hackathon --every 20 --synthetic-every 100 --cache lidar_geometry/artifacts/risk_training_cache_v2.npz --model lidar_geometry/models/risk_model_g2.json --report lidar_geometry/artifacts/risk_model_audit_g2.json
EXP-003Трекинг компонентов по дальности и поперечной координате

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
1145
Показатель 2
120
Показатель 3
48
Показатель 4
85
Показатель 5
27
Показатель 6
13
Показатель 7
21
Показатель 8
97.33
Полная задержка, p95, мс
115.8

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_tracker external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g2.json --threshold 0.8 --every 2 --synthetic-frames 12 --output lidar_geometry/artifacts/component_tracker_evaluation_t080.json
EXP-004Удаление абсолютных координат из ранжировщика

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4464
Показатель 2
0.9529
Показатель 3
0.0513

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.train_risk_model external_data/hackathon/for_hackathon --invariant --cache lidar_geometry/artifacts/risk_training_cache_v2.npz --model lidar_geometry/models/risk_model_g3_invariant.json --report lidar_geometry/artifacts/risk_model_audit_g3_invariant.json
EXP-005Ранжировщик с ценой ошибок для критических препятствий

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4405
Показатель 2
0.9765
Показатель 3
0.00855
Показатель 4
81
Показатель 5
38
Показатель 6
38
Показатель 7
18
Показатель 8
96.1
Полная задержка, p95, мс
120.1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.train_risk_model external_data/hackathon/for_hackathon --critical-weight 4 --cache lidar_geometry/artifacts/risk_training_cache_v2.npz --model lidar_geometry/models/risk_model_g4_cost_sensitive.json --report lidar_geometry/artifacts/risk_model_audit_g4_cost_sensitive.json
EXP-006Явный признак бокового зазора

Результат не позволяет сделать надёжный вывод; подход не вошёл в итоговый алгоритм.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4405
Показатель 2
0.9765
Показатель 3
0.00855
Показатель 4
0.5655
Показатель 5
0.1026

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.train_risk_model external_data/hackathon/for_hackathon --critical-weight 4 --cache lidar_geometry/artifacts/risk_training_cache_v2.npz --model lidar_geometry/models/risk_model_g5_clearance.json --report lidar_geometry/artifacts/risk_model_audit_g5_clearance.json
EXP-007Спасательный контур для устойчивой критической геометрии

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
48
Показатель 2
535
Показатель 3
27
Показатель 4
193
Показатель 5
1145
Показатель 6
13
Показатель 7
18
Показатель 8
21
Показатель 9
101.2
Полная задержка, p95, мс
153.7

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_evidence_fusion external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --every 2 --synthetic-frames 12 --output lidar_geometry/artifacts/evidence_fusion_g6.json
EXP-008Восстановление синтетических масок по исходным кадрам

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
307131
Показатель 2
4
Показатель 3
1.3e-05

Команда воспроизведения:

Compare robust frame fingerprints, then intersect exact float32 XYZ hashes for official frame 150 and its nearest organizer candidate.
EXP-009Разделимая сумма по окрестности occupancy-grid

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
90.94
Показатель 2
88.23
Показатель 3
20
Показатель 4
False

Команда воспроизведения:

.venv-lidar/bin/python -m unittest discover -s lidar_geometry -p 'test_*.py' && paired direct/separable timing on the same 30 decoded clouds
EXP-010Оценка собственного движения по стенам туннеля

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
1510
Показатель 2
1836
Показатель 3
1.5
Показатель 4
0.9897
Показатель 5
99.24
Показатель 6
0.556
Оценка движения, p50, мс
7.233
Оценка движения, p95, мс
9.38

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.ego_motion external_data/hackathon/synthetic_official/data/cloud_with_fake_obj/cloud_with_fake_obj_0.db3 --output lidar_geometry/artifacts/official_ego_motion.json
EXP-011Строгая привязка синтетической цели

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6131
Показатель 2
0.5833
Показатель 3
0.9412
Показатель 4
0.9529
Показатель 5
0.744
Показатель 6
0.0824

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.scenario_benchmark external_data/hackathon/for_hackathon --every 50 --frames-per-bag 2 --distances 20 40 60 --output lidar_geometry/artifacts/scenario_benchmark_g1_strict.json
EXP-012Кластеризация с защитной полосой вокруг габарита

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.5833
Показатель 2
0.5595
Показатель 3
0.9529
Показатель 4
0.9529
Показатель 5
0.0824
Показатель 6
0.4118

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.scenario_benchmark external_data/hackathon/for_hackathon --every 50 --frames-per-bag 2 --distances 20 40 60 --guard-band 1.5 --output lidar_geometry/artifacts/scenario_benchmark_g7_guard_strict.json
EXP-013Повторное обучение после исправления разметки

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4405
Показатель 2
0.4286
Показатель 3
0.9765
Показатель 4
0.9765
Показатель 5
0.00855
Показатель 6
0.00855

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.train_risk_model external_data/hackathon/for_hackathon --critical-weight 4 --cache lidar_geometry/artifacts/risk_training_cache_v3_strict.npz --model lidar_geometry/models/risk_model_g8_strict.json --report lidar_geometry/artifacts/risk_model_audit_g8_strict.json
EXP-014Трекинг компонентов в мировых координатах

Привязка к мировым координатам убрала 25% ложных тревог на условно чистых кадрах и один эпизод тревоги, не потеряв ни одну из 12 обнаруженных синтетических последовательностей. Этот трекер используется при надёжной оценке движения по стенам; иначе включается исходный трекер.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры с тревогой: трекер по дальности
20
Кадры с тревогой: мировой трекер
15
Эпизоды тревоги: трекер по дальности
11
Эпизоды тревоги: мировой трекер
10
Обнаруженные синтетические последовательности: трекер по дальности
12
Обнаруженные синтетические последовательности: мировой трекер
12
Всего синтетических последовательностей
21
Оценка движения, p50, мс
7.233
Оценка движения, p95, мс
9.38

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_world_tracker external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --threshold 0.9 --output lidar_geometry/artifacts/world_tracker_g9.json
EXP-015Восстановление позиций официальных сценариев

Результат не позволяет сделать надёжный вывод; подход не вошёл в итоговый алгоритм.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
10
Показатель 2
2
Показатель 3
3
Показатель 4
5
Показатель 5
99.62
Показатель 6
705.6

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.recover_official_scenarios external_data/hackathon/synthetic_official/data/cloud_with_fake_obj/cloud_with_fake_obj_0.db3 --output lidar_geometry/artifacts/official_scenario_positions.json
EXP-016Предел временного сверхразрешения

Результат не позволяет сделать надёжный вывод; подход не вошёл в итоговый алгоритм.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
21
Показатель 2
0
Показатель 3
0
Показатель 4
1.373

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_temporal_superresolution external_data/hackathon/for_hackathon --frames 8 --output lidar_geometry/artifacts/temporal_superresolution_feasibility.json
EXP-017Поэтапный аудит полноты по точным синтетическим маскам

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
168
Показатель 2
132
Показатель 3
83
Показатель 4
63
Показатель 5
14
Показатель 6
0
Показатель 7
12
Показатель 8
0
Показатель 9
20
Показатель 10
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.audit_proposal_stages external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --frames 8 --threshold 0.9 --output lidar_geometry/artifacts/proposal_stage_audit.json
EXP-018Спасательный контур критических объектов в мировых координатах

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
535
Показатель 2
379
Показатель 3
193
Показатель 4
154
Показатель 5
18
Показатель 6
18
Всего синтетических последовательностей
21
Показатель 8
97.27
Полная задержка, p95, мс
118.3

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_evidence_fusion external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --every 2 --synthetic-frames 12 --world-coordinates --output lidar_geometry/artifacts/evidence_fusion_world_g10.json
EXP-019Физические правила для рельсов и кабелей

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
1145
Показатель 2
773
Показатель 3
232
Показатель 4
14
Показатель 5
21
Показатель 6
2
Показатель 7
100.3
Полная задержка, p95, мс
137.3

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_evidence_fusion external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --every 2 --synthetic-frames 12 --world-coordinates --physical-rules --output lidar_geometry/artifacts/evidence_fusion_physical_g11.json
EXP-020Спасательный контур только для кабелей

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
1145
Показатель 2
887
Показатель 3
156
Показатель 4
14
Показатель 5
21
Показатель 6
2
Показатель 7
100.3
Полная задержка, p95, мс
133.2

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_evidence_fusion external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --every 2 --synthetic-frames 12 --world-coordinates --cable-only --output lidar_geometry/artifacts/evidence_fusion_cable_g12.json
EXP-021Профилирование и оптимизация горячего пути детектора

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
242
Показатель 2
65.89
Показатель 3
78.67
Показатель 4
74.26
Показатель 5
90.81
Показатель 6
112.2
Показатель 7
True
Показатель 8
True
Показатель 9
True

Команда воспроизведения:

Замер полного времени после 10 прогревочных кадров на roundT_doubleT_0.db3; детектор и режим сопровождения измерены вокруг одинаковых операций обработки кадра.
EXP-022Офлайн-smoke-test двух форматов данных

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
16
Показатель 2
26
Показатель 3
pass
Показатель 4
UNKNOWN
Показатель 5
visible
Показатель 6
43
Показатель 7
pass
Показатель 8
pass

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.smoke_test --xyzi-bag external_data/hackathon/synthetic_official/data/cloud_with_fake_obj/cloud_with_fake_obj_0.db3 --xyzirt-bag external_data/hackathon/for_hackathon/roundT_doubleT/roundT_doubleT_0.db3 --output lidar_geometry/artifacts/submission_smoke.json
EXP-023Перенос без дообучения на OSDaR23 и OSDaR-AR

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
20
Показатель 2
20
Показатель 3
0
Показатель 4
20
Показатель 5
60
Показатель 6
38
Показатель 7
34
Показатель 8
0.8947
Показатель 9
20
Показатель 10
0.5263

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_osdar_transfer external_data/osdar23 external_data/osdar_ar/5_station_bergedorf_5.2_osdar_ar.zip external_data/osdar_ar/6_station_klein_flottbek_6.1_osdar_ar.zip --samples-per-class 5 --output lidar_geometry/artifacts/osdar_transfer.json
EXP-024Минимальный контейнер для запуска

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
88
Показатель 2
9
Показатель 3
1315
Показатель 4
UNKNOWN
Показатель 5
UNKNOWN
Показатель 6
pass

Команда воспроизведения:

Stage the exact Docker COPY file list under /tmp, import on Python 3.12/NumPy 1.26.4, load risk_model.json, and process one 16-byte and one 26-byte cloud.
EXP-025Интеграционный smoke-test контейнера ROS 2 Humble

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
29.8.1
Показатель 2
29.5.2
Показатель 3
humble
Показатель 4
296684909
Показатель 5
99330
Показатель 6
1510
Показатель 7
/lidar_points
Показатель 8
pass
Показатель 9
1
Показатель 10
2
Показатель 11
10
Показатель 12
True
Показатель 13
True
Показатель 14
81.75
Показатель 15
92.34
Показатель 16
pass

Команда воспроизведения:

docker build -f lidar_geometry/Dockerfile.mvp -t metro-guard:mvp .; run detector, ros2 bag play, and ros2 topic echo in an isolated Docker network with ROS_DOMAIN_ID=73
EXP-026Аудит переноса доменно-инвариантного подавителя

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 4; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
38
Показатель 2
13
Показатель 3
0.3421
Показатель 4
20
Показатель 5
0.5263
Показатель 6
0.4464
Показатель 7
0.4405
Показатель 8
0.0513
Показатель 9
0.00855

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evaluate_osdar_transfer external_data/osdar23 external_data/osdar_ar/5_station_bergedorf_5.2_osdar_ar.zip external_data/osdar_ar/6_station_klein_flottbek_6.1_osdar_ar.zip --samples-per-class 5 --model lidar_geometry/models/risk_model_g3_invariant.json --output lidar_geometry/artifacts/osdar_transfer_g3_invariant.json
EXP-027Непрерывное воспроизведение 100 кадров в ROS 2

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
1
Показатель 2
2
Показатель 3
100
Показатель 4
True
Показатель 5
True
Показатель 6
77.69
Показатель 7
102.7
Показатель 8
187.4
Показатель 9
77.7
Показатель 10
142
Показатель 11
268.1
Показатель 12
False

Команда воспроизведения:

python3 tools/ros2_container_smoke.py external_data/hackathon/synthetic_official/data/cloud_with_fake_obj --count 100 --timeout 120 --output lidar_geometry/artifacts/ros2_container_sustained_100.json
EXP-028Квадратичный ранжировщик кандидатов

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.2334
Показатель 2
0.08696
Показатель 3
0.9717
Показатель 4
0.0169
Показатель 5
0.04878
Показатель 6
0.5343
Показатель 7
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.compare_candidate_models lidar_geometry/artifacts/risk_training_cache_v2.npz
EXP-029Компактная MLP на NumPy

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4926
Показатель 2
0.3472
Показатель 3
0.8867
Показатель 4
0.02404
Показатель 5
0.07143
Показатель 6
0.5343
Показатель 7
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.compare_candidate_models lidar_geometry/artifacts/risk_training_cache_v2.npz
EXP-030Детектор аномалий, обученный только на норме

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.03889
Показатель 2
0
Показатель 3
0.9368
Показатель 4
0.06429
Показатель 5
0.3214

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.compare_candidate_models lidar_geometry/artifacts/risk_training_cache_v2.npz
EXP-031Классические свёрточные признаки относительно рельсов

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
2336
Показатель 2
13
Показатель 3
102
Показатель 4
0.571
Показатель 5
0.4444
Показатель 6
0.007143
Показатель 7
0.1699
Показатель 8
0
Показатель 9
0.9667
Показатель 10
0.4404
Показатель 11
0.3209
Показатель 12
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.spatial_patch_experiment external_data/hackathon/for_hackathon
EXP-032Компактный нейросетевой ранжировщик свёрточных признаков

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
102
Показатель 2
8
Показатель 3
0.363
Показатель 4
0.08955
Показатель 5
1
Показатель 6
0.04683
Показатель 7
0.1786
Показатель 8
0.571
Показатель 9
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.spatial_patch_experiment external_data/hackathon/for_hackathon
EXP-033Слияние геометрии и CV с учётом знакомости туннеля

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.007143
Показатель 3
0.494
Показатель 4
0.3778
Показатель 5
0.007143
Показатель 6
0.4442
Показатель 7
0
Показатель 8
0.7056
Показатель 9
0
Показатель 10
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.domain_gated_fusion
EXP-034OOD-воздержание с обходом при сильной геометрии

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.5628
Показатель 3
0.4444
Показатель 4
0.007143
Показатель 5
0
Показатель 6
0.8205
Показатель 7
32
Показатель 8
29
Показатель 9
3
Показатель 10
72.42
Показатель 11
137

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.domain_gated_fusion && .venv-lidar/bin/python -m lidar_geometry.train_domain_guard
EXP-035Доменно-инвариантное CV со случайными свёртками

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.1699
Показатель 2
0.1711
Показатель 3
0.1784
Показатель 4
0.03731
Показатель 5
0
Показатель 6
0.3715
Показатель 7
0.571

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-036Геометрия и OOD-контекст за один проход

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
59
Показатель 2
60.85
Показатель 3
59.72
Показатель 4
77.2
Показатель 5
72.42
Показатель 6
29
Показатель 7
3
Показатель 8
pass
Показатель 9
1960

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.smoke_test --xyzi-bag external_data/hackathon/synthetic_official/data/cloud_with_fake_obj/cloud_with_fake_obj_0.db3 --xyzirt-bag external_data/hackathon/for_hackathon/doubleT_platform/doubleT_platform_0.db3
EXP-037Рандомизация домена CV и внешние данные OSDaR

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.1784
Показатель 2
0.2227
Показатель 3
0.08209
Показатель 4
0.007143
Показатель 5
0.1257
Показатель 6
69
Показатель 7
0.1228
Показатель 8
0.571

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.build_osdar_spatial_cache external_data/osdar_ar/5_station_bergedorf_5.2_osdar_ar.zip external_data/osdar_ar/6_station_klein_flottbek_6.1_osdar_ar.zip --samples-per-class 10 && .venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-038Слабоконтролируемое построение памяти коридора

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
3112
Показатель 2
219
Показатель 3
76.63
Показатель 4
94.04
Показатель 5
23
Показатель 6
485
Показатель 7
0.1784
Показатель 8
0.1428
Показатель 9
0.0857
Показатель 10
0.0049

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.mine_weak_obstacle_bag external_data/hackathon/for_hackathon/doubleT_obstacle/doubleT_obstacle_0.db3 && .venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-039Перебор порога обхода OOD при сильных признаках

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
1
Показатель 2
0.5628
Показатель 3
0
Показатель 4
0.5
Показатель 5
0.5643
Показатель 6
0
Показатель 7
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.domain_gated_fusion
EXP-040Высокоточная слабая разметка реальных объектов

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
28
Показатель 2
0.1784
Показатель 3
0.1369
Показатель 4
0.0597
Показатель 5
1
Показатель 6
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-041Пересадка фрагментов реальных объектов

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.1784
Показатель 2
0.2122
Показатель 3
0.08955
Показатель 4
0.9205
Показатель 5
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-042Пересадка объектов и рандомизация сенсора

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.2341
Показатель 2
0.09701
Показатель 3
0.8805
Показатель 4
0.007143
Показатель 5
0.571

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.invariant_spatial_experiment
EXP-043Поиск изменений без выравнивания знакомого маршрута

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.3728
Показатель 2
0.2985
Показатель 3
0.3662
Показатель 4
0.016
Показатель 5
0.08

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.route_memory_experiment external_data/hackathon/for_hackathon
EXP-044Выровненная память знакомого маршрута с учётом габарита

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.8771
Показатель 2
0.8
Показатель 3
1
Показатель 4
0.003226
Показатель 5
0.01613
Показатель 6
0.9815
Показатель 7
0.3871

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.route_memory_experiment external_data/hackathon/for_hackathon
EXP-045Ранжировщик Random Forest

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.6766
Показатель 3
0.6143
Показатель 4
1
Показатель 5
0.05366
Показатель 6
0.2683

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.tree_ensemble_experiment
EXP-046Ранжировщик Extra Trees

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.6461
Показатель 3
0.5111
Показатель 4
1
Показатель 5
0.007143
Показатель 6
0.03571

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.tree_ensemble_experiment
EXP-047Ранжировщик на гистограммном градиентном бустинге

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.8658
Показатель 3
0.8
Показатель 4
1
Показатель 5
0.1439
Показатель 6
0.3902

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.tree_ensemble_experiment
EXP-048Ранжировщик RBF SVM

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.02495
Показатель 2
0
Показатель 3
1
Показатель 4
0.06341

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-049Ранжировщик kNN со взвешиванием по расстоянию

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.913
Показатель 2
0.8
Показатель 3
0.8
Показатель 4
0.5063

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-050Ранжировщик Gaussian Naive Bayes

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.1508
Показатель 2
0.02632
Показатель 3
0.88
Показатель 4
0.06429

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-051Ранжировщик AdaBoost на пнях решений

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4901
Показатель 2
0.3556
Показатель 3
0.9538
Показатель 4
0.0169

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-052Равновесное усреднение линейной модели и Extra Trees

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6428
Показатель 2
0.5111
Показатель 3
1
Показатель 4
0.01202

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-053Усреднение Extra Trees с весом геометрии

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6675
Показатель 2
0.5111
Показатель 3
1
Показатель 4
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-054Максимум голосов линейной модели и деревьев

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6694
Показатель 2
0.5778
Показатель 3
0.7805
Показатель 4
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-055Стэкинг линейной модели и деревьев по bag

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6505
Показатель 2
0.5333
Показатель 3
1
Показатель 4
0.01202

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.classical_hybrid_experiment
EXP-056Подбор числа деревьев компактного Extra Trees

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
100
Показатель 2
0.6813
Показатель 3
0.5111
Показатель 4
1
Показатель 5
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.compact_tree_experiment
EXP-057Перенос на незнакомые составные формы без дообучения

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.906
Показатель 2
0.1638
Показатель 3
0.05092
Показатель 4
0.06535
Показатель 5
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.shape_generalization_experiment external_data/hackathon/for_hackathon
EXP-058Аугментация составных форм с отдельным holdout

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.4618
Показатель 2
0.1403
Показатель 3
0
Показатель 4
0.903

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.shape_generalization_experiment external_data/hackathon/for_hackathon
EXP-059Универсальный детектор и эксперт знакомого маршрута

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.571
Показатель 2
0.6813
Показатель 3
0.8771
Показатель 4
1
Показатель 5
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.route_comparable_experiment
EXP-060Производительность переносимого гибрида из 100 деревьев

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
74744
Показатель 2
2.703
Показатель 3
4.885e-15
Показатель 4
0
Показатель 5
69.75
Показатель 6
79.88
Показатель 7
83.08
Показатель 8
44

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.benchmark_tree_runtime external_data/hackathon/for_hackathon/roundT_doubleT/roundT_doubleT_0.db3 --trees 100
EXP-061Физически маршрутизируемые эксперты для наземных и подвесных объектов

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.6813
Показатель 2
0.6484
Показатель 3
0.5111
Показатель 4
0.5333
Показатель 5
1
Показатель 6
0.007143

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.vertical_expert_experiment
EXP-062Аудит сигнатуры официального генератора синтетики

Результат не позволяет сделать надёжный вывод; подход не вошёл в итоговый алгоритм.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
6
Показатель 2
384
Показатель 3
64
Показатель 4
26
Показатель 5
16
Показатель 6
35
Показатель 7
21
Показатель 8
11
Показатель 9
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.audit_synthetic_provenance external_data/hackathon --sample-frames 64
EXP-063Граница габарита с учётом неопределённости

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.3988
Показатель 2
0.3988
Показатель 3
0.9529
Показатель 4
0.9529
Показатель 5
0.03419
Показатель 6
0.03419
Показатель 7
0
Показатель 8
4

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.uncertainty_clearance_experiment external_data/hackathon/for_hackathon
EXP-064Поддержка точек с учётом угловой плотности

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.5913
Показатель 2
0.6275
Показатель 3
0.03623
Показатель 4
0.7784
Показатель 5
0.7819
Показатель 6
0.8981
Показатель 7
0.8889
Показатель 8
1842
Показатель 9
1923
Показатель 10
4

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.range_support_experiment external_data/hackathon/for_hackathon
EXP-065Временное подтверждение три кадра из пяти

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры чистых записей
2287
Показатель 2
38
Показатель 3
21
Показатель 4
22
Показатель 5
14
Показатель 6
29
Показатель 7
19
Показатель 8
15
Показатель 9
9
Показатель 10
0.4211
Показатель 11
0.3333
Показатель 12
0.4828
Показатель 13
0.5263
Показатель 14
21
Показатель 15
12
Показатель 16
12
Показатель 17
12
Показатель 18
12
Показатель 19
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.temporal_window_experiment external_data/hackathon/for_hackathon lidar_geometry/models/risk_model_g4_cost_sensitive.json --threshold 0.9 --output lidar_geometry/artifacts/temporal_window_exp065.json
EXP-066Регуляризация центральной линии рельсов по непрерывности

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.7122
Показатель 2
0.7122
Показатель 3
0.8981
Показатель 4
0.8981
Показатель 5
1842
Показатель 6
1842
Показатель 7
116
Показатель 8
116
Показатель 9
81.03
Показатель 10
117

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.continuity_path_experiment external_data/hackathon/for_hackathon --output lidar_geometry/artifacts/continuity_path_exp066.json
EXP-067Итоговая оценка с приоритетами конкурса

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 5; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
portable_tree_25_75
Показатель 2
33
Показатель 3
2287
Показатель 4
0.01443
Показатель 5
23
Показатель 6
0.404
Показатель 7
1
Показатель 8
0.1429
Показатель 9
0.06535
Показатель 10
92.41
Показатель 11
2
Показатель 12
15
Показатель 13
9

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.competition_scorecard --output lidar_geometry/artifacts/competition_scorecard_exp067.json
EXP-068Переносимый гибрид с подтверждением три из пяти

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры чистых записей
2287
Тревожные кадры без памяти
33
Эпизоды тревоги без памяти
23
Показатель 4
9
Показатель 5
7
Показатель 6
9
Показатель 7
7
Показатель 8
0.7273
Показатель 9
0.6957
Показатель 10
21
Найденные события без памяти
17
Показатель 12
15
Показатель 13
15
Показатель 14
2
Показатель 15
109.4
Показатель 16
109.4
Показатель 17
118.2
Показатель 18
0.1429
Показатель 19
0.1429
Показатель 20
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.portable_temporal_experiment external_data/hackathon/for_hackathon --output lidar_geometry/artifacts/portable_temporal_exp068.json
EXP-069Проверка верхней границы дальности

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
30
Показатель 2
89
Показатель 3
184
Показатель 4
0.2857
Показатель 5
0
Показатель 6
0
Показатель 7
0
Показатель 8
True

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.range_ceiling_experiment external_data/hackathon/for_hackathon --frames-per-bag 6 --sample-every 20 --output lidar_geometry/artifacts/range_ceiling_exp069.json
EXP-070Ограниченная экстраполяция пути

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
0.1935
Показатель 2
0.6452
Показатель 3
0
Показатель 4
0.8333
Показатель 5
0.5333
Показатель 6
0.7333
Показатель 7
0
Показатель 8
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.path_extrapolation_experiment external_data/hackathon/for_hackathon --frames-per-bag 3 --sample-every 20 --output lidar_geometry/artifacts/path_extrapolation_exp070.json
EXP-071Дальний ранжировщик на отложенных тоннелях

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 3; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Показатель 1
501
Показатель 2
60
Показатель 3
70675
Показатель 4
31
Показатель 5
7
Показатель 6
0.2258
Показатель 7
82
Показатель 8
0.4512
Показатель 9
1

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.far_range_ranker_experiment external_data/hackathon/for_hackathon --model lidar_geometry/artifacts/far_range_extra_trees.npz --output lidar_geometry/artifacts/far_range_ranker_exp071.json
EXP-072Онлайн-память: два подтверждения из трёх

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры чистых записей
2287
Тревожные кадры без памяти
33
Тревожные кадры с памятью
12
Эпизоды тревоги без памяти
23
Эпизоды тревоги с памятью
9
Снижение числа эпизодов тревоги
0.6087
Найденные события без памяти
17
Найденные события с памятью
15
Потерянные события
2
Полная задержка, p95, мс
93.3

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.online_memory_experiment external_data/hackathon/for_hackathon --cache lidar_geometry/artifacts/spatial_patch_cache_v1.npz --output lidar_geometry/artifacts/online_memory_exp072.json
EXP-073Память evidence в мировых координатах

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры чистых записей
2287
Эпизоды тревоги без памяти
23
Эпизоды тревоги с памятью
15
Снижение числа эпизодов тревоги
0.3478
Найденные события без памяти
17
Найденные события с памятью
17
Потерянные события
0
Полная задержка, p95, мс
135.5

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evidence_memory_experiment external_data/hackathon/for_hackathon --cache lidar_geometry/artifacts/spatial_patch_cache_v1.npz --association world --experiment EXP-073 --output lidar_geometry/artifacts/evidence_memory_exp073.json
EXP-074Память evidence без карты

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры чистых записей
2287
Тревожные кадры без памяти
33
Тревожные кадры с памятью
22
Эпизоды тревоги без памяти
23
Эпизоды тревоги с памятью
15
Снижение числа тревожных кадров
0.3333
Снижение числа эпизодов тревоги
0.3478
Найденные события без памяти
17
Найденные события с памятью
17
Потерянные события
0

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.evidence_memory_experiment external_data/hackathon/for_hackathon --cache lidar_geometry/artifacts/spatial_patch_cache_v1.npz --association range --experiment EXP-074 --output lidar_geometry/artifacts/range_evidence_memory_exp074.json
EXP-075Векторизованный runtime памяти

Гипотеза отклонена: критерий качества не выполнен или побочные эффекты оказались сильнее выигрыша.

Протокол и метрики

Источники: 1; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
252
Покадровый ансамбль, p95, мс
112.7
Ансамбль с памятью, p95, мс
101.5
Обновление памяти, p50, мс
0.04789
Обновление памяти, p95, мс
0.1016
Максимальное отклонение оценки
5.551e-16

Команда воспроизведения:

.venv-lidar/bin/python -m lidar_geometry.memory_runtime_benchmark external_data/hackathon/for_hackathon/roundT_doubleT/roundT_doubleT_0.db3 --output lidar_geometry/artifacts/memory_runtime_exp075.json
EXP-076Упакованная память признаков тоннелей

Гипотеза принята: ожидаемый эффект подтверждён заданными метриками.

Протокол и метрики

Источники: 2; точный список зафиксирован в реестре.

Разбиение: соседние кадры и производные одного фона не пересекают обучение, валидацию и тест.

Проверка утечки: зафиксирована в машиночитаемом реестре экспериментов.

Кадры
252
Показатель 2
4
Показатель 3
4
Показатель 4
92.53
Полная задержка, p95, мс
111.7

Команда воспроизведения:

.venv-lidar/bin/python -m demo_app.worker --input external_data/hackathon/for_hackathon/roundT_doubleT/roundT_doubleT_0.db3 --algorithm memory_hybrid --output lidar_geometry/artifacts/tunnel_memory_smoke_exp076.json --progress /tmp/tunnel-memory-progress.json --without-visualization

SHA-256 реестра: 758d9e7a981332a83a261e4c18518f3f7279373b046745fb4b57ffdf5043b7c0