Данные для обучения роботов из гостиничной работы: что нужно лабораториям и как выглядит чистый пилот.
Модели человекоподобных роботов и манипуляторов учатся на видео от первого лица, где люди выполняют реальные задачи. Уборка, работа на кухне и в прачечной — это повторяющаяся пошаговая работа с предметами, а именно это нужно таким моделям. В этом гайде — что должна сделать правильно программа съёмки лабораторного уровня. Он основан на пилоте, который Hospara готовит на IV квартал 2026.
Коротко. Это видео от первого лица (эгоцентрическое) с задачами по уборке, на кухне, в прачечной, у бассейна и в саду. Его снимают по спецификации, согласованной с лабораторией робототехники. Цепочка согласий охватывает объект, каждого участника из персонала и любую случайную съёмку. Лаборатории используют такое видео, чтобы обучать модели манипуляторов и человекоподобных роботов. Hospara готовит пилот на Бали на IV квартал 2026.
Что такое эгоцентрическое видео
Видео, записанное с точки зрения работника, обычно телефоном или камерой, закреплёнными на голове. На нём видны руки, инструменты и предметы во время задачи. Лаборатории используют его для предобучения и дообучения моделей, которые связывают восприятие с действием.
Это только видео, если не добавлены дополнительные датчики. Само по себе оно не содержит действий робота, состояний суставов или данных о глубине.
Почему гостиничные задачи
Заправка кроватей, подготовка ванных комнат, мытьё полов, мытьё посуды, складывание белья, чистка бассейна сачком и работа в саду повторяются сотни раз в неделю. Их выполняют по письменным регламентам. В них участвуют мягкие и деформируемые предметы, жидкости, инструменты и меняющийся свет.
В существующих датасетах такое сочетание встречается редко: они смещены в сторону кухонь в нескольких странах.
Что входит в спецификацию
- Семейство задач и число повторений
- Устройство съёмки и крепление, угол, разрешение и частота кадров
- Темп работы
- Участники-правши и левши
- Случаи ошибок и их исправления
- Условия освещения и разнообразие обстановки
- Критерии приёмки, которые применит контроль качества покупателя
Съёмка без спецификации даёт материал, который никто не сможет использовать.
Цепочка согласий
- Отдельное конкретное разрешение от каждого собственника объекта
- Подписанное соглашение об участии с каждым участником из персонала, на его родном языке
- Съёмка только в незанятых помещениях
- Правила, исключающие съёмку гостей, документов и экранов
- Размытие до экспорта
- Журнал согласий для каждого клипа
- Письменная процедура изоляции и удаления всего, что попало в кадр случайно
По закону Индонезии о защите персональных данных (PDP Law, UU 27/2022) правовое основание и гарантии для трансграничной передачи проверяются с юристом, прежде чем что-либо покинет страну.
Поставка
Клипы разделены по задачам, с временными метками и JSON-манифестами. Размытие применено, и у каждого клипа есть журнал согласий.
По запросу мы упаковываем клипы в структуру каталогов RLDS или LeRobot — только видео и манифесты. Разметка рук или предметов доступна через партнёров, тоже по запросу.
Как к этому подходит Hospara
Пилот в IV квартале 2026 года на участвующих объектах на Бали. Он начинается с оплачиваемого этапа калибровки в одном-двух помещениях, где съёмка разрешена. Затем объём согласуется для каждой спецификации.
Пока ничего не записано и не передано. Подробности для лабораторий робототехники.
Частые вопросы
Есть ли в эгоцентрическом видео действия робота или данные о глубине?
Нет. Это видео и манифесты задач, если не согласованы дополнительные датчики. Упаковка в структуры RLDS или LeRobot не добавляет действий, состояний или глубины.
Как оформляется согласие персонала?
Каждый участник из персонала подписывает соглашение об участии на своём родном языке. За каждый принятый час ему платят сверх зарплаты. Он может в любой момент отказаться от дальнейшей съёмки, и это никак не влияет на его работу. Обучение и время съёмки считаются рабочими часами.
Может ли лаборатория прислать своё оборудование для съёмки?
Да. По умолчанию это телефон, закреплённый на голове. Можно использовать GoPro, смарт-очки или установку лаборатории — с процедурой калибровки лаборатории.
Смотрите также
Планируете программу съёмки?
Расскажите, какие задачи, объём и критерии приёмки вам нужны. Мы прямо скажем, что пилот может дать.