Стартап Human Archive из Кремниевой долины включился в этот тренд, сотрудничая с компаниями для того, чтобы работники носили специальные кепки с камерами для сбора эгоцентричных (с точки зрения первого лица) видеоданных о повседневных задачах, которые могут быть использованы для обучения роботов.
Не называя конкретных партнеров, стартап сообщил, что работает с компаниями в сферах бытовых услуг, хостелов и ресторанов для сбора эгоцентричных данных, и что у него развернуто более 1000 активных гарнитур в различных локациях.
Опираясь на этот успех, Human Archive объявил во вторник, что привлек $8,2 млн финансирования от Wing Venture Capital, NVP Capital, Y Combinator и ангелов из OpenAI, Nvidia, Google, Mercor, AfterQuery, BAIR, SAIL, Брэда Боа и Meta*.
Стартап был основан двумя студентами из Беркли и двумя из Стэнфорда — Самаем Мани, Рушилом Агарвалом, Шлоке Пателем и Раджем Пателем, причем последние двое являются двоюродными братьями. Все четверо имеют опыт исследований в области робототехники, аппаратного обеспечения и тактильных данных.
Основание компании — это прямая ставка на направление развития индустрии ИИ. В то время как лаборатории робототехники и передовые ИИ-компании соревнуются в создании машин, способных выполнять физические задачи в реальном мире, они сталкиваются с критическим узким местом — нехваткой высококачественных обучающих данных из реального мира, показывающих, как люди выполняют повседневную работу. Ставка Human Archive заключается в том, что работники, занятые в бурно развивающейся гиг-экономике Индии, представляют собой неиспользованный и масштабируемый источник именно таких данных.
Хотя Human Archive работает с множеством партнеров, стартап сообщил, что ему было отказано во многих индийских компаниях, предоставляющих бытовые услуги, включая Pronto и Urban Company, в сотрудничестве.
Отказ крупных игроков стал достоянием общественности на прошлых выходных, когда индийское издание Entrackr сообщило, что Pronto активно ищет партнерства для сбора данных работников для обучения робототехники, и что Snabbit вела предварительные переговоры с Human Archive, прежде чем проект сорвался.
Генеральный директор Urban Company Абхирадж Сингх Бхал ответил в X, заявив, что компания не будет участвовать в таких соглашениях — что побудило Пателя возразить, что Urban Company скоро будет вынуждена пересмотреть свою позицию или рисковать потерей актуальности из-за оттока клиентов. Соучредитель Рушил Агарвал был еще более прямолинеен, опубликовав, что основатель Pronto Анджали Сардана посмеялась над ним и назвала его «глупым», когда он поднял идею партнерства по данным.
Pronto признала факт переговоров, но заявила, что решила не продолжать сотрудничество.
По всей стране другие стартапы собирают эгоцентричные данные в различных рабочих средах, включая заводские цеха. Чтобы выделиться, Human Archive использует и разрабатывает дополнительные устройства, такие как тактильные перчатки, костюм для захвата движения всего тела и наружные камеры для сбора данных, включая движение и тактильное усилие, синхронизированных с RGB-D (цветное изображение, сопоставленное в реальном времени с информацией о глубине), для продажи ИИ-лабораториям. Стартап считает, что только видеоданных недостаточно, но их сопоставление с другими данными датчиков делает их значительно более ценными.
Радж Патель рассказал TechCrunch, что, показывая проект другим исследователям, они столкнулись с эгоцентричными данными и захотели объединить видео с данными о тактильном усилии. Основатели начали общаться с различными лабораториями и поняли, что рынок эгоцентричных и основанных на датчиках данных только набирает обороты, и решили построить компанию вокруг этого.
Изначально Human Archive использовал импровизированные установки или готовые приспособления для сбора данных. Теперь компания работает над собственным оборудованием, которое взаимодействует и собирает различные типы данных. У нее уже развернуто более 50 различных устройств для сбора различных точек данных.
«Для сбора данных мы начинали с iPhone, затем создали наши собственные приспособления и кепки. Теперь у нас есть более семи различных аппаратных продуктов, которые мы используем взаимозаменяемо в различных модальностях. После сбора данных с различных устройств мы работали над синхронизацией данных из всех этих различных источников», — сказал он в телефонном разговоре.
Компания заявила, что разрабатывает способы точной настройки моделей ИИ с использованием собственных данных и их тестирования на роботах для оценки эффективности задач. Делая это, стартап может продемонстрировать качество своих данных потенциальным клиентам и проводить внутреннее дообучение моделей.
Зак ДеВитт, партнер Wing VC, заявил, что стартап имеет уникальное преимущество в сборе данных с нескольких датчиков.
«Никому в мире еще не удавалось синхронизировать и собирать данные с гарнитур RGB-D, обратной связи по усилию, захвата движения всего тела, а также синхронизированные данные с нагрудных и наручных камер в масштабе. Они проводили внутреннее обучение моделей на этих данных, и каждая крупная лаборатория и университет заинтересованы в проведении экспериментов на них из-за новизны датчиков и масштаба нового набора данных, который они скоро выпустят», — сказал он TechCrunch.
Сбор данных в Индии и планы экспансии
Несмотря на отказ от известных игроков в индустрии бытовых услуг, Human Archive объединился с более мелкими стартапами, чтобы предложить клиентам скидки на услуги. Когда работник прибывает в дом, потребителям через приложение предоставляется выбор: заплатить сниженную цену в обмен на согласие на сбор данных или заплатить полную цену за визит без записи.
Радж Патель упомянул, что клиенты охотно выбирают первый вариант, поскольку споры о качестве обслуживания распространены, а видеозаписи могут помочь их разрешить.
Компания платит работникам базовую ставку в размере $1 в час за участие в сборе эгоцентричных данных. Согласно отчету Economic Times, другие компании платят ₹250–₹400 в час (примерно $2,63–$4,20). Патель сказал, что конкуренты платят больше, чем Human Archive, но его присутствие на местах в Индии позволяет ему удерживать компенсацию на более низком уровне.
«Сеть Human Archive предоставляет немедленные, гибкие возможности заработка по всему миру, снижая барьер для участия в экономике ИИ. Мы рассматриваем это как критический мост, который обеспечивает немедленное существование, одновременно создавая инфраструктуру для более безопасного и продуктивного будущего», — сказал ДеВитт.
Помимо оплаты труда, существуют опасения по поводу конфиденциальности, связанные со сбором данных посредством видеозаписи. Неясно, какую информацию Human Archive предоставляет работникам о том, как используются их кадры. Компания заявила, что ее коммерческие контракты соответствуют индийскому Закону о защите персональных данных (DPDP), поскольку она отображает уведомление о политике конфиденциальности, а также информацию о согласии, подробно описывающую цель сбора данных и способы их обработки. Компания заявила, что все данные анонимизированы, а лица на записях размыты. На прошлой неделе Moneycontrol сообщил, что Министерство электроники и информационных технологий Индии изучает механизмы согласия и методы сбора данных стартапами, собирающими эгоцентричные данные через работников бытовых услуг.
В то время как Human Archive в основном собирает данные в Индии, он начал расширяться в Юго-Восточную Азию и США. Компания также создает платформу, чтобы любой желающий мог участвовать в сборе данных и зарабатывать деньги. Она также хочет предлагать клиентам в США такие услуги, как уборка или приготовление пищи, в обмен на сбор данных участвующими работниками — хотя эти программы находятся только на ранней стадии пилотирования.
Множество хорошо финансируемых стартапов соревнуются в создании физического ИИ. Для этого требуются огромные объемы обучающих данных, показывающих людей за работой — и Human Archive является одним из игроков, конкурирующих за удовлетворение этого спроса. То, сможет ли его подход масштабироваться, будет зависеть от партнерств, которые он заключит, а также от уникальности и объема данных, которые он сможет собрать, чтобы удовлетворить аппетиты лабораторий физического ИИ.
Facebook*, Instagram* и WhatsApp* принадлежат компании Meta* Platforms Inc., деятельность которой признана экстремистской и запрещена на территории Российской Федерации.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Ivan Mehta
