Peripheral Labs использует сенсоры беспилотных автомобилей и ИИ, чтобы погрузить болельщиков в самую гущу игры

объемное видео,ии в спорте,3d-реконструкция,спортивные технологии,peripheral labs,khosla ventures

Peripheral Labs привлек $3,6 млн посевных инвестиций от Khosla Ventures для развития технологии объемного видео в спорте. Стартап использует ИИ и 3D-реконструкцию для создания иммерсивного опыта для болельщиков и аналитики для команд.

Один из способов добиться этого — использование генерации объемного видео, позволяющей пользователям просматривать игру под разными углами, создавая ощущение погружения, как в видеоигре. Основная технология использует многочисленные камеры для 3D-захвата видеоматериала, чтобы каждый мог рассматривать его с различных точек зрения. Канадская компания Peripheral Labs стремится сделать эту технологию доступной для лиг и команд, чтобы она могла охватить больше вещателей и болельщиков.

Peripheral Labs была основана Кельвином Куи и Мустафой Ханом в 2024 году. Оба работали над беспилотными автомобилями в команде Университета Торонто, завоевав несколько трофеев. Хан работал исследователем в Huawei, а Куи имеет опыт работы с системами шасси в качестве инженера-программиста в Tesla.

«Мы с Мустафой — большие поклонники спорта. Он большой болельщик «Арсенала», а я вырос, смотря игры «Ванкувер Кэнакс» с семи лет. Когда Мустафа показал мне свои исследования по 3D-реконструкции, мой мозг сказал, что было бы здорово смотреть хоккей именно так [в свободном, многоугольном формате]. Так мы и начали работать над Peripheral Labs», — рассказал Куи в интервью TechCrunch.

В компании заявили, что идея объемной генерации не нова. Но благодаря новым моделям ИИ и достижениям в области компьютерного зрения ее основатели уверены, что технология готова для массового внедрения.

Дуэт использует свой опыт работы с беспилотными автомобилями для применения концепций робототехнического восприятия и 3D-зрения к 3D-реконструкции видео в спорте. Эта система может сократить количество необходимых камер со 100 до 32, помогая снизить затраты и эксплуатационные расходы, по словам Куи и Хана. Стартап стремится максимально минимизировать затраты на оборудование для команд и вещателей и заключать многолетние контракты на свою платформу.

Программная платформа предоставит биомеханические данные игроков и статистику для команд и лиг, используя собственный набор датчиков, аналогичный датчикам в беспилотных автомобилях, которые захватывают сцену с глубиной. Она позволит по-новому управлять просмотром игры для вещателей и болельщиков, используя технологию фотореалистичной 3D-реконструкции. Например, если болельщики захотят отслеживать только игрока с мячом, они смогут это сделать. Они также могут заморозить момент в игре, чтобы увидеть разные ракурсы нарушения или решающего момента.

«Хотя мы работаем со стандартными камерами, именно то, как мы упаковываем это с нашим опытом в робототехнике и машинном обучении, дает нам преимущество как в плане платформ, так и в масштабировании от небольших тренировочных площадок до больших футбольных стадионов», — сказал Куи.

Что касается программного обеспечения, платформа позволяет анализировать различные суставы, включая движения пальцев игроков, для измерения сгибания. Например, на видео выше, где два человека играют в футбол, система измеряет сгибание коленей и лодыжек. Это может дать тренерам больше идей о положении тела и гибкости игрока, а также помочь им улучшить результаты.

Стартап привлек посевной раунд финансирования в размере 3,6 миллиона долларов под руководством Khosla Ventures при участии Daybreak Capital, Entrepreneurs First и Transpose Platform.

Джо Роуз, партнер Entrepreneur First, отметил, что фонд был удивлен влиянием основателей и их команды по разработке автономных транспортных средств в Университете Торонто. Он отметил, что инвесторы часто колеблются, прежде чем инвестировать в спортивные стартапы, но Perpheral Labs также является развлекательным проектом.

«Их конечный потребитель — это зритель, а спрос на спортивный контент никогда не иссякает, он не цикличен. С Peripheral новый стандарт потребления будет иммерсивным, объемным видео. И работа, которую они сейчас ведут в спорте, даст им данные, технологии и преимущество в развертывании, чтобы стать единственными на рынке, кто сможет это обеспечить», — сообщил он TechCrunch по электронной почте.

Peripheral Labs заявила, что стартап избирательно подходил к выбору венчурных капиталистов, которые могли бы помочь в различных областях, таких как разработка продукта и выход на рынок. В компании работает 10 инженеров, и она стремится увеличить штат, уделяя особое внимание разработке платформы и оборудования для снижения затрат компании, уменьшения задержки системы, а также увеличения разрешения 3D-реконструкции.

Стартап пока не делал публичных заявлений о партнерах, с которыми он работает, но сообщил, что ведет переговоры с несколькими командами и лигами в Северной Америке. Компания конкурирует с другими стартапами, такими как Arcturus Studios, в области объемного захвата для спорта.