Участник форума MacRumors под ником mactracker обнаружил скрытый фреймворк macOS под названием “AccessorySensorManager”, который управляет данными с датчиков AirPods при подключении к Mac. Вот что он выяснил:
- AirPods предназначены для захвата парных цветных изображений: Код указывает, что левый и правый наушники имеют отдельные камеры-сенсоры, которые возвращают синхронизированные RGB-изображения размером до 1 мегапикселя с совпадающими идентификаторами кадров, предоставляя Visual Intelligence один и тот же сцен с двух ракурсов. Это не исключает других датчиков, например инфракрасных камер, но они в коде не упоминаются.
- AirPods поддерживают периодическую съемку изображений, но не видео: Камеры делают внутренние стоп-кадры для обработки Visual Intelligence, а не “фотографируют” или записывают видео. В “активном” режиме фреймворк может запросить синхронизированную пару изображений, либо получить частоту захвата, при которой пары кадров непрерывно отправляются с заданной скоростью.
- Активный и пассивный режимы съемки используют разные разрешения: В “активном” режиме, вероятно, активируемом пользователем через Siri, AirPods захватывают изображение 640×640 и возвращают обработанное изображение 1024×1024. “Это около 0,4 мегапикселя сэмплированных данных и чуть более 1 мегапикселя для выходного кадра”, — объясняет mactracker. В “пассивном” режиме они захватывают изображение 320×320, которое может быть возвращено как 320×320 или 512×512. “Это разрешения, специфичные для съемки, а физическое разрешение сенсора может быть больше”, — добавляет mactracker.
- Пассивный режим, по-видимому, предназначен для фонового восприятия окружения: Фреймворк упоминает контекстные условия, такие как речь рядом, изменения в окружающем звуке, изменение позы, поворот головы и движение за пределами заданной области. Из кода неясно, каждое ли условие запускает съемку.
- AirPods учитывают постоянные движения головы: Фреймворк включает коррекцию дисторсии объектива, калибровку двух камер и калибровку камеры по датчику движения. Он также может отбраковывать изображения, затронутые чрезмерным движением или заслонением обзора.
- Часть обработки происходит непосредственно на AirPods: В коде упоминается “периферийный вывод” — обнаружение на устройстве, находится ли человек в поле зрения.
- Каждый наушник, вероятно, имеет индикаторный светодиод захвата: Фреймворк содержит код, позволяющий удаленно управлять аппаратным индикатором и его яркостью, что предполагает наличие светодиода на AirPods, чтобы окружающие знали, когда идет съемка.
Стоит отметить, что AirPods, показанные в демонстрационном видео, были версией AirPods Pro 3 с камерами, имеющей кодовое имя B790. Марк Гурман из Bloomberg сообщил, что Apple больше не планирует выпускать эту модель и вместо этого работает над новым поколением AirPods с камерами, кодовое имя B798. Это позволяет предположить, что обнаруженный фреймворк относится к отмененной модели. Это также подчеркивает, что находки показывают, как камеры AirPods от Apple могли бы работать, а не являются гарантией функций финального продукта.
Гурман говорит, что AirPods запланированы на 2027 год и могут быть выпущены вместе с двадцатым юбилейным iPhone.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Tim Hardwick
