Как 1/2-дюймовый Sony IMX582 1/2-дюймовый Sony IMX582Модули камер FPC расширяют возможности гарнитур LYNX VR для достижения истинного видения смешанной реальности
Когда гарнитуры LYNX VR заявляют о том, что они «первые в мире все-в-устройствах смешанной реальности», их революционная природа заключается не только в алгоритмах и дисплеях, но и в необходимости иметь пару «глаз», способных беспрепятственно соединять физический и виртуальный миры. Эти глаза являются идеальной основой для нашего модуля камеры IMX582 MIPI, в котором используется технология гибких печатных плат (FPC). В этой статье рассказывается о том, как этот модуль, благодаря своему уникальному дизайну и спецификациям, формирует краеугольный визуальный краеугольный камень для создания «аутентичной смешанной реальности» LYNX.
I. Характеристики декодирования: почему модули FPC являются идеальными «визуальными датчиками» для смешанной реальности
Для смешанной реальности требуются устройства, которые могут как захватывать с высокой точностью-реальную-среду реального мира для перспективного рендеринга, так и служить в качестве входных данных компьютерного зрения для пространственного позиционирования и взаимодействия. Наш модуль был разработан с нуля для удовлетворения следующих основных требований:
Гибкая печатная схема (FPC) и компактные размеры (18,2×11×10,8 мм): максимальное использование пространства и динамическая адаптируемость
Революция FPC. В отличие от традиционных жестких печатных плат, FPC обеспечивает гибкую маршрутизацию в пределах сложных кривых и ограниченного пространства внутри гарнитуры. Это позволяет не-встраивать LYNX рядом с рамами гарнитуры или движущимися частями, позволяя создавать стереоскопические компоновки с несколькими-камерами без увеличения объема или ущерба для эстетики промышленного дизайна.
Интегрированные преимущества компактных размеров. Сверх-маленький размер позволяет LYNX интегрировать несколько модулей в одном устройстве,-предназначенном для просмотра-с помощью изображений, отслеживания жестов, отслеживания глаз и SLAM (одновременная локализация и картографирование)-, образуя полный массив визуального восприятия смешанной реальности.
48 МП (IMX582) с углом обзора 79,4 градуса (FOV): обеспечивает высокое-разрешение-с помощью изображений и расширенную осведомленность об окружающей среде.
Сверх-Высокое-разрешение-Насквозь: когда пользователи активируют режим "Просмотр"-насквозь, 48-мегапиксельные изображения с камеры IMX582 обеспечивают исключительно четкое и детальное изображение реального мира. Это значительно снижает «эффект ширмы-двери», обеспечивая плавную интеграцию виртуальных объектов с физической средой — решающий фактор для достижения как «потрясающего VR», так и «лучшего AR».
Пространственное значение поля зрения 79,4 градуса: это оптимизированное поле зрения полностью охватывает основную прямую видимость пользователя. Он обеспечивает сбор достаточных данных об окружающей среде во время картографирования SLAM и понимания сцены, обеспечивая стабильное пространственное позиционирование с -малой задержкой и привязку виртуальных объектов.
Автофокус (AF) и точная механика: обеспечение четкости и стабильности в динамичных сценах
Основная роль AF в MR: в смешанной реальности взгляд пользователя и взаимодействие рук быстро перемещаются между разными расстояниями. Встроенный-мотор автофокусировки обеспечивает четкое-изображение рук пользователя или реальных объектов, находящихся в фокусе, в режиме реального времени, что имеет решающее значение для точного распознавания жестов и создания виртуальных-реальных эффектов окклюзии.
ЭМС и структурная надежность. Экранирование из проводящей ткани модуля и медная- конструкция заземления обеспечивают чистые и стабильные видеосигналы даже в сложной среде радиочастотных помех и помех процессора. Высокопрочное-конструкционное клеевое соединение выдерживает ежедневный износ-и-вибрации и незначительные удары, гарантируя долгосрочную-точность визуального восприятия.
II. Комплексные преимущества: от «видения» окружающей среды к «пониманию» и «слиянию» с ней
Интеграция этого модуля камеры FPC в наушники LYNX обеспечивает преимущества на уровне системы-по сравнению с традиционными однофункциональными камерами:
Полноцветное-видео высокого-разрешения, прозрачное-сквозное изображение
Модуль выводит видеопоток MIPI CSI-2 с высокой-пропускной способностью и низкой-задержкой-2, который можно напрямую использовать для создания высококачественного-видения-через видео — основы для захватывающих AR-приложений. Пользователи могут четко видеть свое окружение и взаимодействовать с другими, не снимая гарнитуру.
Обеспечивает высокую-точность внутреннего-позиционирования и взаимодействия с помощью жестов.
Система стереовидения, состоящая из нескольких модулей, вычисляет информацию о глубине в-реальном времени, подобно человеческому глазу, обеспечивая точное позиционирование внутри-снаружи, не полагаясь на внешние базовые станции. В то же время сверх-высокая частота кадров и высокое разрешение позволяют точно отслеживать тонкие движения суставов рук, обеспечивая естественное,-свободное управление жестами.
Поддерживает отслеживание глаз и рендеринг-на основе взгляда.
Благодаря специальным модулям,-обращающимся к глазам, в сочетании с камерой высокого разрешения IMX582, положение зрачков и направление взгляда фиксируются с высокой точностью. Это не только обеспечивает более естественный зрительный контакт с аватарами социальных сетей, но и способствует развитию технологии фовеатного рендеринга. Это концентрирует мощность графической обработки в центре внимания пользователя, значительно повышая эффективность рендеринга и визуальное качество.
III. Заключение: определение визуальных стандартов смешанной реальности следующего-поколения
LYNX R1 стремится стереть границы между виртуальным и реальным мирами, и эта цель во многом зависит от его способности «воспринимать» физическую среду. Наш модуль камеры IMX582 на базе FPC-обеспечивает аппаратную основу для возможностей восприятия LYNX,-глаз-подобных LYNX, благодаря своей сверх-компактной и гибкой конструкции, качеству изображения сверх-высокой- четкости, надежной автофокусировке и стабильности промышленного-класса.
Это не просто «камера», а основной орган восприятия системы смешанной реальности LYNX, отвечающий за оцифровку богатой информации о физическом мире для алгоритмического понимания, слияния и воспроизведения. Выбор этого модуля означает решение создать понятный, стабильный и надежный визуальный шлюз для вычислительных платформ следующего-поколения. По мере того как устройства смешанной реальности переходят от концепции к массовому внедрению, производительность и дизайн основного модуля обработки изображений будут напрямую определять потолок пользовательского опыта.
