Recentemente, o U.S. Patent and Trademark Office concedeu oficialmente à Apple uma patente relacionada às principais funções do Apple Vision Pro: rastreamento de mãos e gestos com os dedos.
A patente da Apple afirma que a qualidade da imersão depende de vários fatores importantes. Por exemplo, características de uma exibição, como qualidade de imagem, taxa de quadros, resolução de pixel, alta faixa dinâmica (HDR), persistência e efeito de porta de tela (ou seja, as linhas visíveis entre os pixels na tela). Quando o campo de visão exibido é muito estreito ou várias funções de rastreamento são lentas e/ou imprecisas (causando desorientação e náusea; também conhecido como enjôo), a qualidade da experiência imersiva é reduzida.
O rastreamento da posição da cabeça (referido como rastreamento posicional a partir daqui) é projetado para estimar a posição e a orientação do HMD no ambiente e deve ser preciso e de baixa latência. A razão para isso é que os gráficos renderizados devem corresponder aos movimentos da cabeça do usuário para produzir imersão de alta qualidade em VR, e o conteúdo virtual precisa ser alinhado adequadamente no mundo real em MR.
O rastreamento do corpo do usuário estima a posição e orientação do corpo do usuário (mas não limitado a mãos e dedos) em relação ao HMD. Ele pode fornecer um meio de entrada do usuário (como gestos) em VR e MR para permitir a interação com elementos virtuais. Embora alguns métodos de rastreamento posicional também possam ser usados para rastreamento de mão (por exemplo, uma câmera infravermelha com uma matriz de LED em um controlador portátil), outros métodos aproveitam um espaço de análise menor (normalmente dentro de um metro do HMD) para melhorar o desempenho da mão. e rastreamento de dedos Robustez do algoritmo de rastreamento.
Patente da Apple A Figura 1 é um diagrama esquemático de um usuário usando um head-mounted display (HMD) com várias câmeras e emissores de infravermelho (IR); A Figura 2A é um exemplo de óptica, monitores e câmeras para VR e MR Visão superior do modalidade preferida.
A patente da Apple Figura 4A mostra uma visão frontal de uma primeira implementação exemplar de um dispositivo HMD com duas câmeras RGB otimizadas para fins transparentes (MR) e duas câmeras infravermelhas fornecendo dados visuais para rastreamento; A Figura 5 é um fluxograma de implementação das etapas de processamento para VR com rastreamento de posição e corpo do usuário; A Figura 8 é um fluxograma de um processo exemplar para implementar o rastreamento do corpo do usuário. Também inclui reconhecimento de gestos.
Na WWDC23, a Apple anunciou oficialmente que o produto de exibição principal se chama "Apple Vision Pro", executa um novo sistema operacional "visionOS" e está equipado com M2 e um novo chip R1.
Em termos de design, o Vision Pro se parece com óculos de esqui e óculos de mergulho, sua armação é feita de liga de alumínio e inclui sensores, câmeras, displays e componentes de computação refrigerados por ventiladores. A faixa de cabeça e os protetores auriculares são feitos de tecido puro e podem ser dobrados para caber em vários formatos de rosto e cabeça. Em termos de lentes, a Apple cooperou com a Zeiss para personalizar, e as lentes de prescrição produzidas podem ser conectadas magneticamente à tela, o que é conveniente para pessoas míopes usarem o fone de ouvido. Em termos de ecrã, está equipado com dois ecrãs micro OLED 4K, com um total de 23 milhões de píxeis, sendo que cada olho tem mais píxeis que um televisor 4K.
A Apple projetou um design exclusivo de chip duplo para o Vision Pro. O chip principal é o familiar M2, responsável por algoritmos visuais e processamento de informações de imagem, permitindo que o Vision Pro tenha uma experiência mais suave. Ao mesmo tempo, para processar as informações de 12 câmeras, 5 sensores e 6 microfones, a Apple também trouxe um novo chip R1, para que a imagem possa ser sincronizada com a tela do Vision Pro em 12 milissegundos, quase sem demora. É como se tudo estivesse acontecendo bem na sua frente.
A Lenz Technology desenvolveu independentemente chips de radiofrequência sem fio e Bluetooth BLE5.2 de baixa potência e possui direitos globais de propriedade intelectual. consumidores.Dispositivos, suportando uma gama completa de desenvolvimento personalizado de plataforma de software APP. A solução de chip Bluetooth projetada é usada em cenários como dispositivos vestíveis inteligentes, navegação interna Bluetooth, casa inteligente, saúde médica, esportes e fitness, transmissão de dados, controle remoto, periféricos pessoais e AIoT Internet of Things. (tingting é uma marca da Lenze Technology, que fornece principalmente o serviço Apple Find My e o aplica aos principais produtos IoT)