I. Introdução
Com o lançamento chocante do novo projeto de varejo da Autohome não muito tempo atrás, propusemos diretamente o novo modo de experiência ABC pela primeira vez para abordar os pontos problemáticos dos usuários ao olhar para carros e escolher carros. Uma experiência "útil".
em:
R: Refere-se à seleção de carros em um único local e ao serviço de test drive (tudo em um). Os usuários podem visualizar carros por meio de comparação holográfica e testar carros reais, tornando a experiência de comparação de produtos mais intuitiva e economizando tempo;
B: Refere-se à avaliação objetiva espaço-temporal exclusiva (Pertence aos clientes), que visa proporcionar aos usuários um espaço de atendimento exclusivo sem incomodar e, ao mesmo tempo, eles podem ver a avaliação profissional, objetiva e justa do veículo editada por Autohome, para uma experiência mais despreocupada;
C: Refere-se à experiência imersiva do metauniverso (tecnologia criativa) da Autohome Energy Space Station. Por meio da tecnologia holográfica, funções como visualização de carros 1:1, desmontagem de carros e comparação de carros no mesmo quadro são realizadas, aproximando os usuários análise e atualizações de produtos em profundidade.Experiência real em tecnologia.
Ao mesmo tempo, confiar nos dados de teste reais do Autohome para criar "a experiência de carro virtual mais realista" permite que os usuários experimentem a aceleração do carro, curvas, frenagens, colisões e outras cenas do carro com menos esforço.
Lançamento chocante do novo varejo
Estação Espacial de Energia de Xangai
Dois requisitos de negócios
Como um provedor de serviços completo para a vida útil do carro que integra "ecologia de conteúdo + serviço de ferramentas + plataforma de negociação", a Autohome tem pensado em ajudar os usuários a tomar melhores decisões sobre visualização, compra, uso e substituição de carros. off-line, pense em como conectar usuários off-line com revendedores OEM e ajude os usuários a visualizar melhor o carro, selecionar o carro e tomar decisões de compra. Isso exige que o Autohome tenha uma forte capacidade de plataforma para todo o processo de visualização, compra e compra de carros off-line.
A primeira coisa em que pensamos é como permitir que os usuários experimentem e conectem vários carros em profundidade em um espaço de site, reduzindo a dor dos usuários correndo para frente e para trás na loja 4S no espaço físico e, ao mesmo tempo, não pode ser uma simples recuperação de informações da página. A experiência de visualização do carro perto do carro real, mas também para dar aos usuários uma experiência que nem mesmo o carro real pode oferecer, como a explosão da carroceria do carro, desmontagem e remontagem e até mesmo um experiência de entretenimento alucinante que quebra a parede dimensional, como o conhecimento de novos veículos de energia. Popularização da ciência, então os requisitos do negócio são bastante exigentes, requisitos: vários carros, um único espaço, real, objetivo, além da imaginação, etc .
Novos produtos de varejo
Três soluções técnicas
3.1 Seleção do esquema
Combinando os principais requisitos desses negócios acima, investigamos algumas tecnologias de apresentação de virtualização 3D automotiva nacionais e estrangeiras e, finalmente, integramos os requisitos de maturidade e efeito da solução de implementação de hardware e optamos por usar filme holográfico + tecnologia de mecanismo Unity3D para apresentar aos usuários um experiência imersiva Experiência de visualização de carro 3D a olho nu.
3.2 Seleção de tecnologia holográfica
A primeira categoria é a tecnologia holográfica em sentido estrito, como a tecnologia holográfica típica, que usa o princípio de interferência da luz para converter os dados de direção e intensidade de cada ponto de luz em franjas de interferência que podem ser registradas pelo desenvolvimento e conduz mídias fotossensíveis na superfície do suporte da lente. Processamento de exposição, para obter uma grade holográfica que registra todas as informações de luz, tecnologia holográfica estreita não é comum, originou-se da tecnologia holográfica, aplicada à tecnologia de guia de onda óptica de grade holográfica, o processo de experimento holográfico é muito complicado, é difícil para os consumidores comuns usarem. Atualmente, não há produtos holográficos cavalheirescos de nível de consumo no país e no exterior.
Uma delas é a "holografia percebida" apresentada por dispositivos de exibição de olho próximo e tecnologia de renderização 3D em tempo real, como Oculus e Hololens, que atualmente possuem bons produtos de consumo doméstico e internacional.
Outro tipo é o que chamamos de projeção plana holográfica, que cria um efeito tridimensional refletindo o conteúdo da tela plana nos olhos do observador com a ajuda de uma camada de filme semitransparente e semirrefletora. A vantagem é que não há necessidade de equipamento do usuário e é mais adequado para exibir efeitos em salas de exibição.
Demonstração do princípio do filme holográfico-1
Demonstração do princípio do filme holográfico-2
Por fim, escolhemos a solução técnica de projeção planar holográfica, que atualmente é a solução técnica mais comumente usada para apresentações em salas de exibição em grande escala na China. Ela pode oferecer aos usuários uma experiência de visualização 3D quase real a olho nu em um espaço relativamente fixo.
3.3 Seleção do motor 3D
Finalmente, escolhemos o mecanismo Unity3D doméstico atual para implementar. O mecanismo Unity oferece suporte à renderização avançada e atrasada para o pipeline de renderização de alta definição HDRP no lado do PC e usa iluminação e materiais baseados em física. É ideal para enviar gráficos para hardware de ponta, como PC, XBox e Playstation, para visuais HD impressionantes. Ele é voltado para jogos de alta fidelidade, demonstrações gráficas e renderização arquitetônica, efeitos hiper-realistas e os melhores gráficos de que você precisa. Também é muito mais rápido do que o renderizador integrado ao direcionar gráficos de alta qualidade. Ao mesmo tempo, consideramos que um conjunto de códigos pode oferecer suporte a pipelines HDRP e URP no estágio inicial do projeto, para que possamos atualizar e migrar rapidamente nossos recursos para dispositivos móveis, incluindo telefones celulares, óculos AR e óculos VR . Ao mesmo tempo, usamos Com a ajuda de equipamentos de captura de movimento, ele pode facilmente conduzir humanos digitais 3D móveis. Atualmente, a comunidade de tecnologia Unity doméstica está madura e há muitas conquistas práticas e comprovadas de predecessores que podem ser diretamente usado para referência.
3.4 Dificuldades técnicas
Nossa apresentação final depende da coordenação completa de todo o conjunto de equipamentos de software e hardware no espaço físico. Existem requisitos elevados para a arquitetura geral de equipamentos de hardware, programas 3D, consoles de controle central e controle de iluminação. É necessário garantir que os usuários No processo de experiência imersiva de veículos holográficos, não deve haver muitos fatores de interferência técnica para fazer os usuários se sentirem falsos. Ao mesmo tempo, a cabine holográfica de toda a estação espacial de energia deve considerar os requisitos de suporte ao uso comercial em larga escala e replicabilidade rápida, o que impõe requisitos muito altos aos padrões de software e hardware e implementação técnica.
Ao mesmo tempo, a cabine holográfica também precisa servir como uma plataforma de tecnologia de experiência virtual imersiva para exportar seus recursos para outras linhas de negócios, como a plataforma de transmissão ao vivo da empresa e cenários de vinculação de feiras de automóveis on-line, para promover o empoderamento horizontal da empresa tecnologia interna.
3.5 Arquitetura da Cabine Holográfica
Em resposta às dificuldades técnicas do recurso, devemos pensar cuidadosamente no estágio inicial da implementação da tecnologia. Nosso pensamento geral pode ser resumido em nove palavras: padronização, alta eficiência e experiência real. Portanto, em termos de projeto de arquitetura, reuniremos padrões técnicos, incluindo os padrões de acesso a cabines holográficas por canais externos, padrões de avaliação de experiência holográfica, padrões de modelo de veículo 3D virtual humano e 3D, etc. Nosso projeto de arquitetura também dará grande importância à eficiência de P&D e entrega on-line, na esperança de minimizar o custo do tempo de acesso a carros novos. Ao mesmo tempo, todos os padrões e alta eficiência são baseados na experiência real, o que exige que atualizemos continuamente nossa experiência holográfica de vários aspectos para garantir que os usuários sempre se sintam "reais".
Estrutura geral
3.6 Padronização Unificada
Projetamos um conjunto de soluções de implantação de arquitetura integrada de software e hardware e aprimoramos um conjunto das melhores especificações de apresentação visual 3D, incluindo a distância do espaço físico entre o usuário e o filme holográfico, clareza da tela, brilho da iluminação, som surround de áudio e fundo vídeo Uma série de indicadores, como seleção, etc., todos os quais formam um conjunto completo de especificações SOP, podem finalmente criar um efeito de visualização imersiva holográfica para os usuários. Quando tudo é padronizado e construído de acordo com nossos padrões, o uso comercial em larga escala é possível.
Padrão unificado para equipamentos de hardware
Todos os dispositivos de hardware na cabine holográfica devem ser uniformemente padronizados, incluindo a configuração do console de jogos da GPU, a resolução e o tamanho do dispositivo de exibição, o modelo do dispositivo de projeção, as especificações do fabricante do filme holográfico, o equipamento de iluminação e as especificações API para as instruções de controle central de todos esses dispositivos, etc. Após 8 meses de polimento e exploração contínuos, e comunicação e troca com fornecedores de hardware, a fim de finalmente alcançar a experiência real e chocante do usuário da cabine holográfica , exportamos o conjunto mais rigoroso de especificações de acesso a dispositivos de hardware da indústria.A subsequente promoção comercial em grande escala da estação espacial de energia fez preparações de hardware.
Material modelo 3D de alto padrão
Após mais de 20 vezes de polimento iterativo, finalmente unificamos os padrões do modelo de carro 3D na cabine holográfica e usamos os mais altos padrões de modelo para controlar todos os links desde a produção do modelo, aceitação da arte até a aceitação do programa, com uma média de modelos de carros 3D. mais de 40 milhões de faces triangulares e o tamanho do pacote do modelo excede 1,5 G, estabelecendo as bases para a experiência chocante definitiva na cabine holográfica. A especificação padrão do modelo suporta a exibição de modelos externos e internos de alta precisão comparáveis a carros reais em telas 4K e 8K e também atende a dez vezes o número de faces do modelo geral no terminal móvel para obter maior precisão. Os requisitos de precisão de exibição para couro interior, grão de madeira, plásticos, telas, etc. são comparáveis aos de carros reais. O material externo do veículo requer uma comparação 1:1 com o carro real e a imagem real, e o efeito de iluminação requer efeitos de iluminação mais realistas, como luz ambiente, luz de volume, halo, luz de água corrente e dança de lanterna. Do nível de especificação do modelo, ele pode suportar 80% da garantia de efeito de experiência holográfica do veículo.
Padronização da experiência holográfica
A fim de garantir a unidade da experiência geral da cabine holográfica e preparar a replicação da cabine aberta em grande escala, padronizamos os links de hardware e software na cabine holográfica, como o brilho das luzes em diferentes cenários de experiência, e o som em diferentes cenários. Tratamos de todos os detalhes da experiência, como o nível de volume, o efeito de transição do modelo 3D do carro em diferentes cenas, etc.
Padronização de acesso de sinal externo
Como plataforma para a cabine holográfica, haverá muitas empresas cooperativas externas que desejam acessá-la e interagir com os veículos e materiais na cabine holográfica em tempo real. Considerando a uniformidade da implementação da tecnologia e a estabilidade da experiência, iremos É necessário que as empresas externas queiram acessar a cabine holográfica na forma de sinais de fluxo de vídeo 4K de alta definição. Por esse motivo, desenvolvemos um conjunto de sistemas gerais de aquisição e codificação e decodificação de sinal de vídeo multicanal geral, que são especialmente usado para front-end É equipado para processar sinais de vídeo acessados externamente para garantir a estabilidade do sinal e a clareza dos materiais externos experimentados na cabine holográfica.
3.6 Arquitetura de Alta Eficiência
Em termos de design de arquitetura geral, exploramos gradualmente um conjunto de soluções de arquitetura técnica que atendem às necessidades de negócios e também podem melhorar bastante a eficiência de P&D por quase 8 meses. O núcleo inclui três aspectos: design de camadas de instruções, design de driver de dados completo e vídeo projeto de E/S de fluxo.
Para o design da camada de instrução do módulo, imitamos o design do protocolo de comunicação de rede e separamos a camada de codificação de instrução, a camada de comunicação e a camada de exibição da interface do usuário. A partir do isolamento em camadas do nível de implementação do código, cada camada pode ser otimizada separadamente, e uma longa conexão entre o controle central e o comando pode ser estabelecida para garantir alta eficiência de transmissão. Ao mesmo tempo, o mecanismo de comunicação full-duplex do O protocolo WebSocket pode efetivamente controlar o status de execução do comando e o progresso, o usuário pode interromper a execução do comando a qualquer momento, para que o usuário possa realmente controlar o conteúdo da apresentação da tela na cabine holográfica por meio do comando de controle central.
Design da camada de comunicação de comando
camadas de infraestrutura
Para alcançar a eficiência máxima de entrega de P&D, esperamos que a entrega de configuração de baixo código seja totalmente conduzida por dados de segundo plano. Por esse motivo, redesenhamos a estrutura de código do U3D e desmontamos a cabine holográfica em 9 módulos com mais de 30 funções de comando.
Nove Módulos Holográficos
Dividimos o módulo do palestrante em várias instruções, com lógica de entrada e saída independente no nível do módulo, e separamos o controle do ciclo de vida no nível da instrução, abstraindo: Módulo->Comando->Ação estrutura de dados de três camadas, através da divisão Camada isolamento, podemos montar diretamente um comando completo por meio da montagem de dados, todos os comandos são executados de acordo com uma lógica de linha do tempo comum e os usuários podem controlar o efeito de exibição e o estágio do conteúdo holográfico em tempo real com a ajuda da comunicação de longa conexão e do ciclo de vida do comando estado .
Arquitetura do Módulo Carro Falante
Para um único comando, a fim de facilitar a configuração dos dados, lançamos um editor visual de comandos separadamente. A ideia central é simular a ideia de design de um software de edição de vídeo. Espera-se "editar" um comando totalmente funcional no editor simplesmente arrastando e soltando.Com o comando de cabine holográfica, editor visual e função de configuração de dados de fundo, temos uma eficiência de geração de funções extremamente eficiente, de modo a garantir a eficiência da entrega de bicicletas.
Estrutura de instrução de comando
Por meio de uma série de designs otimizados, como divisão e isolamento do módulo de comando, design de estrutura de dados razoável, editor de comandos visuais e drivers de configuração de dados totalmente funcionais, o efeito final é: a eficiência de entrega de bicicletas holográficas foi reduzida de 12 dias por carro para agora, 3 dias por carro.
comando editor visual
Imaginamos a cabine holográfica como uma plataforma, a julgar pelo planejamento de negócios, essa plataforma precisa ter duas características ao mesmo tempo: é conveniente para acesso externo de negócios e é conveniente para acesso a negócios externos.
O núcleo é lidar com esses dois cenários de negócios:
Acesso à cabine: suporte a serviços e funções externas a serem conectadas à cabine holográfica, como humano digital virtual, sinais de entrevista em tempo real, sinais de vídeo ao vivo, picture-in-picture externo e outros cenários. Para tais necessidades, projetamos uma coleção de vídeos de acordo com a padronização acima O processo de acesso é coletado e acessado através da linha física HDMI e do URL de fluxo de vídeo em tempo real. Depois de ser sintetizado por nosso programa de síntese de transcodificação de vídeo especialmente desenvolvido, é enviado como um sinal de vídeo para a tela holográfica grande .
Saída fora da cabine: pode ser enviado para a plataforma de transmissão ao vivo, e a plataforma de transmissão ao vivo envia o fluxo para o nó CDN, e o usuário extrai os dados do sinal ao vivo em tempo real. Podemos obter um atraso de transmissão ao vivo de cerca de 5 segundos.
Arquitetura de E/S de streaming de vídeo
Arquitetura do sistema de comando holográfico
3.6 Humano Digital Virtual
Para alcançar a melhor interação humano-veículo na cabine holográfica, unimos forças com a equipe que criou a imagem da vida real de Teresa Teng para o show de Jay Chou e passamos 5 meses criando uma imagem humana digital 3D do embaixador da imagem da Autohome, Gu Ailing. A coleta de impressões de voz e o treinamento de aprendizado de máquina com um grande número de amostras de big data na base de conhecimento do carro finalmente poliram uma "pessoa real digital" interessante, realista e informativa de Gu Ailing. Podemos ter várias interações interessantes com Gu Ailing a distância zero em a cabine holográfica.
Ainda estamos planejando implementar mais funções de tecnologia negra para humanos digitais, como expressão inteligente e condução e controle do corpo, entrega de voz em tempo real, etc. Nosso objetivo final é tornar os humanos digitais mais parecidos com pessoas reais em termos de aparência, forma e inteligência. Feedback realista e emocional dos usuários.
Imagem humana digital 3D (restrita por direitos comerciais, o rosto foi desfocado)
Quatro destaques de negócios
4.1 Experiência real holográfica 3D + dados reais
Restauração extremamente realista de modelo de carro 3D
Efeito de explosão de veículo legal
Com base em efeitos legais de exibição de veículos 3D holográficos, também contamos com a mineração profunda do Autohome e o aprendizado de dados maciços do usuário na indústria automotiva vertical, o que nos permite entender as demandas do usuário melhor do que os próprios usuários, sobrepondo os editores profissionais do Autohome e com o profissional dados de avaliação continuamente produzidos pelo grande V, podemos produzir dados de avaliação neutros e objetivos completos para cada carro e dar aos usuários as sugestões mais realistas para decisões de compra de carros, para que os usuários possam ver o carro real e ver o ponto de vista real.
Introdução aos destaques do motor
Introdução às características da suspensão 
Comparação PK abrangente de dois carros (o conteúdo dos dados na imagem são dados de teste, apenas para referência)
4.2 Transmissão holográfica interativa ao vivo de celebridades da Internet
Transmissão ao vivo de fluxo misto multicanal holográfico
A fim de permitir que mais usuários experimentem nosso carro holográfico legal sem ir pessoalmente à estação espacial de energia e expandir o volume da rede da nova estação espacial de energia de varejo e atrair mais tráfego de usuários para a loja para test drives, temos polido um conjunto de Um novo sistema de tecnologia de transmissão ao vivo - transmissão ao vivo interativa holográfica, sobrepomos o fundo 3D do veículo da cabine holográfica e misturamos os sinais de vídeo de várias âncoras ao vivo em um fluxo de sinal de transmissão ao vivo imersivo holográfico completo, criando uma integração completa de pessoas, veículos e campos O efeito extremamente realista nos permite alternar arbitrariamente entre vários ambientes e vários veículos em uma transmissão ao vivo para explicações detalhadas do veículo, trazendo aos usuários uma experiência de transmissão ao vivo sem precedentes.
Nossa primeira transmissão ao vivo interativa holográfica recebeu cerca de 40.000 espectadores, e os comentários e interações dos usuários foram muito positivos. Continuaremos a otimizar e atualizar profundamente a experiência de transmissão ao vivo holográfica no futuro, esperando trazer benefícios completos para os usuários e para a indústria. A mesma nova experiência de transmissão ao vivo.
4.3 Teatro de Sonho Interativo Holográfico
Com a ajuda da tecnologia holográfica da estação espacial de energia, além de exibir vividamente os detalhes do veículo em 3D a olho nu, também pode exibir conteúdo de material mais interessante e informativo na forma de um teatro, como ciência da energia programas de vídeo de popularização, programas de promoção de popularização cultural e artística e entretenimento humano interativo digital, etc. E outras formas de programa ricas e interessantes, permitindo aos usuários experimentar efeitos visuais tridimensionais e realistas do que os cinemas.
programa de ciência popular sobre a origem do universo
Ao mesmo tempo, também desenvolvemos funções mais interessantes que permitem aos usuários participar diretamente da interação por meio da integração da tecnologia interativa MR e do espaço 3D da cabine holográfica, incluindo a interação entre pessoas reais e carros, pessoas reais e Gu Interação humana digital de Ailing, voz real e diálogo humano digital. Aguarde a cena.
Uma foto de grupo de um ser humano digital virtual e uma pessoa real (o rosto da imagem humana digital foi desfocado devido a direitos e interesses comerciais)
Cinco conclusões
Você pode ir à Estação Espacial de Energia de Xangai para experimentar a cabine holográfica que construímos com a tecnologia metaversa 3D. O efeito que você vê agora é apenas o começo. Nossa equipe de P&D tem trabalhado continuamente para otimizar e atualizar continuamente as funções e a experiência do produto, a fim de para A versão iterativa de duas semanas está avançando rapidamente, e também planejamos funções mais interessantes e divertidas esperando que todos descubram.
A cabine holográfica é um produto totalmente novo que nossa equipe de produção e pesquisa da principal fábrica de motores poliu do zero, passo a passo, após 10 meses. O lar de uma nova jornada.