A margem de sangramento: Pesquisadores da Universidade de Waterloo estão desenvolvendo uma nova maneira de assistir a transmissões de videogame em serviços como Twitch e YouTube. A técnica pega o vídeo ao vivo em 2D e o converte em uma experiência interativa em 3D, onde os espectadores podem assistir à ação de qualquer ângulo.
Muitos shooters multiplayer têm um modo espectador que permite aos usuários assistir o que está acontecendo de diferentes perspectivas. É uma excelente maneira de observar quais estratégias outros jogadores usam ou de assistir a um excelente jogador destruir a competição. No entanto, para fazer isso, você deve estar jogando o jogo.
Jeremy Hartmann e Daniel Vogel da Escola de Ciência da Computação Cheriton da Universidade de Waterloo Publicados sua pesquisa no final de abril. O artigo intitulado “Enhanced Videogame Livestreaming by Reconstructing an Interactive 3D Game View for Spectators, explica uma maneira de obter um efeito semelhante ao modo espectador, mas sem instalar o jogo.
A técnica pega o fluxo de vídeo 2D e adiciona o buffer de profundidade do jogo, a pose da câmera e a matriz de projeção para criar um ambiente interativo 3D que os espectadores podem explorar enquanto o streamer joga o jogo. Os espectadores podem mover suas câmeras livremente em 3D e VR.
A princípio, parece apenas um ângulo estranho da ação da tela sobreposta a um fundo cinza. No entanto, à medida que o jogador se move e olha ao redor, modelos simples sem textura começarão a se formar à medida que o sistema constrói o ambiente em tempo real.
Não é o mesmo que um modo espectador no jogo. Como mencionado, tudo, exceto a perspectiva do jogador, não tem textura. Além disso, qualquer coisa fora da visualização do fluxo não é animada. Por exemplo, no vídeo acima, você pode ver como o modelo do player é totalmente renderizado, mas desliza pelo ambiente como se estivesse sobre rodas.
A falta de texturas e animação prejudica um pouco a experiência de visualização, mas lembre-se de que esse método de renderizar transmissões ao vivo de videogame em 3D está em sua infância. Os avanços na técnica descrita por Hartmann e Vogel e o aprendizado de máquina podem levar a experiências interativas de transmissão ao vivo melhores e mais agradáveis que colocam o espectador diretamente no jogo.