Sony's New AI Patent Predicts Button Presses via Finger-Camera Tech

O mais recente registro de patentes da Sony sugere um salto significativo na redução da latência em hardware de jogos futuros, alavancando um modelo de IA suportado por sensores adicionais. A introdução do PlayStation Spectral Super Resolution (PSSR) com o PlayStation 5 Pro marcou a incursão da Sony na tecnologia de upscaling, aumentando as resoluções menores para 4K. No entanto, tecnologias gráficas avançadas, como a geração de quadros, podem introduzir latência, o que pode prejudicar a capacidade de resposta do jogo.

De acordo com a patente, a latência entre a entrada de um usuário e o processamento do sistema pode levar à execução de comando atrasada e as consequências não intencionais no jogo. A solução proposta da Sony envolve uma abordagem multifacetada: um modelo de IA que prevê a próxima entrada e um sensor externo, como uma câmera monitorando o controlador, para antecipar qual botão será pressionado a seguir. A patente sugere que "o método pode incluir o fornecimento de entrada da câmera como uma entrada para um modelo de aprendizado de máquina (ML)", com a entrada da câmera indicando o próximo comando do usuário.

Além disso, a patente explora o uso de botões do controlador como sensores, alinhando -se com a história da inovação da Sony com os botões analógicos. Embora a implementação exata possa diferir do que é descrito na patente, é evidente que a Sony está comprometida em reduzir a latência sem sacrificar a capacidade de resposta, particularmente à luz de tecnologias populares de renderização como FSR 3 e DLSS 3, que introduzem latência de quadro adicional.

Essa tecnologia pode revolucionar a jogabilidade em gêneros como atiradores do Twitch, onde altas taxas de quadros e baixa latência são cruciais. No entanto, resta saber se essa patente se traduzirá em avanços reais de hardware.