El desenfoque de movimiento es la pesadilla incluso de las mejores cámaras de teléfonos inteligentes, pero no por mucho tiempo. En el MWC 2023, el diseñador de sensores Prophesee se asoció con Qualcomm para llevar su tecnología Metavision «basada en eventos» a las plataformas Snapdragon y, por lo tanto, a los futuros teléfonos inteligentes. Adiós, fotos de mascotas borrosas, fotos de acción deportiva inutilizables y fotos con poca luz manchadas.
El viaje de Prophesee comenzó con un hardware de sensor de imagen personalizado diseñado específicamente para rastrear el movimiento dentro de una escena, que es clave para lo que hace que Metavision sea tan prometedor. La tecnología no captura imágenes como un sensor de imagen tradicional, sino que calcula la dirección y la cantidad de movimiento para producir un mapa de píxeles en movimiento. Esto se logra rastreando cuando cambia un píxel en lugar de capturar una imagen completa cuadro por cuadro como una cámara tradicional.
Si bien esto ya tiene aplicaciones útiles, particularmente para la visión por computadora, Prophesee vincula estos datos a un sensor de imagen de cámara tradicional para aplicaciones móviles. La empresa trabajó anteriormente con Sony para integrar dos sensores IMX móviles para usar con un sensor Metavision, mientras que la nueva asociación con Qualcomm proporciona la plataforma de procesamiento necesaria.
Al trabajar con Qualcomm, las plataformas Snapdragon, como la 8 Gen 1 que vimos ejecutando la demostración, ahora pueden conectarse a la configuración del sensor basado en eventos de Prophesee para leer los datos necesarios. Luego, las imágenes se corrigen para el desenfoque de movimiento utilizando las capacidades de procesamiento AI/DSP de Snapdragon antes de enviar una imagen de Bayer al ISP para la corrección de color tradicional. Todo eso suena complicado, pero el resultado es una foto borrosa y, según lo que vimos en tiempo real, funciona tan bien como la imagen de arriba.
Sin embargo, existen algunas limitaciones para la implementación temprana de Prophesee. Actualmente, un único sensor Metavision basado en eventos solo puede funcionar con una cámara RGB de distancia focal perfectamente adaptada. Esto se debe a las limitaciones en la cantidad de píxeles, por lo que la corrección de lentes principales, ultra gran angular y teleobjetivo con un solo sensor basado en eventos está fuera de discusión, al menos en el futuro previsible. El sensor actual admite una resolución máxima de 12MP (después de binning). Eso es suficiente para casi todos los sensores de teléfonos actuales, pero desafortunadamente significa que todavía no veremos los mismos beneficios en las instantáneas de mayor resolución.
Sin embargo, eso no niega la promesa de fotos borrosas y potencialmente más casos de uso que Profhesee espera desbloquear en el futuro. Se espera que este año esté disponible un kit de desarrollo compatible con las tecnologías de sensores de Prophesee. La compañía también está en conversaciones con los fabricantes de equipos originales, pero tendremos que esperar para cualquier corrección de desenfoque de teléfonos inteligentes basada en eventos deportivos.
