Cuando Google presentó Night Sight En el Pixel 3, fue una revelación.
Era como si alguien hubiera literalmente encendido las luces en tus fotos con poca luz. Tomas que antes eran imposibles se hicieron posibles: no se necesitaba trípode ni flash.
Cinco años después, tomar fotografías en la oscuridad es algo obsoleto: casi todos los teléfonos de todo el espectro de precios vienen con algún tipo de modo nocturno. El vídeo, sin embargo, es una historia diferente. Los modos nocturnos para fotografías capturan múltiples cuadros para crear una imagen más brillante, y simplemente no es posible copiar y pegar la mecánica de esa función en un video que, por su naturaleza, es ya una serie de imágenes. La respuesta, como parece ser últimamente, es recurrir a la IA.
Cuando se lanzó el Pixel 8 Pro este otoño, Google anunció una función llamada Video Boost con Night Sight, que llegaría en una futura actualización de software. Utiliza IA para procesar tus videos, resaltando más detalles y mejorando el color, lo cual es especialmente útil para clips con poca luz. Sólo hay un inconveniente: este procesamiento se realiza en la nube en los servidores de Google, no en su teléfono.
Como prometí, Video Boost comenzó a llegar a los dispositivos hace un par de semanas con la actualización de Pixel de diciembre, incluida mi unidad de revisión Pixel 8 Pro. ¡Y es bueno! Pero no es el momento decisivo que fue el Night Sight original. Eso habla tanto de lo impresionante que era Night Sight cuando debutó como de los desafíos particulares que presenta el video al sistema de cámara de un teléfono inteligente.
Video Boost funciona así: primero, y de manera crucial, necesitas tener un Pixel 8 Pro, no un Pixel 8 normal: Google no respondió a mi pregunta sobre por qué es así. Lo enciendes en la configuración de tu cámara cuando quieres usarlo y luego comienzas a grabar tu video. Una vez que haya terminado, debe hacer una copia de seguridad del video en su cuenta de Google Photos, ya sea de forma automática o manual. Entonces esperas. Y espera. Y en algunos casos, sigue esperando: Video Boost funciona en vídeos de hasta diez minutos de duración, pero incluso un clip de sólo un par de minutos de duración puede tardar horas en procesarse.
Dependiendo del tipo de vídeo que estés grabando, esa espera puede valer la pena o no. Documentación de soporte de Google dice que está diseñado para permitirte «hacer videos en tu teléfono Pixel con mayor calidad y con mejor iluminación, colores y detalles», en cualquier iluminación. Pero el principal Lo que Video Boost está al servicio es mejorar el video con poca luz; eso es lo que me dice el gerente de producto del grupo, Isaac Reynolds. «Piense en ello como Night Sight Video, porque todos los ajustes a los otros algoritmos tienen como objetivo Night Sight».
Todos los procesos que hacen que nuestros videos con buena iluminación se vean mejor (estabilización, mapeo de tonos) dejan de funcionar cuando intentas grabar video con muy poca luz. Reynolds explica que incluso el amable El grado de desenfoque que se obtiene en vídeos con poca luz es diferente. “OIS [optical image stabilization] «Puede estabilizar un marco, pero sólo de cierta longitud». Los vídeos con poca luz requieren fotogramas más largos y ese es un gran desafío para la estabilización. «Cuando empiezas a caminar con poca luz, con fotogramas tan largos, puedes obtener un tipo particular de desenfoque intracuadro que es sólo el residuo que el OIS puede compensar». En otras palabras, es muy complicado.
Todo esto ayuda a explicar lo que veo en mis propios clips de Video Boost. Con buena iluminación, no veo mucha diferencia. Algunos colores resaltan un poco más, pero no veo nada que me obligue a usarlo regularmente cuando hay mucha luz disponible. En extremadamente Video Boost con poca luz puede recuperar algunos colores y detalles que se pierden por completo en un videoclip estándar. Pero no es tan dramática como la diferencia entre una foto normal y una foto Night Sight en las mismas condiciones.
Sin embargo, existe un punto ideal entre estos extremos, donde puedo ver que Video Boost es realmente útil. En un clip donde camino por un sendero al anochecer hacia una pérgola oscura alberga la campana de Kobe, hay una mejora notable en el detalle de las sombras y la estabilización después del Boost. Cuanto más usaba Video Boost con iluminación interior normal y media-baja, más veía sus ventajas. Empiezas a ver cómo se ven los videos estándar descoloridos en estas condiciones, como mi hijo jugando con camiones en el piso del comedor. Activar Video Boost restauró algo de la vitalidad que había olvidado que me faltaba.
Video Boost está limitado a la cámara trasera principal del Pixel 8 Pro y graba en 4K (el valor predeterminado) o 1080p a 30 fps. El uso de Video Boost da como resultado dos clips: un archivo de «vista previa» inicial que no ha sido mejorado y está inmediatamente disponible para compartir y, finalmente, el segundo archivo «mejorado». Sin embargo, bajo el capó, están sucediendo muchas más cosas.
Reynolds me explicó que Video Boost utiliza un proceso de procesamiento completamente diferente que retiene muchos más datos de imágenes capturadas que normalmente se descartan cuando se graba un archivo de video estándar, algo así como la relación entre archivos RAW y JPEG. Un archivo temporal guarda esta información en su dispositivo hasta que se envía a la nube; después de eso, se elimina. Eso es bueno, porque los archivos temporales pueden ser enormes: varios gigabytes para clips más largos. Los vídeos finales mejorados, sin embargo, tienen un tamaño mucho más razonable: 513 MB para un clip de tres minutos que grabé frente a 6 GB para el archivo temporal.
Mi reacción inicial a Video Boost fue que parecía una solución provisional: una demostración de funciones de algo que necesita la nube para funcionar en este momento, pero que se trasladaría al dispositivo en el futuro. Qualcomm se lució una versión en el dispositivo de algo similar Sólo este otoño, así que ese debe ser el final del juego, ¿verdad? Reynolds dice que no es así como él piensa al respecto. «Las cosas que puedes hacer en la nube siempre serán más impresionantes que las que puedes hacer en un teléfono».
La distinción entre lo que puede hacer su teléfono y lo que puede hacer un servidor en la nube pasará a un segundo plano
Caso en cuestión: dice que en este momento, los teléfonos Pixel ejecutan varias versiones más pequeñas y optimizadas del modelo HDR Plus de Google en el dispositivo. Pero el modelo HDR Plus “principal” completo que Google ha estado desarrollando durante la última década para sus teléfonos Pixel es demasiado grande para ejecutarlo de manera realista en cualquier teléfono. Y las capacidades de IA en el dispositivo mejorarán con el tiempo, por lo que es probable que alguno Las cosas que solo se pueden hacer en la nube pasarán a nuestros dispositivos. Pero igualmente, lo que es posible en la nube también cambiará. Reynolds dice que piensa en la nube simplemente como «otro componente» de las capacidades de Tensor.
En ese sentido, Video Boost es un vistazo al futuro: es simplemente un futuro en el que la IA de su teléfono funciona de la mano con la IA de la nube. Más funciones serán manejadas por una combinación de IA dentro y fuera del dispositivo, y la distinción entre lo que puede hacer su teléfono y lo que puede hacer un servidor en la nube pasará a un segundo plano. No es el momento «ajá» que fue Night Sight, pero de todos modos será un cambio significativo en la forma en que pensamos sobre las capacidades de nuestro teléfono.