Ya puedes grabar un concierto sin seguir a tu artista con la cámara: la IA de Samsung lo hace después

La nueva generación de teléfonos plegables de Samsung, conformada por el Galaxy Z Fold8 Ultra, Galaxy Z Fold8 y Galaxy Z Flip8, no solo llegó con novedades en diseño, hardware y desempeño, sino también con funciones de software muy atractivas, entre las que destaca My FanCam.

Si aún no la conoces, esta herramienta permite alternar encuadres a partir de la cámara ultra gran angular, aprovechando al máximo el formato de pantalla de los dispositivos plegables. El teléfono graba en plano abierto y, posteriormente, la inteligencia artificial recorta la toma de acuerdo con la relación de aspecto que mejor se adapte a tus necesidades.

La función mantiene el seguimiento constante sobre los sujetos o acciones principales, con la ventaja de guardar ambos archivos: el video original en ultra gran angular y la versión reencuadrada. Se trata de una solución ideada por Samsung para agilizar los tiempos de edición, ya que únicamente basta con seleccionar a la persona en pantalla para que la IA realice el trabajo.

Para profundizar en el proceso detrás de este desarrollo, integrantes del equipo responsable compartieron detalles sobre su creación. Entre ellos destacan Hwangpil Park, del equipo de Tecnología Visual de Samsung Research, así como Sunghwan Kim y Sherry Hong, del Grupo de Desarrollo Multimedia en MX Business.

"Empezamos preguntando cómo podríamos facilitar que los usuarios creen vídeos centrados en las personas que quieren ver. A medida que grabar, editar y compartir contenido en smartphones se ha vuelto habitual, los fancams de artistas favoritos han ganado popularidad en las redes sociales. En respuesta a esta tendencia, imaginamos My FanCam, una función que permite a cualquiera crear un vídeo centrado en la persona de su elección con solo unos pocos toques y colaboramos con Samsung Research para dar vida a la idea"

Sherry Hong 

Los especialistas explican que el núcleo de My FanCam, y la clave para realizar el seguimiento de un sujeto en encuadres complejos, reside en un avanzado modelo de inteligencia artificial enfocado en el reconocimiento de personas. Este algoritmo identifica y memoriza la ubicación exacta junto con los rasgos visuales de cada individuo, lo que le permite mantener el rastreo continuo sobre la misma persona a lo largo de toda la grabación.

El objetivo primordial es reducir los tiempos de procesamiento durante la edición. De este modo, si los usuarios desean alternar entre diferentes sujetos en un video grupal, no tendrán que someter el archivo a un nuevo análisis cada vez que cambien de toma, evitando esperas innecesarias.

Sherry Hong

"Diseñamos My FanCam para analizar a varias personas a la vez, permitiendo a los usuarios cambiar entre sujetos y ver los resultados al instante una vez completado el análisis inicial"

Sunghwan Kim 

Un aspecto clave de esta herramienta es la simplificación del proceso, permitiendo a los usuarios recortar las tomas con la relación de aspecto que mejor se adapte a sus necesidades o plataformas preferidas.

En la concepción de esta función trabajaron en conjunto el equipo de Tecnología Visual de Samsung Research y el Grupo de Desarrollo Multimedia en MX Business. Ambos grupos identificaron de primera mano los inconvenientes habituales al editar contenido y plantearon soluciones concretas, manteniendo reuniones semanales, y en momentos clave, para dar seguimiento continuo a los avances.

Durante el proyecto se llevó a cabo un riguroso proceso de prueba y error abarcando una amplia variedad de escenarios reales. Diversos integrantes de los equipos aportaron grabaciones personales, incluyendo videos de su etapa universitaria y de clubes de baile, para evaluar el desempeño de la herramienta.

El reto no fue menor: algoritmos que respondían de forma óptima en entornos de laboratorio mostraban comportamientos distintos ante imágenes reales debido a la velocidad de movimiento y los encuadres complejos. Ante esto, Samsung Research analizó las causas raíz hasta perfeccionar el modelo de inteligencia artificial y optimizar los métodos de seguimiento.

Hwangpil Park

"El principal reto era procesar cargas de trabajo de IA completamente en el dispositivo sin un servidor separado. Los vídeos más largos requieren más cálculo, así que tuvimos que considerar la velocidad de procesamiento, el consumo de energía y la generación de calor"

Sunghwan Kim 

Eso sí, los tres ingenieros involucrados en este proyecto recomiendan grabar con un ajuste de alta resolución y mantener un encuadre amplio para dejar suficiente margen de movimiento alrededor del sujeto. Al seleccionar a una persona en edición, se aconseja elegir un fotograma donde no se solape demasiado con otros individuos y en el que su rostro o cuerpo completo permanezcan claramente visibles.

Un aspecto sumamente atractivo es que la herramienta no se limita únicamente al material grabado en el momento con el propio teléfono, sino que también procesa videos antiguos de conciertos, viajes o actividades previas. De esta manera, al no tener la presión de encuadrar a una persona en específico durante la toma, los usuarios pueden disfrutar del evento y dejar la composición en manos de la inteligencia artificial.

"Como My FanCam funciona con vídeos que no se graban en un dispositivo Galaxy, espero que la gente lo pruebe con una amplia variedad de metraje. Puede ofrecer una perspectiva fresca sobre vídeos antiguos, ayudando a los usuarios a revivir momentos significativos al centrarse en alguien especial"

Hwangpil Park

Finalmente, los desarrolladores destacan que lo que comenzó como una idea enfocada en la comodidad del usuario ha evolucionado hasta convertirse en My FanCam, una experiencia de video inédita que combina inteligencia artificial, optimización móvil y un estrecho trabajo en equipo. La promesa de la marca es que esta herramienta responda con la misma eficacia desde conciertos masivos hasta actividades de la vida cotidiana, facilitando la captura y edición de los momentos que más vale la pena recordar.