Seguimiento en Blender

TS : Completo Tipo : Softsub

Autortrotacalles

Blender es un programa multitarea que se utiliza para muchas cosas; desde esculpir figuras en tres dimensiones hasta hacer seguimiento (tracking) a seres humanos y localizaciones para colocar escenas completas con efectos visuales y demás. Es de las herramientas de uso libre y gratuito más utilzadas en seguimiento de movimiento (motion tracking) por los typesetters junto a su alternativa de pago MOCHA.

Blender realiza el seguimiento de movimiento analizando una secuencia de vídeo para recrear el movimiento de la cámara real dentro de un entorno 3D. Para definir este seguimiento utiliza marcadores (markers), que son puntos de referencia colocados por ti sobre áreas específicas del metraje que poseen alto contraste y un patrón de píxeles claro y estable. El algoritmo de Blender sigue la trayectoria 2D de estos marcadores a través de los fotogramas y luego utiliza esta información (en combinación con datos de la cámara, como la distancia focal), para resolver (resolve) la escena. Este proceso calcula el movimiento tridimensional (posición y rotación) de la cámara virtual y la ubicación 3D de los puntos rastreados permitiendo así la integración perfecta de elementos 3D en el vídeo original.

Dado que no es posible utilizarlo en solitario, sino que necesitas conocer el Aegisub Motion y cómo aplica la información de tus líneas, en esta guía no se tratará solo el uso de Blender, sino que se acompañará con las configuraciones apropiadas en Aegisub Motion.

Aegisub MotionRepositorio oficial del plugin.

Tu espacio de trabajo

Configura tu espacio de trabajo.

Lo primero que necesitas configurar correctamente es tu espacio de trabajo. A continuación tienes un vídeo con todo el proceso necesario con el que debes proceder.
Guardar la plantilla.

Puedes guardar este espacio de trabajo como una plantilla para no tener que configurarlo cada vez.

plantilla_typesetting_4.3.2.blendMi plantilla de espacio de tabajo.
Descargar AAE Export.

Debse descargar el archivo para exportar los datos de Blender a un formato que Aegisub Motion pueda leer.

AAE ExportRepositorio oficial del plugin.
Instalar el exportador.

Para instalar el exportador sigue el siguiente tutorial.

Conseguir un recorte con Aegisub Motion

Ahora que tienes tu espacio de trabajo listo, podemos comenzar a hacer un seguimiento. Lo primero que debes ahcer es utilizar Aegisub Motion para recortar un pedazo de tu episodio actual. Ese pedazo se establece con una línea que tenga la longitud en fotogramas de lo que quieras hacer el seguimiento. Esto no siempre es sencillo, así que pondré un ejemplo complicado para que entiendas el concepto. Debes pensar, sobre todo en movimientos muy largos, que a veces es necesario hacer más de un seguimiento por cartel.

Ejemplo de uso

Primero, debes elegir un buen fotograma en mitad de la secuencia, para que el cartel sea bien visible. Después estableces la duración de la secuencia que vas a rastrear, fijándote en qué elementos puedes utilizar para ello. Finalmente procedes a instalar los programas, automatizaciones y crear el recorte (trim).

Seguimiento con Blender

Ahora puedes simplemente dirigirte a la ubicación de tu recorte (por defecto estará junto al vídeo que has utilizado) y abrir la plantilla de Blender.

Abre la plantilla, carga el recorte y sigue los pasos necesarios para realizar el seguimiento.

Como has visto en el vídeo, primero se establecen los fotogramas del vídeo, después de precargan en RAM y luego se configura el porcentaje del área de búsqueda a 100% para que utilice exactamente la cantidad de píxeles que abarca el cuadrado de búsqueda. Blender utiliza ese cuadrado como el área en la que buscar el marcador. Si el objeto se mueve rápido, el área deberá ser mayor. Cuanto más grande sea, más lento será el seguimiento y más RAM consumirá Blender. Otro detalle visible es el uso de Normalizar, esto ayuda a hacer un mejor rastreo usando un poco más de recursos.

En la siguiente sección hablaré más sobre los marcadores, por ahora estás rastreando la posición, por lo que es innecesario. Tienes el recorte, has rastreado y hecho el seguimiento y has aplicado.

Ventana Apply de Aegisub Motion

Si nuestros fotogramas no corresponden con las líneas a las que estás aplicando, te saldrá vacío el recuadro de información de rastreo junto con el siguiente mensaje.

Error de Aegisub Motion por fotogramas

El mensaje indica que esperaba 138 fotogramas de información pero solo obtuvo 119. Tienes que revisar que has hecho todos los pasos correctamente.

Otra cosa es que dependiendo de qué quieras aplicar cambiará lo que elijas en las casillas.

Explicación de casillas Aegisub Motion

Aplicar el movimiento en el eje X.
Aplicar el zoom.
Aplicar la rotación.
Aplicar al clip en las líneas, ya sea para un clip rectangular (Rect Clip) o uno vectorial (Vect Clip).
Aplicar calculando las transformaciones que hay en las líneas.
Para que las casillas que usamos esta vez estén marcadas la próxima vez que abras.
Aplicar solo al clip y no al resto de elementos en las líneas.
Aplicar el movimiento en el eje Y.
Aplicar al origen, sobre todo si estás usando perspectivas usando el origen, hace que se tome en cuenta y se escriba también.
Estas son opciones que se activan si Scale (2) está marcado. Escala el borde para que al hacerse un zoom este no quede exageradamente pequeño o grande. Si se hace zoom-in o zoom-out es necesario escalar también para que la manera como se ve el elemento se mantenga inalterada.
Toma como absoluta la información del seguimiento sin hacer que dependa de la posición anterior. Útil si lo que quieres es posicionar algo encima de un objeto, pero sigue siendo mejor posicionar antes.
Escala la sombra con el zoom (2), similar al punto 10.
Escala el desenfoque con el zoom (2), similar al punto 10.
Establece la aceleración del escalado de borde, sombra y desenfoque.
Permite decidir si quieres que el seguimiento del clip se mantenga como rectangular o se pase a vectorial.
Sube o baja el valor para el punto 17.
Si está activado, hace que el seguimiento se aplique tomando en cuenta en qué fotograma de la secuencia está el reproductor en ese momento. Útil para hacer el cartel en un fotograma en el que se ve bien y luego aplicar incluso hasta donde ya casi no se ve (como en este ejemplo).
Aplicar de manera lineal. Toma la información del primer y último fotograma y realiza un \move de un punto al otro. Las transformaciones también se ponen en una sola línea. Solo los clips vectoriales cambian esto, ya que deben ser escritos línea a línea. Activa esta casilla si ves un movimiento como el siguiente en el graficador de Blender.

Como puedes ver, es un movimiento continuo y estable en ambos ejes, representados por el color rojo y verde: eso es lineal.

Usar esta casilla siempre que se pueda te ayuda a ahorrar muchas líneas, sobre todo en máscaras pesadas, ya que hace que se muevan con un \move y no teniendo que crear una copia entera por cada fotograma.

Ahora te mostraré el resto del proceso de este cartel. Fíjate que aplico sin lineal para poder copiar la información del último y penúltimo fotograma, y luego le quito el último fotograma a mi línea y mi seguimiento. Después pego las líneas que copié, como si hubiera avanzado en el tiempo y luego recuperado algo que borré. Aplico en lineal para ahorrar la mayor cantidad de líneas y extiendo la duración de ese último fotograma que recuperé de antes para hacer, ahora sí, el último seguimiento.

Marcadores y más cosas

Con todo lo anterior, puedes comenzar a hacer seguimientos, pero todavía te falta mucha información adicional. Blender es muy bueno en seguimiento de posición y zoom, pero adolece en cuestiones de rotación y perspectiva. Siempre que puedo, intento usar MOCHA para estos dos apartados que tanto le cuestan a Blender.

Marcadores

No es posible cambiar el tipo de información que está rastreando un marcador ubna vez se ha generado, así que asegúrate de ver qué movimientos está haciendo el objeto, si tiene zoom o no, si tiene un movimiento de perspectiva u otro tipo, para así estar siguiendo lo que corresponde.

Blender también permite hacer algunas cosas de forma manual para casos en los que no es posible un seguimiento automático. Toma por ejemplo el caso siguiente; no se trata de un zoom normal, sino que es un zoom con cambio en el campo visual. Eso lleva a que debas seguir la escala y posición del punto exacto en el que va tu cartel. Pero a veces, eso no es posible. ¿Qué puedes hacer en un caso así? Puedes triangular la posición y escala tomando como referencia otros puntos cercanos, haciendo una especie de triángulo con otros marcadores y promediando la información.

Proceso
Resultado

Seguimiento a mano

Otra cosa que se puede hacer con Blender es seguir a mano algunos fotogramas en caso de ser necesario. En este ejemplo dejaré algunos fotogramas sin seguimiento para mostrar la manera de solventar esto.

Seguimiento en zoom largo

A veces, cuando sigues un zoom largo, Blender pierde la pista del marcador a la mitad del seguimiento. Para seguir, basta con volver al último fotograma seguido y cambiar el área de búsqueda, o como me pasó a mí, tienes que hacer un fotograma a mano. Pero también es posible.

Además de lo visto hasta ahora, hay cuestiones tanto sobre el exportador como sus opciones avanzadas, suavizado, extrapolación de seguimiento y muchas otras características que pueden resolver más de un apuro en casos muy difíciles. Para esos caso recomiendo mirar esta guía de Fansubbing Wiki.

Con todo esto creo que ya he cubierto los truquitos que puedes aplicar con Blender. Más adelante completaré más esta guía.