Explicación del ajuste fino de los modelos de IA


Buzz Hays quiere asegurarse de que sus colegas de Hollywood comprendan los pros y los contras de la IA generativa, en particular, el ajuste de modelos.

Y un buen punto de partida para explicar el controvertido tema es el trabajo de Hays, líder global de Nube de Google‘s soluciones para la industria del entretenimiento, y su equipo hicieron para lograr «El mago de Oz” en el evento Esfera en Las Vegas en agosto.

«Lo que nos ayudó a superar este proyecto es un proceso que a veces resulta confuso y he escuchado a personas usar los términos incorrectamente, pero hay un proceso llamado ajuste fino de los modelos», dijo Hays. Variedad. «Podría decir, dame un resultado del Hombre de Hojalata haciendo algo sin que el modelo entienda nada sobre el Hombre de Hojalata real, por lo que surge una aproximación vaga. Pero eso no es lo suficientemente bueno cuando estás haciendo algo como esto. Así que realmente ajustamos nuestros modelos, que es un proceso que básicamente permite a cualquier propietario de IP tomar un modelo base que ha sido entrenado y ha estado usando todas las fuentes en las que la gente ha optado, para contribuir. Así que es un modelo legítimo, pero no entiende el Hombre de Hojalata. Entonces, lo que podemos hacer ahora es ajustarlo en el Hombre de Hojalata para decir: ‘Está bien, ya sabes cómo se mueve la gente. Ahora tenemos una persona que se parece a esta. Así que siempre que nos refieramos al Hombre de Hojalata, use esta versión de Hombre de Hojalata para eso’”.

Hays continuó: «En ese caso, teníamos modelos ajustados para cada uno de los personajes principales de la película, y eso nos permitió tener una reproducción fiel de esos actores, sin importar dónde miraran y qué tan cerca estuvieran de la cámara, y si se giraban. Cosas como, ¿cómo se ve la parte posterior de la cabeza del Hombre de Hojalata? Porque no hay mucho de eso en la película, pero hay un par de tomas que pudimos sintonizar para que en esas ocasiones en las que tuviera que girar la cabeza, Sabíamos exactamente cómo era”.

Hays, que fue productor de Hollywood durante más de tres décadas antes de pasar a su puesto actual en el gigante tecnológico, dice que «todos los datos que se utilizan para eso son propiedad del cliente y son mantenidos por él» y «nunca se incorporan al modelo». El jefe de la industria del entretenimiento de Google Cloud quiere asegurarse de que este concepto quede muy claro en el futuro, porque considera que la tecnología se vuelve cada vez más integral en el proceso de producción en las industrias del cine y la televisión.

«Ahí es donde viene el poder de la IA. Creo que, especialmente con los títulos de franquicia, tenemos que tener un cierto parecido que sea persistente a lo largo de la serie, entonces comienza a tener sentido que estos modelos afinados existan por esa razón en particular», dijo Hays. «Así que creo que abarca toda la gama cuando se trata de cómo se aprovechan estas cosas, en cuanto a qué contribuye a un resultado exitoso y qué no».

Hays enfatizó que si bien esta tecnología llegó para quedarse, Google Cloud ha implementado «barandillas importantes» para proteger la propiedad intelectual y la imagen a medida que continúa expandiéndose en el sector del entretenimiento.

«No permitimos que nuestros modelos generen una celebridad conocida o una imagen de nadie. Se les aplican protecciones muy cuidadosas», dijo Hays. «Tenemos barreras en cosas como la violencia. Tenemos barreras en la generación de hijos, un montón de estas cosas. Así que todas estas barreras contribuyen a esta idea de política de indemnización de que te protegeremos pero no haremos cosas malas, básicamente lo que es, pero ni siquiera te permitimos hacer cosas malas, porque esas barreras están protegiendo eso».

Hays señala cómo se utilizaron esos principios para “El Mago de Oz” en el proyecto Sphere y dice que “valora” las restricciones impuestas a lo que el equipo de Google Cloud puede hacer con la IA generativa.

«En realidad se trataba de cómo podemos honrar esta película original». dijo Hays. «Tenemos muchas restricciones que provienen del estudio que dice, por ejemplo, no se puede hacer que una actriz reemplace la actuación de Dorothy. No se pueden reemplazar las voces. No se puede usar la captura de movimiento para hacer una nueva actuación que no existía en el original, ese tipo de cosas. Soy un gran admirador de las restricciones en el cine. Creo que el mejor arte proviene de las restricciones, no de posibilidades ilimitadas. Así que fue una forma realmente interesante de trabajar en esto».



Fuente