Explicação de modelos de IA de ajuste fino

Buzz Hays quer ter certeza de que seus colegas em Hollywood entendem os prós e os contras da IA ​​generativa, em particular, do ajuste fino dos modelos.

E um bom ponto de partida para explicar o tema polêmico é o trabalho de Hays, líder global da Google Nuvemas soluções da indústria de entretenimento, e sua equipe fez para realizar o “O Mágico de Oz”no evento Sphere em Las Vegas de volta em agosto.

“O que nos ajudou neste projeto foi um processo que às vezes fica confuso, e ouvi pessoas usarem os termos incorretamente, mas há um processo chamado ajuste fino dos modelos”, disse Hays. Variedade. “Eu poderia dizer, dê-me uma saída do Homem de Lata fazendo algo sem que o modelo entenda nada sobre o Homem de Lata real, então surge uma aproximação vaga. Mas isso não é bom o suficiente quando você está fazendo algo assim. Então, na verdade, ajustamos nossos modelos, que é um processo que basicamente permite que qualquer proprietário de IP pegue um modelo básico que foi treinado e tem usado todas as fontes que as pessoas optaram para contribuir. Portanto, é um modelo legítimo, mas não entende o Tin Cara. Então o que podemos fazer agora é ajustar o Homem de Lata para dizer: ‘OK, você sabe como as pessoas se movem. Agora temos uma pessoa assim. Sempre que nos referirmos ao Homem de Lata, use esta versão do Homem de Lata para isso.’

Hays continuou: “Nesse caso, tínhamos modelos ajustados para cada um dos personagens principais do filme, e isso nos permitiu ter uma reprodução fiel desses atores, não importando para onde eles olhassem e quão perto estivessem da câmera, e se eles se virassem. Coisas como, como é a parte de trás da cabeça do Homem de Lata? Porque não há muito disso no filme, mas há algumas tomadas lá que poderíamos ajustar para que nas ocasiões em que ele tivesse que virar a cabeça, sabíamos exatamente como ele era.”

Hays, que foi produtor de Hollywood durante mais de três décadas antes de transitar para a sua posição atual na gigante tecnológica, diz que “todos os dados utilizados para isso pertencem e são mantidos pelo cliente” e “nunca são incorporados no modelo”. O chefe da indústria de entretenimento do Google Cloud quer garantir que esse conceito seja claro no futuro, porque ele vê a tecnologia se tornando cada vez mais integrante do processo de produção nas indústrias de cinema e TV.

“É aí que vem o poder da IA. Acho que especialmente com títulos de franquia, temos que ter uma certa semelhança que seja persistente ao longo da série, então começa a fazer sentido que esses modelos de ajuste fino existam por esse motivo específico”, disse Hays. “Então, acho que isso abrange toda a gama quando se trata de como essas coisas são aproveitadas, o que contribui para um resultado bem-sucedido e o que não o faz.”

Hays enfatizou que, embora essa tecnologia tenha vindo para ficar, o Google Cloud implementou “proteções significativas” para proteger IP e semelhança à medida que continua a se expandir no entretenimento.

“Não permitimos que nossos modelos gerem uma celebridade conhecida ou imagem de alguém. Há proteções muito cuidadosas aplicadas a eles”, disse Hays. “Temos proteções para coisas como violência. Temos proteções para gerar filhos, um monte dessas coisas. Então, todas essas proteções contribuem para essa ideia de política de indenização de que protegeremos você, mas não faremos coisas ruins, basicamente o que é, mas nem sequer permitimos que você faça coisas ruins, porque essas proteções estão protegendo isso.”

Hays aponta como esses princípios foram usados ​​para “O Mágico de Oz” no projeto Sphere e diz que “valoriza” as restrições impostas ao que a equipe do Google Cloud pode fazer com IA generativa.

“Tratava-se realmente de como podemos homenagear este filme original?” Hays disse. “Temos muitas restrições que vieram do estúdio que diz: você não pode ter uma atriz substituindo a atuação de Dorothy, por exemplo. Você não pode substituir vozes. Você não pode usar a captura de movimento para fazer uma nova performance que não existia no original, esse tipo de coisa. Sou um grande fã de restrições na produção de filmes. Acho que a melhor arte vem de restrições, não de possibilidades ilimitadas. Então foi uma maneira realmente interessante de trabalhar nisso.”