Como a inteligência artificial está sendo usada no cinema online?

Muito se fala sobre inteligência artificial na teoria, mas poucas pessoas entendem como ela é útil na prática. Alexey Melnikov, gerente de produto do cinema online KION, fala em detalhes sobre como a IA é integrada a um produto tecnológico moderno, como algoritmos treinados descarregam pessoas reais e melhoram a experiência do usuário do serviço.

Inteligência artificial hoje

Em sentido amplo, inteligência artificial ou IA (Artificial Intelligence, AI) é um sistema, programa ou dispositivo que imita as funções intelectuais de uma pessoa. Essas funções podem incluir análise de dados, tomada de decisões e até mesmo a criação de novos conteúdos, como imagens.

Também costuma-se chamar de inteligência artificial a disciplina envolvida na criação de tais sistemas, programas e dispositivos. Dentro desta disciplina existem várias áreas, uma das quais é a aprendizagem automática (Machine Learning, ML).

O aprendizado de máquina é um método de trabalhar com IA, quando o sistema é treinado fazendo com que ele resolva muitos problemas semelhantes e cada vez leve em consideração a experiência adquirida: ou seja, a solução da tarefa anterior ao resolver a nova.

Ao contrário dos estereótipos comuns, as IAs não são máquinas que pensam de forma independente e se preparam para a rebelião, nem programas que podem substituir totalmente uma pessoa. No mundo moderno, a IA não consegue funcionar corretamente sem o controle de um especialista vivo, embora encontremos constantemente IA.

Ele realiza a moderação inicial das redes sociais e filtra o spam no e-mail, escolhe a rota mais rápida no navegador com base nas informações de tráfego, recomenda produtos potencialmente interessantes na loja online com base no conhecimento de nossas compras anteriores, reconhece a fala humana ao acessar alto-falantes inteligentes etc.

A IA é uma ótima maneira de otimizar o trabalho monótono que exigiria muitos recursos humanos. Tarefas do mesmo tipo são delegadas a algoritmos para que os funcionários não percam tempo e esforço com elas, o que será útil para fazer um trabalho mais criativo: desenvolver inovações e melhorar processos.

Nos cinemas online, a IA também é usada de forma bastante ativa. Usando a plataforma KION como exemplo, vejamos como uma máquina treinada pode melhorar a experiência do usuário do visualizador. ]

Sistema de recomendação

Uma das funções mais importantes da IA ​​no cinema online é a seleção de conteúdo recomendado. Vitrines digitais com filmes e séries personalizadas para o usuário permitem que ele sinta uma abordagem individual e atenção da plataforma.

Mas apenas com a condição de que as recomendações sejam feitas corretamente. Essas vitrines são formadas por meio de um algoritmo treinado que coleta e analisa informações sobre os usuários e as converte em recomendações. O algoritmo é re-treinado a cada novo usuário e a cada nova ação, para que a qualidade das recomendações melhore constantemente.

O trabalho da IA ​​é bastante complicado: não só o fato de visualizar ou consultar na busca é importante, mas também a duração da visualização. O algoritmo é capaz de entender que você gostou do programa que assistiu por 10 minutos a menos do que o programa que assistiu do início ao fim.

Ele analisa todos os dados coletados, determina seu valor (uma visualização mais longa é mais valiosa que uma curta, uma consulta de pesquisa recente é mais valiosa que uma antiga, visualizações dizem mais sobre um usuário do que cliques e assim por diante) e os usa para formar recomendações.

O algoritmo também usa informações de conteúdo. Tanto os dados básicos (diretor, elenco, gênero, duração, país de produção, ano de lançamento) são importantes, quanto atributos mais complexos (o esquema de cores do filme ou série, temas abordados, semelhança no arranjo musical).

Entre outras coisas, a IA é capaz de levar em consideração vários interesses do usuário ao mesmo tempo. Por exemplo, uma pessoa pode gostar de filmes de terror sobre casas abandonadas, filmes sobre vida selvagem e comédias russas.

Nesse caso, a IA deve construir diversos vetores de interesses e levar em conta cada um deles ao gerar recomendações. É importante que o algoritmo seja configurado para recomendar não apenas filmes e séries diretamente relacionados, mas também conteúdos de categorias relacionadas, para que as recomendações não sejam monótonas e não parasitam dois ou três gêneros favoritos que foram assistidos em buracos.

Reprodução automática

O recurso Autoplay também é um mérito da IA. Com sua ajuda, garantimos a interação contínua do usuário com a plataforma: quando o espectador chega ao final de um filme ou série, lançamos o próximo filme, semelhante ao que acabou de assistir, em paralelo com os títulos em uma janela separada.

Deixamos o espectador escolher se quer terminar os créditos ou passar para o próximo filme. Se o usuário estiver ocioso e não fizer uma seleção, após alguns segundos o próximo filme será iniciado automaticamente.

É importante que este próximo filme esteja na área de interesse do usuário, esteja correlacionado com seu histórico de visualização, então aqui novamente um sistema de recomendação baseado em IA vem em socorro. Também incluímos algoritmos de aprendizado de máquina durante o desenvolvimento, teste e pelo menos na primeira vez que usamos esse recurso: eles nos permitiram monitorar a correção da função Autoplay, corrigir erros e melhorar esta ferramenta.

Ignorar créditos

Outra forma de usar IA no cinema online é a função de pular títulos e introduções. Seu valor é bastante óbvio: economiza tempo, atenção e nervos, porque assistir o mesmo protetor de tela em cada episódio da série pode ser muito cansativo.

Poucas pessoas assistem aos títulos: via de regra, assim que os títulos começam, a pessoa pega a barra de rolagem para chegar ao final e iniciar o próximo episódio o mais rápido possível. Primeiro, marcamos o conteúdo e marcamos o início e o fim das introduções e títulos e, consequentemente, adicionamos a capacidade de ignorá-los no conteúdo Originals – projetos originais produzidos por KION.

Logo em seguida, o público começou a pedir para adicionar o mesmo recurso em outros filmes e séries, era muito conveniente pular títulos e protetores de tela. Naturalmente, decidimos imediatamente confiar a marcação da série à IA.

Começamos a desenvolver a função nas aplicações clientes simultaneamente com o trabalho de automação da marcação. A tarefa da IA ​​era encontrar os mesmos frames em diferentes episódios da série. Como as introduções e os créditos geralmente mudam a cada temporada, decidiu-se executar o algoritmo apenas em uma temporada.

Claro, tivemos que processar uma quantidade enorme de dados – temos arquivos com episódios de séries.Para que a rede neural funcione corretamente, precisamos extrair cada quadro desses arquivos de episódios e depois transferir cada quadro para essa rede neural.

Decodificar cada quadro é uma tarefa muito difícil, em média temos que decodificar 1.200.000 quadros por temporada. Mas, apesar do trabalho, o processo compensa: os usuários ficam muito satisfeitos com a possibilidade de pular títulos e introduções e ir direto para a visualização do conteúdo de seu interesse. E as necessidades do público são nossa prioridade.

Geração de pôster

A inteligência artificial também é muito útil para soluções interativas. Usando algoritmos de visão computacional, ensinamos a IA a gerar pôsteres de filmes e séries de forma independente para a plataforma KION. Se antes o editor selecionava manualmente fotos bem-sucedidas olhando horas de conteúdo, agora o próprio sistema oferece a ele várias opções para escolher.

A IA seleciona fotos estilisticamente apropriadas: close-ups de atores, fragmentos significativos nos quais o personagem principal aparece e também os avalia esteticamente. Por exemplo, o sistema é capaz de analisar a observância das regras de composição e filtrar os quadros em que os olhos do ator estão fechados.

Reconhecimento de ator e música

Em um futuro próximo, o KION terá outros recursos convenientes que usam IA para implementar. Por exemplo, planejamos lançar um sistema de reconhecimento de atores e músicas. Isso significa que, ao assistir a um filme ou série, você pode pausar e obter informações sobre qual dos atores está na tela naquele momento e qual faixa está tocando ao fundo.

Se desejar, a música pode ser adicionada à sua playlist na plataforma de streaming.