Como usar o SAM 2 do Meta

A Meta lançou recentemente seu SAM 2 ou Segment Anything Model 2, um modelo de IA que pode segmentar objetos em imagens e vídeos de forma muito rápida e precisa. Ele funciona em tempo real e permite que você selecione objetos de imagens e vídeos, adicione conteúdo a eles, transponha-os para um projeto diferente e faça outras coisas. Você pode até mesmo combinar diferentes elementos para criar algo totalmente novo. Atualmente, o SAM 2 está disponível apenas como uma demonstração de pesquisa nos EUA, mas você pode experimentá-lo agora mesmo.

Visite o site SAM 2 da Meta e clique em “Experimente a demonstração”.

Isso abrirá um novo site. Aceite os termos e condições para usar o modelo e clique no botão ‘Experimente agora’.

Agora você verá um pop-up informando sobre o modelo e, novamente, você terá que clicar no botão “Aceitar” para prosseguir.

Agora, você verá vários frames de um homem jogando futebol. Há uma linha do tempo abaixo do frame selecionado. Para começar a usar o modelo, clique em qualquer objeto no frame para selecioná-lo. Quando você seleciona um objeto, ele adquire um contorno azul.

No lado esquerdo, você verá algumas opções. Elas mostrarão que você pode adicionar ou remover áreas do objeto selecionado clicando nos botões ‘Add’ ou ‘Remove’.

Você também pode clicar no botão “Rastrear objetos” para ver como ele se move e muda através dos diferentes quadros.

Depois de rastrear um objeto, você pode adicionar certos efeitos e alterá-lo. Por exemplo, você pode adicionar um gradiente ao objeto, pixelá-lo, colocar uma sobreposição sobre ele, etc. Esses efeitos podem ser adicionados tanto ao objeto selecionado quanto ao plano de fundo.

Como alternativa, você pode clicar no botão “Surpreenda-me” e a IA aplicará automaticamente vários efeitos.

Você pode alternar entre diferentes efeitos clicando no botão “Surpreenda-me” várias vezes e os efeitos ficarão visíveis em tempo real à direita.

Depois de fazer as alterações, você pode baixar o vídeo ou obter um link compartilhável que pode ser usado para compartilhar com outras pessoas.

Você também pode enviar seus próprios vídeos e ajustar diferentes objetos com a opção “Enviar seus próprios” ou selecionar outros vídeos clicando na opção “Navegar pela galeria”.

Coisas a saber

O SAM 2 pode rastrear vídeos por meio de diferentes quadros de vídeo, mesmo que o objeto desapareça temporariamente de vista.
A Meta lançou o SAM 2 sob a licença Apache 2.0, o que significa que qualquer pessoa pode usá-lo para criar experiências diferentes.
O modelo foi treinado em uma grande variedade de vídeos, incluindo vídeos geograficamente diversos de 47 países diferentes.
Você pode usar o SAM 2 sozinho ou com outros modelos de IA para obter resultados criativos exclusivos.