Novo modelo de IA da Meta identifica objetos em imagens e vídeos

Na última quarta-feira (5), a Meta anunciou o Segment Anything Model (SAM), seu novo modelo de inteligência artificial (IA) que consegue identificar objetos individuais em imagens e vídeos.

O SAM identifica quais pixels da imagem pertencem a determinado objeto. Dessa forma, em um vídeo de demonstração, mostrou que, ao escrever a palavra “gato”, a ferramenta desenhou caixas ao redor de cada um dos vários gatos presentes em uma imagem.

Já em outro exemplo, enquanto realizava uma filmagem, a IA identificava cada objeto que surgia na tela de gravação.

Outra novidade é que a ferramenta também consegue separar um mesmo objeto por camadas ou destacá-las no formato 3D.

A equipe de IA da Meta, em comunicado oficial, explicou mais detalhes:

”Pretendemos democratizar a segmentação apresentando o projeto Segment Anything: uma nova tarefa, conjunto de dados e modelo para segmentação de imagens, conforme explicamos em nosso trabalho de pesquisa. Estamos lançando nosso modelo geral de Segment Anything (SAM) e nosso conjunto de dados de máscara Segment Anything 1-Billion (SA-1B), o maior conjunto de dados de segmentação de todos os tempos, para permitir um amplo conjunto de aplicativos e promover pesquisas adicionais sobre modelos de base para visão computacional.”

Ainda segundo a Meta, os recursos são baseados no tipo de IA generativa popularizada pelo ChatGPT, que cria conteúdo totalmente novo em vez de simplesmente identificar ou categorizar dados. Mark Zuckerberg, presidente-executivo da Meta, disse que incorporar esses “auxílios criativos” aos aplicativos da empresa é uma prioridade para este ano.

A Meta já usa tecnologia semelhante ao SAM internamente para atividades como marcação de fotos, moderação de conteúdo proibido e determinação de quais postagens recomendar aos usuários do Facebook e do Instagram. No entanto, o lançamento do SAM ao público e aos pesquisadores visa ampliar o acesso a esse tipo de tecnologia.

O modelo e o conjunto de dados do SAM já estão disponíveis para download sob uma licença não comercial. Teste o SAM no link https://segment-anything.com/.