La première IA d'identification d'objet SAM de Meta était si bonne qu'elle a maintenant lancé SAM 2

Plus d'un an après le lancement du Segment Anything Model (SAM) et de son ensemble de données de masque 1B, Meta a fait une autre annonce. La société mère de Facebook a maintenant introduit SAM 2, un modèle de suivi de l'IA qui vous permet d'identifier et de suivre des objets visuels en temps réel.

SAM et son SA-1B ont connu du succès car ils avaient des applications en réalité mixte dans des domaines tels que les sciences marines et même la médecine, explique Meta. À tel point que Meta étend désormais les capacités de segmentation aux vidéos pour SAM 2, à partir du premier SAM précédent réservé aux images, et les codes sont également disponibles sur GitHub.

"SAM 2 peut segmenter n'importe quel objet et le suivre de manière cohérente dans toutes les images d'une vidéo en temps réel, ouvrant ainsi de nouvelles possibilités de montage vidéo et de nouvelles expériences en réalité mixte", décrit Meta.

Meta affirme également que le modèle Segment Anything de nouvelle génération est six fois plus rapide et plus précis que son prédécesseur, excellant dans divers tests de référence et applications de segmentation vidéo du monde réel. Il nécessite moins d'interactions humaines pour une segmentation vidéo efficace et prend en charge l'inférence en temps réel à environ 44 images par seconde (fps).

Publiés sous la licence permissive Apache 2.0, le code, les poids et le nouvel ensemble de données SA-V de SAM 2 sont disponibles gratuitement.

Son prédécesseur, le premier SAM, s'intégrait facilement dans différents systèmes et pouvait fonctionner avec différents types d'images dès sa sortie de la boîte. L'ensemble de données SA-1B, avec plus de 1.1 milliard de masques, a été créé à l'aide d'un mélange de méthodes manuelles et automatiques, ce qui rend la collecte de données plus rapide et plus facile.

Vous pouvez essayer la démo de SAM 2 ici.