Des chercheurs de MBZUAI ramènent le suivi vidéo à deux tours de décodage
Parallel Tube Decoding a achevé une trajectoire plus vite que la génération séquentielle lors d’un test VidSTG.
Période de l’événement / des données:
Publié: · Mis à jour:
Des chercheurs de MBZUAI et de l’Université de Californie à Merced ont mis au point Parallel Tube Decoding (PTD), une méthode de localisation temporelle d’objets et d’événements dans des vidéos. Elle vise à générer une trajectoire entière en deux tours de décodage: repérer l’intervalle pertinent, puis prédire ensemble les cadres de délimitation de cet intervalle.
Dans une comparaison contrôlée sur VidSTG rapportée par MBZUAI le 6 octobre, PTD a achevé une trajectoire en 0,4 seconde, contre 31,6 secondes pour la génération autorégressive standard. Le débit de cadres de délimitation était de 45,9 par seconde avec PTD, contre 0,5 pour la référence. Il s’agit de résultats de recherche sur un benchmark précis, et non d’une garantie de performance générale ou en production.
Données
Comparaison contrôlée VidSTG
Modèle de localisation vidéo évalué dans une comparaison contrôlée
- · Survenu
Résultats de recherche publiés
L’étude présente des résultats du modèle dans les conditions synthétiques ou contrôlées indiquées par la source.
Méthodologie
Les mesures concernent les modèles, la méthode de référence et le benchmark VidSTG décrits dans l’article. Elles ne représentent pas des vitesses universelles et ne sont pas agrégées entre pays ou modèles.
Mis à jour:
Sujets et lieux
Sujets proposés
- Science et technologieProposé
- Preserved editorial category/topic; broad candidate onlymbzuai.ac.ae ↗
Références géographiques
Seules les références géographiques présentes dans la source sont affichées. L’ouverture d’une carte externe est facultative. Les cartes facultatives utilisent OpenStreetMap. Leur ouverture transmet votre adresse IP et celle de ce site au fournisseur ; les coordonnées restent lisibles sans charger la carte.
- Émirats arabes unis · Rôle du lieu: Couverture · Type de lieu: Pays ou territoire · Précision de localisation: RégionaleÉléments probants
- Explicit preserved editorial country/region; no city or national centroid inferredmbzuai.ac.ae ↗