Une approche basée sur les domaines pour la reconnaissance des relations sociales

Les relations sociales sont la base de la vie quotidienne humaine. Développer des techniques pour analyser ces relations à partir de données visuelles présente un grand potentiel pour construire des machines qui nous comprennent mieux et sont capables d'interagir avec nous à un niveau social. Les enquêtes précédentes sont restées partielles en raison de la diversité et de la complexité écrasantes du sujet et se sont donc concentrées uniquement sur quelques relations sociales. Dans cet article, nous soutenons que la théorie basée sur les domaines de la psychologie sociale est un excellent point de départ pour aborder systématiquement ce problème. La théorie couvre tous les aspects des relations sociales et est également concrète et prédictive concernant les attributs visuels et les comportements définissant les relations incluses dans chaque domaine. Nous fournissons le premier ensemble de données construit sur cette conceptualisation holistique de la vie sociale, composé d'un espace d'étiquettes hiérarchique de domaines sociaux et de relations sociales. Nous contribuons également aux premiers modèles pour reconnaître ces domaines et relations, et constatons une performance supérieure pour les caractéristiques basées sur les attributs. Au-delà de la performance encourageante de l'approche basée sur les attributs, nous trouvons également des caractéristiques interprétables qui sont conformes aux prédictions de la littérature en psychologie sociale. Au-delà de nos découvertes, nous croyons que nos contributions entremêlent plus étroitement la reconnaissance visuelle et la théorie de la psychologie sociale, ce qui a le potentiel de compléter le travail théorique dans ce domaine avec des modèles empiriques et basés sur des données de la vie sociale.