🚀Nowość od Meta FAIR: dziś przedstawiamy Seamless Interaction, projekt badawczy poświęcony modelowaniu dynamiki interpersonalnej. Projekt obejmuje rodzinę audiowizualnych modeli behawioralnych, opracowanych we współpracy z laboratorium Meta Codec Avatars + laboratorium Core AI, które przekształcają mowę między dwiema osobami w różnorodne, ekspresyjne gesty całego ciała i aktywne zachowania słuchowe, umożliwiając tworzenie w pełni ucieleśnionych awatarów w 2D i 3D. Modele te mają potencjał do tworzenia bardziej naturalnych, interaktywnych wirtualnych agentów, którzy mogą angażować się w interakcje społeczne podobne do ludzkich w różnych środowiskach. Dowiedz się więcej:

Udostępniamy również publicznie zestaw danych bezproblemowej interakcji z 4 000+ uczestników i 4 000+ godzin interakcji, co czyni go największym znanym zestawem danych wideo tego rodzaju. Ten zestaw danych umożliwia naszym audiowizualnym modelom behawioralnym zrozumienie i generowanie zachowań społecznych podobnych do ludzkich i stanowi kluczowy krok w kierunku zrozumienia i modelowania tego, jak ludzie komunikują się i zachowują, gdy są razem. Udostępniamy go tutaj, aby pomóc społeczności badawczej w rozwijaniu ich pracy:

Jeszcze jedno... Możesz również zapoznać się z tym raportem technicznym, w którym szczegółowo opisano naszą metodologię tworzenia modeli ruchu na podstawie zestawu danych, wraz z ramami oceny dla tego typu modelu:

Zajrzyj na nasz blog, aby dowiedzieć się więcej o całej historii: