Scott a été choisi comme responsable de la recherche pour le projet "Awakening".

Scott a été choisi comme responsable de la recherche pour le projet "Awakening".

Date published:2023/12/10

Scott a été sélectionné comme l'un des chercheurs du projet Awakening, un projet de recherche et de développement en technologie de pointe mené par de jeunes membres du personnel de l'AIST.

La participation de Scott au projet Awakening ne se fait pas avec l'équipe Playbox, mais à titre individuel.

Qu'est-ce que le projet Awakening ?

Le projet Awakening a été mis en place par l'Institut national des sciences et technologies industrielles avancées (AIST) afin de soutenir et d'encourager le personnel de recherche avancé dans le domaine des technologies profondes.

Cette année, les candidatures ont été sollicitées pour des thèmes de recherche et de développement visant à résoudre des problèmes sociaux en utilisant la technologie de l'IA et la bio-informatique, et 11 thèmes de recherche et de développement (18 chercheurs au total) ont été adoptés.

Les chercheurs des thèmes adoptés promouvront leur recherche jusqu'à la fin du mois de juillet 2024, avec le soutien du PM et du superviseur (SV) en charge de la recherche.

Pour plus d'informations, veuillez consulter le site web du projet Awakening (https://kakusei.aist.go.jp).

Qu'est-ce qui est mis en œuvre ?

En collaboration avec Daiga Someya, étudiant en deuxième année de master à l'Université de Tokyo, nous commencerons à travailler sur le thème "Développement d'un modèle multimodal à grande échelle dans lequel des séquences de mouvement et d'action multi-agents peuvent être saisies".

Les LLM actuels ont des difficultés à analyser les vidéos, où le mouvement spatial des personnes et des objets est important.

  1. Complexité informatique du traitement des vidéos

  2. l'incapacité à saisir les mouvements complexes de plusieurs personnes

  3. la prise en compte du contexte sur de longues périodes de temps.

Le problème est que le LLM ne peut pas capturer les mouvements complexes de plusieurs personnes et objets.

Par conséquent, cette recherche vise à construire un LLM capable d'interpréter efficacement et avec précision des vidéos d'une certaine longueur et dans lesquelles les mouvements et les interactions de plusieurs personnes sont importants.

Commentaire.

Nous sommes ravis d'avoir été sélectionnés pour le premier projet d'éveil de l'AIST. Bien que cette recherche soit axée sur le domaine et utilise des données sur le football, elle est largement applicable et son efficacité est particulièrement prometteuse dans les situations où le mouvement humain et l'interaction sont importants. Grâce à cette opportunité, j'ai hâte de travailler sur des recherches qui peuvent utiliser pleinement l'ABCI et d'élargir mes relations dans la communauté des chercheurs.

(Scott)