Scott wurde als Forschungsbeauftragter für das "Awakening Project" ausgewählt.

Scott wurde als einer der Forscher des Awakening-Projekts ausgewählt, einem Forschungs- und Entwicklungsprojekt junger AIST-Mitarbeiter im Bereich der Spitzentechnologie.

Scott nimmt am Awakening Project nicht mit dem Playbox-Team, sondern auf individueller Basis teil.

Was ist das Awakening Project?

Das Awakening Project wurde vom National Institute of Advanced Industrial Science and Technology (AIST) ins Leben gerufen, um "fortgeschrittenes Forschungspersonal im Bereich Deep Tech " zu unterstützen und zu fördern.

In diesem Jahr wurden Bewerbungen für Forschungs- und Entwicklungsthemen ausgeschrieben, die auf die Lösung gesellschaftlicher Probleme durch den Einsatz von KI-Technologie und Bioinformatik abzielen. 11 Forschungs- und Entwicklungsthemen (insgesamt 18 Forscher) wurden angenommen.

Die Forscher, die die ausgewählten Themen umsetzen, werden ihre Forschung bis Ende Juli 2024 mit Unterstützung des PM und des für die Forschung zuständigen Betreuers (SV) vorantreiben.

Weitere Informationen finden Sie auf der Website des Awakening-Projekts (https://kakusei.aist.go.jp).

Was wird durchgeführt?

In Zusammenarbeit mit Daiga Someya, einer Masterstudentin im zweiten Jahr an der Universität Tokio, werden wir an dem Thema "Entwicklung eines groß angelegten multimodalen Modells, in das Bewegungs- und Handlungssequenzen mehrerer Agenten eingegeben werden können" arbeiten.

Derzeitige LLMs haben Schwierigkeiten bei der Analyse von Videos, bei denen die räumliche Bewegung von Personen und Objekten wichtig ist, und sind besonders

1. Computerkomplexität bei der Verarbeitung von Videos

2. Unfähigkeit, die komplexen Bewegungen mehrerer Personen zu erfassen

3. Berücksichtigung des Kontexts über lange Zeiträume hinweg

Es gibt Probleme wie die folgenden.

Daher zielt diese Forschung darauf ab, ein LLM zu konstruieren, das Videos mit einer bestimmten Länge, in denen die Bewegungen und Interaktionen mehrerer Personen wichtig sind, effizient und genau interpretieren kann.

Angenommen durch das Awakening PJ von AIST (@AIST_JP ) 🎉.

Co-Forscher: Herr Someya (@agiats_football )
PM: Prof. Taninaka (@verypluming )

Das Thema lautet "Entwicklung eines groß angelegten multimodalen Modells, das Bewegungs- und Handlungssequenzen von Multi-Agenten eingeben kann",
Wir entwickeln ein LLM, das die menschliche Bewegung versteht. ⚽️⚽️https://t.co/r97TaRSxie

- Atom Scott (@AtomJamesScott) Dezember 8, 2023

Kommentar.

Wir freuen uns, dass wir für das erste AIST Awakening Project ausgewählt wurden. Obwohl diese Forschung domänenspezifisch ist und Fußballdaten verwendet, ist sie breit anwendbar und ihre Wirksamkeit ist besonders vielversprechend in Situationen, in denen menschliche Bewegung und Interaktion wichtig sind. Ich freue mich darauf, an Forschungsarbeiten zu arbeiten, die das ABCI in vollem Umfang nutzen können, und meine Kontakte in der Forschungsgemeinschaft auszubauen.

(Scott)